MONGODB SPARK CONNECTOR
测试数据量:
测试结果:
116万数据通过4个表的join,从SQL Server查出,耗时1分多。MongoSparkConnector插入平均耗时:3分30秒。
总计耗时4分半-5分钟。
Spark 学习笔记之 MONGODB SPARK CONNECTOR 插入性能测试
原文:http://www.cnblogs.com/AK47Sonic/p/7392710.html