公共文化服务平台

共 1 条记录，以下是 1-1

全选清除导出

排序方式：

基于Spark的大数据统计中等值连接问题的优化: 2017年; 伴随着互联网应用技术的飞速发展,导致传统的数据处理技术已经无法满足对大数据高效处理的要求。因此对现有的大数据的统计分析便急需相应的大数据技术的支持。为了解决实际Spark应用中的Join操作低效的问题,首先,提出一种高效的基于BloomFilter过滤再分区算法,通过该算法率先过滤掉绝大部分不符合条件的无效连接,然后针对过滤数据产生的倾斜问题进行再分区操作,以便能充分发挥各个工作节点的计算资源,达到在最大程序上优化Join过程的目的。; 刘容辰周明强皮兴杰赵欣; 关键词：大数据 SPARK BLOOM FILTER SHUFFLE

全选清除导出

共1页<1>

刘容辰