2025年2月1日
星期六
|
欢迎来到叙永县图书馆•公共文化服务平台
登录
|
注册
|
进入后台
[
APP下载]
[
APP下载]
扫一扫,既下载
全民阅读
职业技能
专家智库
参考咨询
您的位置:
专家智库
>
>
高彦杰
作品数:
2
被引量:16
H指数:2
供职机构:
教育部
更多>>
发文基金:
中央高校基本科研业务费专项资金
更多>>
相关领域:
自动化与计算机技术
更多>>
合作作者
陈跃国
教育部
杜小勇
教育部
卞昊穹
教育部
作品列表
供职机构
相关作者
所获基金
研究领域
题名
作者
机构
关键词
文摘
任意字段
作者
题名
机构
关键词
文摘
任意字段
在结果中检索
文献类型
2篇
中文期刊文章
领域
2篇
自动化与计算...
主题
2篇
内存
1篇
等值
1篇
引擎
1篇
数据处理
1篇
基于内存
1篇
架构
1篇
处理引擎
1篇
大数据
1篇
SPARK
机构
2篇
中国人民大学
1篇
教育部
作者
2篇
高彦杰
1篇
卞昊穹
1篇
杜小勇
1篇
陈跃国
传媒
1篇
华东师范大学...
1篇
程序员
年份
2篇
2014
共
2
条 记 录,以下是 1-2
全选
清除
导出
排序方式:
相关度排序
被引量排序
时效排序
Spark上的等值连接优化
被引量:12
2014年
等值连接作为数据分析中最常用、代价最高的操作之一,在Spark上的实现和优化与传统并行数据库有很大的差别,传统并行数据仓库中基于数据预划分的连接算法在Spark上难以实现,而目前被广泛采用的Broadcast Join和Repartition Join性能较差,如何提高连接性能成为基于Spark的海量数据分析的关键.本研究将Simi-Join与Partition Join的优势相结合,并基于Spark上的特性提出了一种优化的等值连接算法.代价分析和实验表明本算法比现有基于Spark的数据分析系统中的连接算法性能提升1~2倍.
卞昊穹
陈跃国
杜小勇
高彦杰
SparkSQL:基于内存的大数据处理引擎
被引量:4
2014年
作为Shark的下一代技术,SparkSQL的性能已完全超过Shark,且由于底层机制相同,用户可以做到无缝迁移,而受到用户的青睐。本文将深入分析SparkSQL架构思路和优化策略,并与同类产品进行比较。
高彦杰
陈冠诚
关键词:
数据处理
引擎
内存
架构
全选
清除
导出
共1页
<
1
>
聚类工具
0
执行
隐藏
清空
用户登录
用户反馈
标题:
*标题长度不超过50
邮箱:
*
反馈意见:
反馈意见字数长度不超过255
验证码:
看不清楚?点击换一张