河北省科学技术研究与发展计划项目(12213511D)
- 作品数:5 被引量:6H指数:2
- 相关作者:黄伟建杜巍刘影黄伟力更多>>
- 相关机构:河北工程大学更多>>
- 发文基金:河北省科学技术研究与发展计划项目河北省科技支撑计划项目河北省高等学校科学技术研究指导项目更多>>
- 相关领域:自动化与计算机技术矿业工程更多>>
- MapReduce高可用性的研究与优化被引量:2
- 2014年
- 为提高MapReduce的可用性,提出一种分布式Jobtracker节点模型的优化方案。对Hadoop的核心技术之一MapReduce编程模型中的作业调度过程进行研究分析,指出单一Jobtracker带来的性能瓶颈,提出相应的优化方案;在此基础上,建立总体设计模型,将原MapReduce中单一的Jobtracker节点优化为具有多个Jobtracker节点的Jobtracker集群;在该模型的基础上,采用多对多的通信方法优化通信方式,以维护作业量列表的方式优化作业均衡,提高MapReduce的可用性和作业执行效率。通过测试系统的容错性和执行效率,验证了优化后模型的高可用性和高效性。
- 黄伟建周鸣爱
- 关键词:云计算编程模型高可用性
- 基于Web使用挖掘的用户有效偏爱浏览路径研究
- 2014年
- 在浏览偏爱路径研究的基础上提出了网络拓扑结构加权的方法,与用户浏览路径进行结合得到用户实际浏览偏爱路径。设定网络拓扑主干路径的权值小于远离主干路径的路径权值,远离主干路径的高频路径是网络拓扑设计者期望得到的有效信息,能够较好地用于改进网站设计,进而提高用户服务质量。最后与NPPMA算法在有效度方面进行了比较,以此证明算法的可取之处。
- 黄伟建冯立娟
- 关键词:浏览路径网络拓扑
- 电子商务环境下的Web数据挖掘系统架构设计被引量:3
- 2014年
- 通过对Web数据挖掘技术及其在电子商务中的应用进行了研究,发现传统的电子商务Web数据挖掘系统具有挖掘引擎封闭、难以对算法动态管理、挖掘结果难以重复利用的不足,本文提出了基于Web服务技术和移动Agent技术的适用于电子商务领域的Web挖掘系统的架构,此架构具有更好的跨平台性和更高的挖掘效率。
- 黄伟建桑志超杜巍
- 关键词:电子商务WEB服务WEB数据挖掘移动AGENT架构
- Multi-Agent技术在元搜索引擎中的应用研究
- 2012年
- 随着科技的迅猛发展,对Agent技术的研究已成为当前的前沿热点问题之一。本文将Agent技术运用到元搜索引擎中,建立一个基于Multi-Agent的元搜索引擎系统模型。该模型采用多Agent组织结构,在一定程度上弥补了元搜索引擎智能化程度低、无法满足个性化需求方面的缺陷。文中将元搜索引擎中的Agent分成管理Agent和任务Agent两大类,并对模型中多Agent之间的通信方式、协调机制和性能评价进行了深入研究。
- 黄亮
- 关键词:AGENT元搜索引擎个性化检索
- 连接算法在煤矿安全生产中的应用被引量:1
- 2015年
- 分析了影响煤矿安全生产的因素,引入大数据技术对煤矿安全生产数据进行分析;提出了一种基于Bloom过滤器的星型连接算法,用于处理大数据分析过程中多表连接问题。试验结果表明,与传统算法相比,该算法能在空间和时间上提高采用大数据技术分析煤矿安全生产数据的效率。
- 黄伟力刘影
- 关键词:煤矿安全大数据BLOOM过滤器MAPREDUCE