传统的协同过滤推荐技术在大数据环境下存在一定的不足。针对该问题,提出了一种基于云计算技术的个性化推荐方法:将大数据集和推荐计算分解到多台计算机上并行处理。在对经典Item CF算法Map Reduce化后,建立了一个基于...
传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案:由多台计算机完成日志文件的存储、分析、挖掘工作,建立了一个基于Hadoop开源框架的并行网络日志分析引擎,在MapRe...
经过几年的发展,并行编程模型MapReduce产生了若干个改进框架,它们都是针对传统MapReduce的不足进行的修正或重写.本文阐述和分析了这些研究成果,包括:以HaLoop为代表的迭代计算框架、以Twitter Storm为代表的实时计算...
基于FlexSim的校园共同配送服务站分拣流程仿真研究 CNKI文献
以高校末端物流配送为研究对象,利用FlexSim计算机仿真技术,设计某高校校园共同配送服务站分拣系统的作业流程,建立人力和设备模型并仿真,对运行结果数据进行定量分析,实现物流服务站整体工作效率的提高。
基于大数据技术的舆情分析与决策支持系统架构研究 CNKI文献
大数据背景下,传统的舆情分析技术和监控系统很难适应海量舆情信息的大数据特征。构建了基于大数据技术的舆情分析与决策支持系统的分层架构,并详细介绍了系统中所使用的关键技术。大数据给社会舆情分析与政府决策支持...
随着社交网络的大规模发展,传统的基于文本分析的热点话题发现技术面临严峻的挑战。构建了针对社交媒体的舆情热点发现分层架构模型,详细介绍了模型中的关键技术,并将时间因素和链接分析技术引入舆情热点发现算法,阐述...
目前大数据人才培养在国内外高校开始普及,但大数据实验室的几种常用建设方法都存在着诸多问题。针对大数据实验环境的特点,提出一种利用Docker容器技术在单台普通计算机上构建Hadoop集群的方法,并详述了Hadoop镜像制...
应毅 刘亚军... 《实验室研究与探索》 2018年02期 期刊
关键词： 大数据实验室 / Docker容器技术 / Hadoop集群 / 镜像
下载（342）| 被引（8）
基于单一节点的数据挖掘系统在处理海量数据集时存在计算瓶颈,针对该问题,提出了一种基于云计算技术的数据挖掘方法:将大数据集和挖掘任务分解到多台计算机上并行处理.在对经典Apriori算法MapReduce化后,建立了一个基...
针对物流末端配送服务中派件调度时区域划分不合理、工作分配差异大的问题,提出"先分区,后排班"2阶段派件调度算法.首先利用GIS技术、Web技术和移动开发技术,构建了针对"最后1 km"配送的智能物流...
目前,在精准医疗背景下,需要研究不同抗肿瘤药物对患者的治疗效果,并将最敏感的药物作用于患者,从而实现肿瘤的个体化治疗。而药物敏感性的研究依赖于高度还原患者肿瘤特征的肿瘤模型。目前,常见的肿瘤模型包括致癌物...
基于GIS技术和加权kNN算法的实时揽件调度方法 CNKI文献
在物流末端的配送服务中,实时揽件调度研究尚处于空白。基于GIS技术、Web技术和移动开发技术,构建了针对"最后一公里"配送的智能物流信息系统。在此系统框架内,改进加权kNN分类算法实现快递人员的实时揽件调...
大数据和云计算是当前IT行业两个最大的创新,新技术的高速发展带动人才需求的高速增长。在分析计算机专业人才培养现状的基础上,提出在软件工程专业下设置数据工程方向;对应用型数据工程师的能力培养进行剖析,给出数据...
跨国并购是当代世界经济发展过程中表现出来的重要特征,在过去的二三十年里世界跨国并购的金额和数量发展突飞猛进。同时,随着改革开放事业的不断发展,企业竞争力日益增强,中国企业“走出去”的步伐也在加快,在跨国并...
社交网络下的热点话题发现技术是当前舆情分析与预测的基础性研究问题。传统的基于聚类、分类的文本分析方法不适用于网络舆情挖掘,经典的PageRank算法仅考虑网页间的链接结构,为了更加准确和全面地多角度综合评价舆情...
基于ADO.NET技术的Web访问数据库研究与实现 CNKI文献
首先介绍了ADO.NET、ASP.NET和三层体系结构,在此基础上讨论了四种在Web应用程序中基于ADO.NET的数据库访问及其实现技术,最后用ASP.NET/C#语言实现了编程。
文章列举了常用的阻燃剂,并对目前用量最大的卤系阻燃剂的潜在副作用做了介绍,分析了氢氧化镁阻燃剂的优势及其阻燃机理,得出了未来氢氧化镁阻燃剂必将有广阔发展前景的结论。
以智能物流系统为研究背景,利用Lucene框架,设计并实现了地名地址全文检索机制,在解决关系数据库模糊查询效率低下问题的同时,为基于GIS的物流配送最短路径计算提供技术支撑,实现末端物流配送服务整体工作效率的提高。
针对高校传统信息化建设中存在的重复建设、能耗高、信息孤岛等问题进行研究,提出一种基于SPI的校园云计算框架体系,同时阐述云计算在数字校园建设中所带来的节约投资成本、提高资源共享水平、节能减排等六种优势。在...
基于单一服务器的Web挖掘系统在处理海量数据集时计算能力不足,针对该问题,提出了一种基于云计算的挖掘方法。将大数据集和挖掘任务分解到多台计算机上并行处理。实现了一个基于Hadoop开源框架的并行Web挖掘平台,同时...
应毅 任凯... 《科学技术与工程》 2013年05期 期刊
关键词： Web挖掘 / 云计算技术 / Hadoop / MapReduce-LP模型
下载（215）| 被引（12）
社交媒体的发展使传统的舆情热点发现技术面临严峻挑战.结合时间因素,构建了基于微博页面的数据爬取与热点发现模型;通过时间因子修正热度指数,使针对舆情热点重要性的排序更具时效性.依托新浪微博数据的实验表明,时间...
