与传统数据中心节能算法不同,MapReduce计算任务的数据依赖性使得设计HDFS(Hadoop Distributed File System)节能算法时必须保证集群中所有数据块的可用性,即任意数据块或其副本中的至少一块处于活动状态.根据HDFS集群...
作为云计算底层核心基础设施,分布式数据存储系统是各种云计算服务的基础,是云计算重要的组成部分.然而随着系统规模的不断扩大以及设计时对能耗因素的忽略使其暴露出高能耗问题.由于存在数据可用性要求,使其并不能简...
云计算中心规模的不断扩大以及设计时对能耗因素的忽略,使其日益暴露出高能耗低效率的问题.为提高MapReduce框架能耗利用率,首先对MapReduce任务进行了能耗建模,提出基于CPU利用率估算、主要部件能耗累加及平均功耗估...
莪术油对直肠癌SW1463细胞株增殖、凋亡及Caspase-3、Bax、... CNKI文献
目的探讨莪术油对直肠癌SW1463细胞株增殖、凋亡及相关蛋白Caspase-3、Bax、Bcl-2表达的影响。方法水蒸气蒸馏法提取黔产莪术挥发油,配制成40、80、120、160、200、240、280 mg/L浓度梯度,干预SW1463细胞24、48、72 h...
现有的FIFO、Fair、Capacity、LATE及Deadline Constraint等Map Reduce任务调度器的主要区别在于队列与作业选择策略的不同,而任务选择策略基本相同,都是将数据的本地性(data-locality)作为选择的主要因素,忽略了对Ta...
QPR-NN:一种结合二次多项式回归与神经网络的推荐算法 CNKI文献
针对传统推荐算法不能很好地适应数据高规模及高稀疏性的问题,结合深度学习数据建模的方法,提出了一种结合二次多项式回归与神经网络(QPR-NN)的推荐算法。在对已有特征提取方法缺陷分析的基础上,利用二次多项式回归模...
基于Spark的ItemBased推荐算法性能优化 CNKI文献
MapReduce计算场景下,复杂的大数据挖掘类算法通常需要多个MapReduce作业协作完成,但多个作业之间严重的冗余磁盘读写及重复的资源申请操作,使得算法的性能严重降低。为提高Item Based推荐算法的计算效率,首先对MapRe...
热带珊瑚岛礁面积小且远离大陆,生态系统结构简单,生物多样性低,生态系统十分脆弱,容易受到自然灾害和人为干扰的影响。近年来,随着旅游经济的兴起和其它需要,一些岛礁的开发力度不断增强,导致珊瑚礁退化、生物多样性...
试验研究了聚四氟乙烯密封圈压缩量、检漏时间等因素对密封性能的影响;利用数值模拟方法研究了氦气在聚四氟乙烯密封圈中的渗透过程及密封圈尺寸对该过程的影响;分析探讨了含氦渗透率较高材料容器的检漏问题。研究结果...
米非司酮治疗中国女性围绝经期异常子宫出血有效性的Meta分... CNKI文献
目的:系统评价米非司酮治疗中国女性围绝经期异常子宫出血的有效性,为临床提供循证参考。方法:计算机检索中国期刊全文数据库(CJFD)、中国生物医学文献服务系统数据库(Sino Med)、中文科技期刊数据库和万方数据库,收集...
“舌尖上的教育”是如何成为国策的——对日本政府在“食育... CNKI文献
日本是目前世界上食育体系最为完善的国家,研究这一体系,特别是关注其中的政府角色,对在中国推广该机制,具有重要意义。文章以日本为研究国别,在描述食育基本内容的基础上,论述了不同历史阶段食育的特征与消长,尤其是...
眼动试验在建筑业安全隐患识别研究中的应用与展望 CNKI文献
为改良建筑业既有安全隐患识别方法,提高安全隐患识别绩效水平,针对现有研究的瓶颈,探究眼动试验在建筑业研究中的应用,并予以展望。通过论述安全检查在建筑业实践和理论研究中的成果和不足,回顾眼动试验在医疗卫生、...
少数民族大学生民族认同、自尊与生活满意度的关系研究 CNKI文献
民族认同是指民族成员对其民族身份知悉和接纳的态度,包括本民族认同和中华民族认同。自尊是个体来源于一定社会标准下的对自身的接纳和认可,也是对个体的一种自我评价的态度。生活满意度是个体根据自己的生活标准对自...
2013-2015年重庆地区质子泵抑制剂不良反应报告分析 CNKI文献
目的:调查分析2013-2015年重庆市质子泵抑制剂(PPIs)药品不良反应(ADR)上报信息,为临床合理、安全使用该类药品提供依据。方法:收集2013-2015年重庆市药品不良反应监测中心数据库中质子泵抑制剂不良反应报告,对1 063例...
廖彬池 唐晓红 《中国医院药学杂志》 2018年01期 期刊
由于电力高峰负荷持续时间短,导致采用传统的增加调峰发电装机容量来满足电网高峰负荷需求的方法经济效益极低,同时由于大量间歇式新能源的接入,其自身随机性、间歇性的特点也给电力系统能源调度带来了新的挑战。基于...
多MapReduce作业协同下的大数据挖掘类算法资源效率优化 CNKI文献
由于任意的MapReduce作业都需要独立地进行任务调度、资源分配等一系列复杂的操作,这使得同一算法协同的多个MapReduce作业之间,存在着大量的冗余磁盘I/O及资源重复申请操作,导致计算过程中资源利用效率低下。大数据挖...
廖彬 张陶... 《计算机应用研究》 2020年05期 期刊
关键词: MapReduce优化 / ItemBased算法 / 内存文件系统 / I/O效率
下载(264)| 被引(3)
Spark DAG优化MapReduce协同过滤算法 CNKI文献
大数据的规模效应给数据存储、管理以及数据分析带来了极大的挑战,高效率低成本的大数据处理技术成为学术界及工业界的研究热点。为提高协同过滤算法的执行效率,对MapReduce架构下的算法执行步骤进行了分解,并对算法执...
目前,市面上搭载着语音交互系统的产品有很多,但是绝大部分的交互命令都局限于固定的关键词,在人工智能备受关注的今天,这样的设计显得尤为不人性化。针对上述问题,本设计开发了搭载有自然语言处理的智能语音交互系统...
虽然大数据技术在不断成熟,但它在竞技体育领域的相关应用研究还处于探索阶段。常规篮球统计缺乏对传球数据的记录,更缺乏对传球数据的统计分析、价值挖掘及应用等方面的研究。首先,在GraphX基础上将传球数据构建成图...