大数据
Hadoop部署在RedHat Linux 5上常见错误及解决方案
遇到的问题:1、在hadoop conf下执行命令: hadoop-daemon.sh start datanode,无法启动hadoop datanode:[hadoop@master conf]$ hadoop-daemon.sh start da...
API优先架构或者胖瘦服务器之争
自2007年Apple发布了iPhone,网络应用及网站在小屏幕上的呈现机会显著的增高,从而各大网站及机构不得不对其应用进行适当的改变。然而考虑到数据体积、应用程序扩展性、新特性的发布及维护等问题,应用程序的架构也不得不按需进行改变,比如Twitter的面向服...
历届中国大数据技术大会PPT精粹下载
Hadoop起源于2002年的Apache Nutch项目,是Apache Lucene的子项目之一。2004年,Google在OSDI上公开发表了题为《MapReduce: Simplified Data Processing on Large Cluste...
第七届中国大数据技术大会将于12月在北京召开
从科学研究到技术分析再到产业变革,一个大规模生产、采集、存储、计算、分析,并提供新商业价值的大数据时代已然开启!由中国计算机协会(CCF)主办,CCF大数据专家委员会协办,中科院计算所与CSDN共同承办的国内最具影响、规模最大的大数据领域盛会—&...
童小军:Hadoop原理、适用场景及核心思想
童小军,EasyHadop 社区创始人、原暴风影音平台研发经理;国内首位获得美国Cloudera公司Apache Hadoop开发工程师(CCDH)认证考试);中科院、工信部外聘Hadoop专家讲师;RedHadoop 红象云腾 创始人&首席架构师;多次在中国...
部署Hadoop需谨慎考虑
近些年,Hadoop和“走向大数据分析引擎”一样,受到颇多赞誉。对很多人来说,Hadoop就意味着大数据技术。但其实开源的分布式处理框架未必能解决所有的大数据问题。这就要求想要部署Hadoop的公司慎重考虑——什...
大数据时代如何保证hadoop安全
据统计,未来几年,智慧城市、智能交通、智慧医疗 以及物联网所产生的数据也会铺天盖地而来。这么多的数据中蕴含着非常多的有价值信息,但是我们如何将这些信息提取出来呢?现在通常的方法是利用Hadoop来做,但是,Hadoop其实也不是那么安全。在昨天趋势科技召...
Hadoop2.0为Hadoop演绎完美起点
在很多人的印象中,Hadoop似乎就是大数据的代名词。随着大家深入了解大数据和Hadoop,对其也有了一个更深层次的了解,逐渐认识到Hadoop只是大数据的一个存储工具。 不过这并不一定就是坏事。把Hadoop当作廉价有效的存储正好是Hadoop下一阶...
微软即将开源REEF大数据框架
微软开发出一套名为REEF(即可保留评估执行框架的简称)的大数据框架,并有意在一个月之内将其推向开源。REEF在设计上以下一代Hadoop资源管理器YARN为运行基础,尤其适合完成机器学习类任务。微软公司技术研究员兼信息服务部门CTO Raghu Rama...
Hadoop DataNode不能正常工作的原因
在把Hadoop环境搭建成功,并且也Hadoop的各个组件都正常工作。在重启过几次Hadoop后发现DataNode不能正常工作,打开Hadoop 的后台http://localhost:50030和http://localhost:50070发现Lives...
Spark:大数据的“电光石火”
Spark是发源于美国加州大学伯克利分校AMPLab的集群计算平台。它立足于内存计算,从多迭代批量处理出发,兼收并蓄数据仓库、流处理和图计算等多种计算范式,是罕见的全能选手。...
大数据初创公司DataTorrent获800万美元融资
风险投资公司August Capital,其向DataTorrent投资了875万美元,是DataTorrent公司迄今为止收到的所有风险投资金额的总额。...
“大数据战略”上升为美国最高国策
商家可以从大数据中“挖出商业金矿”,像美国这样的超级大国还直接把“大数据战略”形容为“未来的新石油”。对美国情报机构来说,想监视“心怀不轨的人”,大数据就是“无价之宝”。...
IBM大数据成“未来新石油”
IBM认为,大数据将成为对于企业而言至关重要的“未来新石油”,成为企业竞争优势的基础,改变企业决策、价值创造和价值实现的方式。记者调查获悉,致力大数据研究和应用及实践,已经成为了很多IT和通信企业的方向,更有行业弄潮儿率先发展相关产业,走在了行...
大数据时代,让一群脑残为你选书
舍恩伯格在书中指出,“大数据”将颠覆隐私保护法当下以个人为中心的思想。由于自己多年积累被算法取代的愤怒,在被解雇之后,书评家发出这样的抱怨:(通过算法推荐)“那种感觉就像你和一群脑残在一起逛书店。...
大数据时代的一个“美丽的误会”,小体验诠释“大数据”
华师大困难学生数据包就是所谓大数据的某个类别的一个雏形,向该女生发送温馨的问询短信,则已涉及大数据的具体应用。甚至可以说,它已经成为不折不扣的生活化的、用大数据进行校务管理的一个朴素案例。...
太空授课是天地大容量信息处理产业发展的契机
女航天员王亚平将成为中国首位“太空老师”,作为继美国之后第二个完成太空授课的国家,此次太空授课不仅将提升全民对航天的兴趣,还会从应用上推动天地大容量信息处理产业的发展,而大数据时代的来临将成为天地大容量信息处理产业发展的契机。...
大数据合作竞争 中关村硅谷演新双城记
随时代发展中关村纷纷建立起云计算、大数据相关产业优势资源整合联盟(中关村云计算产业基地、中关村云计算产业联盟中关村大数据日),不仅突出以中关村为代表的中国本土在迎接第三次IT技术革命浪潮中的优势和实力,也强调了本地区资源在新形势下的技术创新和...




















