零基础学习hadoop到上手工作线路指导(编程篇) – pig2的日志 about云开发

原文链接:http://www.aboutyun.com/thread-8329-1-1.html

问题导读:
1.hadoop编程需要哪些基础?
2.hadoop编程需要注意哪些问题?
3.如何创建mapreduce程序及其包含几部分?
4.如何远程连接eclipse,可能会遇到什么问题?
5.如何编译hadoop源码? 继续阅读“零基础学习hadoop到上手工作线路指导(编程篇) – pig2的日志 about云开发”

用 Hadoop 进行分布式并行编程, 第 1 部分

基本概念与安装部署

Hadoop 是一个实现了 MapReduce 计算模型的开源分布式并行编程框架,借助于 Hadoop, 程序员可以轻松地编写分布式并行程序,将其运行于计算机集群上,完成海量数据的计算。本文将介绍 MapReduce 计算模型,分布式并行计算等基本概念,以及 Hadoop 的安装部署和基本运行方法。

继续阅读“用 Hadoop 进行分布式并行编程, 第 1 部分”

IBM超级计算机沃森将分析你的个性_IBM_cnBeta.COM

IBM超级计算机沃森现在可以分析人类的个性了。沃森可以根据自己读取的文字片段来分析作者的个性,但是是否真的符合作者实际个性又是另一回事。这是计算机预测和分析的最新例证。沃森掌握的该技术被称为“个性见解”,顾名思义,它通过读取测试者的博文或者推文,试图深入了解一个人的个性。就目前的情况来看,沃森更喜欢一些非正式的文字或者文章,而不是报告或其他书面严肃文字。

继续阅读“IBM超级计算机沃森将分析你的个性_IBM_cnBeta.COM”

苹果携手IBM再推10余款移动优先型企业级应用_Apple 苹果_cnBeta.COM

近日,苹果和IBM宣布了10款全新的“移动优先”型企业级应用,其总数也达到了32款,涉及商务旅行、迁移管理、以及现场作业等领域。旅行应用中包括了Travel Plan,可在iPhone上提供沿途日程安排和建议。迁移管理工具Shift Sync支持iPhone和Apple Watch,iPad上则适用Shift Track。员工可借此提交补假请求、接受或拒绝变动,而管理人员则可授权和追踪后续情况。

继续阅读“苹果携手IBM再推10余款移动优先型企业级应用_Apple 苹果_cnBeta.COM”

能准确感知你情绪的人工智能 IBM初试智能社交_IBM_cnBeta.COM

E-Mail能体会到你的感情吗?IBM说,是的它真的可以。每个人都会有那么一两封让你后悔不迭、恨不得从来没有发出去的邮件,明明想表达的是另一个意思,却由于措辞不当遭受误解,甚至引发争吵。不过,随着IBM这款人工智能分析工具的诞生,这种经历或许要成为历史了。

继续阅读“能准确感知你情绪的人工智能 IBM初试智能社交_IBM_cnBeta.COM”

人类该如何到达第二个地球?_cnBeta 科学探索_cnBeta.COM

今日凌晨,美国宇航局公布了开普勒空间望远镜的新发现——开普勒452b,一颗目前为止各方面最接近地球的系外行星。它只比地球大60%,和母恒星的距离非常接近地球与太阳的距离,有很大的可能性会是一颗岩石行星,所有的这些都指向一个可能——这颗地球的孪生行星很有可能存在液态水和生命。

继续阅读“人类该如何到达第二个地球?_cnBeta 科学探索_cnBeta.COM”

Hadoop的学习前奏 – 今日头条(TouTiao.com)

笔者目前是在做Android开发,又是在一个信息安全的公司。公司的主要是做在虚拟机上运行的产品,又涉猎云计算,心想是要去搞一下云计算。自我感觉移 动互联网 + 云计算 + 信息安全会是一个很好的方向,于是投身其中。因为是Java出身,所以自然而然选择了Hadoop

继续阅读“Hadoop的学习前奏 – 今日头条(TouTiao.com)”

IFTTT自动化服务向开发者开源五款实用框架_cnBeta 最新消息_cnBeta.COM

IFTTT是一项非常实用的自动化服务,可以通过设定各种应用触发条件,然后自动执行某件任务以提高效率。IFTTT近日宣布将对移动开发者开放五个服务框架,帮助这些开发商更好地开发应用支持多种多样的“执行任务”功能。开源中的框架包括关键性的UIKit动画效果框架,这些框架包括使用Objective-C和Swift语言开发的,还包括帮助快速的缓存和序列化采用Ruby编写的DSL。

继续阅读“IFTTT自动化服务向开发者开源五款实用框架_cnBeta 最新消息_cnBeta.COM”

无人机为什么偏爱多旋翼?这里有最全的解释_cnBeta 硬件新闻_cnBeta.COM

常见飞行器通常被分为固定翼、直升机和多旋翼(四旋翼最为主流)。在2010年之前,固定翼和直升机无论在航拍还是航模运动领域,基本上占有绝对主流的地位。然而,在之后的几年中,因优良的操控性能,多旋翼迅速成为航拍和航模运动领域的新星,但这仍然需要专业人员调试或装配飞机。2012年底,中国大疆公司推出四旋翼一体机——小精灵Phantom。

继续阅读“无人机为什么偏爱多旋翼?这里有最全的解释_cnBeta 硬件新闻_cnBeta.COM”

Global Foundries与AMD那些半导体厂商的豪门恩怨_cnBeta 硬件新闻_cnBeta.COM

近日Global Foundries(以下简称GF)宣布其14nm FinFET和22nm FD-SOI工艺都取得了突破,成功量产,这似乎为半导体代工厂GF近数年的颓势带来一股希望,不过在笔者看来,GF未必能就此扭转命运,不过是GF与那些半导体厂商豪门恩怨的延续。

继续阅读“Global Foundries与AMD那些半导体厂商的豪门恩怨_cnBeta 硬件新闻_cnBeta.COM”

中国“天眼”明年建成:视野百亿光年_cnBeta 硬件新闻_cnBeta.COM

打开卫星地图,贵州平塘县的地貌好似布满褶皱的大象皮肤。再提高分辨率,就能看到大大小小的“漏斗”—“天坑”群。其中有一个就是科学家寻觅十载为这个最大望远镜找的“家”。FAST项目馈源支撑系统总工程师孙才红告诉记者,选址“大窝凼”有三方面原因,一是地貌最接近FAST的造型,工程开挖量最小;二是这里的喀斯特地质可以保障雨水向地下渗透,不会在表面淤积而损坏和腐蚀望远镜;

继续阅读“中国“天眼”明年建成:视野百亿光年_cnBeta 硬件新闻_cnBeta.COM”

299元 – Sky李晓峰首款创业鼠标发布:王思聪捧场_cnBeta 硬件新闻_cnBeta.COM

连续获得WCG2005、2006魔兽争霸项目世界冠军——“人皇”Sky李晓峰在结束电竞生涯之后,走上了创业路。7月23日下午,Sky召开了其创办的“钛度科技”首款新品发布会,正式发布钛度鼠标,号称“最懂中国玩家的电子竞技鼠标”,售价299元。

继续阅读“299元 – Sky李晓峰首款创业鼠标发布:王思聪捧场_cnBeta 硬件新闻_cnBeta.COM”

一张图读懂另一个“地球”_cnBeta 科学探索_cnBeta.COM

开普勒空间望远镜搜寻“另一个地球”:开普勒空间望远镜于2009年发射升空,每371天绕太阳运行一周。但在它运行过程中,其镜头始终指向天空中的一个固定方位,严密监视那里10万颗恒星的亮度变化,这种亮度变化可能暗示其周围存在行星。

继续阅读“一张图读懂另一个“地球”_cnBeta 科学探索_cnBeta.COM”

研究发现宇宙射线与人类突变细胞变化或存关联_cnBeta 科学探索_cnBeta.COM

据国外媒体报道,相关研究曾证明,太阳活动周期与人类出生缺陷有关联。美国堪萨斯大学科学家最新研究表明,宇宙射线与人类突变细

胞变化或存在奇特关联,太阳活动射线产生的伤害或许比我们想像的要大。研究人员表示,宇宙中或许还有一些新的物理现象,令μ介子的危害性更大。 继续阅读“研究发现宇宙射线与人类突变细胞变化或存关联_cnBeta 科学探索_cnBeta.COM”

谷歌推新云服务挑战亚马逊:免费提供1亿GB空间_Google / 谷歌_cnBeta.COM

北京时间7月24日消息,据科技网站ITProPortal报道,谷歌周四正式推出云存储服务Cloud Storage Nearline,准备与亚马逊AWS、微软Azure以及其他所有云平台一较高下。与搜索领域不同的是,谷歌在云存储领域远远落后于对手。为了争夺早期客户,谷歌提供100PB的庞大免费存储空间。100PB约等于1亿GB。对于个人消费者来说,这一存储空间足够用上一生。但是对于中型企业来说,它可能只够用上几个月。 继续阅读“谷歌推新云服务挑战亚马逊:免费提供1亿GB空间_Google / 谷歌_cnBeta.COM”

别高兴太早:天鹅座不只有第二个地球 还有一个黑洞_cnBeta 科学探索_cnBeta.COM

北京时间7月24日凌晨,美国宇航局宣布在天鹅座中发现首个与地球大小相近的“宜居”行星:Kepler-452b,天文学家称,这是至今为止发现的最接近地球的“孪生星球”,有可能拥有大气层和流动水。天文学家表示,这个跟地球的相似指数为0.98。 继续阅读“别高兴太早:天鹅座不只有第二个地球 还有一个黑洞_cnBeta 科学探索_cnBeta.COM”

尺度很大:官方大量公开决定我国未来的黑科技_CHINA 中国_cnBeta.COM

由国防科工局新闻宣传中心等机构承办的国防科技工业军民融合发展成果展16日在北京开展。本次展览汇集国内十余家顶尖军工企业和科研机构,对外展示的不少

科技成果是首次进入公众视野。开展第一天,《环球时报》记者在现场探营,展出的装备和技术囊括海陆空天各个领域,而给人的第一感受就是技术“解密”尺度非

常大,如同对外抛出一枚枚“震撼弹”。 继续阅读“尺度很大:官方大量公开决定我国未来的黑科技_CHINA 中国_cnBeta.COM”