月度归档： 2015 年 7 月

让/etc/profile文件修改后立即生效 – 技术文档 – 系统管理 Linux时代 – 开源、自由、共享 – 中国最大的Linux技术社区

方法1：

让/etc/profile文件修改后立即生效 ,可以使用如下命令:

# .  /etc/profile

注意: . 和 /etc/profile 有空格

方法2：

让/etc/profile文件修改后立即生效 ,可以使用如下命令:

# source /etc/profile 继续阅读“让/etc/profile文件修改后立即生效 – 技术文档 – 系统管理 Linux时代 – 开源、自由、共享 – 中国最大的Linux技术社区”

Alex 的 Hadoop 菜鸟教程: 第3课 Hadoop 安装教程 – 非HA方式 (一台服务器) – 我可以接受失败，但我不能接受放弃。–迈克尔 乔丹 – 博客频道 – CSDN.NET

原帖地址： http://blog.csdn.net/nsrainbow/article/details/36629741

接上一个教程：http://blog.csdn.net/nsrainbow/article/details/36629339

本教程是在 Centos6 下使用yum来安装 CDH5 版本的 hadoop 的教程。 如果没有添加yum源的请参考上一个教程 继续阅读“Alex 的 Hadoop 菜鸟教程: 第3课 Hadoop 安装教程 – 非HA方式 (一台服务器) – 我可以接受失败，但我不能接受放弃。–迈克尔 乔丹 – 博客频道 – CSDN.NET”

centos安装配置hadoop超详细过程

1、集群部署介绍

 

1.1 Hadoop简介

 

201205161427003307.png　　

       Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。 继续阅读“centos安装配置hadoop超详细过程”

Hive-site.xml配置文件内容 metastore三种配置方式 – reesun的专栏 – 博客频道 – CSDN.NET

Hive的meta数据支持以下三种存储方式，其中两种属于本地存储，一种为远端存储。远端存储比较适合生产环境。Hive官方wiki详细介绍了这三种方式，链接为：Hive Metastore。

 

一、本地derby

这种方式是最简单的存储方式，只需要在hive-site.xml做如下配置便可 继续阅读“Hive-site.xml配置文件内容 metastore三种配置方式 – reesun的专栏 – 博客频道 – CSDN.NET”

启动hadoop2.3.0时显示JAVA_HOME is not set and could not – 闵开慧的个人页面 – 开源中国社区

使用start-all.sh直接启动Hadoop
 
如果报如下错误：localhost:Error: JAVA_HOME is not set and could not be found.则是因为JAVA_HOME环境变量没有设置，需要在./etc/hadoop/hadoop-env.sh中设置JAVA_HOME， 继续阅读“启动hadoop2.3.0时显示JAVA_HOME is not set and could not – 闵开慧的个人页面 – 开源中国社区”

Hadoop2.5.0完全分布式配置(1主3从) – 君子不器。 – 开源中国社区

1、开发配置环境：

具体的就不介绍了，请参考我另外一篇文章http://my.oschina.net/lanzp/blog/309078

2、Hadoop节点配置

在讲解之前，先声明一点，这篇文章的所有环境都是基于上一篇伪分布的配置文章的基础上再做配置的，如果你没有看过我之前的那篇文章，建议你先去阅读一下。

现在网上比较少新版本的配置教程，那么下面我就来分享一下我自己的实战经验，如有不正确的地欢迎指正 继续阅读“Hadoop2.5.0完全分布式配置(1主3从) – 君子不器。 – 开源中国社区”

Weka中BP神经网络的实践（参数调整以及结果分析） – 懒惰啊我 – 博客园

周日讲了下神经网络，本来想的是以理论和实践相结合，前面讲讲神经网络，后面简单讲下在weka中怎么使用BP神经网络，可惜最后时间不够，而且姥姥的兴趣点跑到凸优化那里去了，所以没有讲成实践的部分，有点郁闷的。为了不浪费了，就把这部分讲稿拿出来和大家分享一下，也希望对大家实践神经网络有所帮助。因为是讲稿，讲的要比写的多，所以很多地方口语化和省略比较严重，大家凑合着看吧。 继续阅读“Weka中BP神经网络的实践（参数调整以及结果分析） – 懒惰啊我 – 博客园”

Hadoop的本地库（Native Libraries）介绍 – 逖靖寒 – 博客园

Hadoop是使用Java语言开发的，但是有一些需求和操作并不适合使用java，所以就引入了本地库（Native Libraries）的概念，通过本地库，Hadoop可以更加高效地执行某一些操作。

目前在Hadoop中，本地库应用在文件的压缩上面： 继续阅读“Hadoop的本地库（Native Libraries）介绍 – 逖靖寒 – 博客园”