作者: admin
巧用云平台简化Spark集群与大数据部署 – 51CTO.COM
在日前于旧金山举办的Spark 2014峰会上,Databricks公司CEO Ion Stoica通过主题演讲公布了Databricks云——这是一套以Apache Spark开源处理引擎为核心构建而成的云平台,专门负责大数据处理工作。 继续阅读“巧用云平台简化Spark集群与大数据部署 – 51CTO.COM”
WSDL(Web服务描述语言)详细解析(全文转载学习用) – 苏玉召 – 博客园
WSDL (Web Services Description Language,Web服务描述语言)是一种XML Application,他将Web服务描述定义为一组服务访问点,客户端可以通过这些服务访问点对包含面向文档信息或面向过程调用的服务进行访问(类似远程过程调用)。WSDL首先对访问的操作和访问时使用的请求/响应消息进行抽象描述,然后将其绑定到具体的传输协议和消息格式上以最终定义具体部署的服务访问点。相关的具体部署的服务访问点通过组合就成为抽象的Web服务。 本文将详细讲解WSDL文档的结构,并分析每个元素的作用。 继续阅读“WSDL(Web服务描述语言)详细解析(全文转载学习用) – 苏玉召 – 博客园”
【原】原生态手写wsdl文件 – 胡健 – 博客园
使用php编写WebService时,有两种方式:
1、不使用wsdl文件。采用这种方式时,只有php脚本能访问WebService。
2、使用wsdl文件。采用这种方式时,无论哪个平台,采用什么语言,都可以通过wsdl文件来访问WebService。wsdl文件就相当于Client端和Server端之间的通信契约。另外,在wsdl文件中还可以指定消息传输的方式,比如Soap、HTTP GET、HTTP POST等。
下面主要介绍如何手写一个wsdl文件。 继续阅读“【原】原生态手写wsdl文件 – 胡健 – 博客园”
【原】使用wsdl的注意事项 – 胡健 – 博客园
Eclipse for PHP Developers安装PHP格式化插件pdt_tools.formatter – 大头爸爸的博客 – 博客频道 – CSDN.NET
一直纠结eclipse php插件版的PHP代码格式化功能太弱,今天偶尔机会看到下面这样的网站: 继续阅读“Eclipse for PHP Developers安装PHP格式化插件pdt_tools.formatter – 大头爸爸的博客 – 博客频道 – CSDN.NET”
搭建Windows下基于Eclipse的PHP开发环境 – 51CTO.COM
在配置Eclipse之前,首先需要一个Apache+PHP的基础环境,可以装wampp或php home,它们都是集成化安装,比较方便。建议装wampp2.2,集成Apache,MySQL,Perl,PHP。而且解压缩就可用。
下面我就以安装wampp2.2为例,一步一步的讲解一下,如何去配置基于Eclipse的PHP开发环境。 继续阅读“搭建Windows下基于Eclipse的PHP开发环境 – 51CTO.COM”
PHP IDE推荐与评测 ZendStudio VS.PHP PhpStorm – 码农场
这里列出能称得上IDE的三大IDE——ZendStudio,VS.PHP和PhpStorm。诸如EditPlus感觉很业余,只能补全库函数无法补全自定义的函数和变量,DW根本不是程序员用的顶多算个美工用的工具,vim配置复杂,花在vim上的心思可能比一个小项目都多,eclipse是ZendStudio的所依赖的IDE,不再列入。以上这些工具或许优秀,但是未必算得上功能齐全的IDE,请诸位vim粉丝或者notepad.exe的卫道士放过我。 继续阅读“PHP IDE推荐与评测 ZendStudio VS.PHP PhpStorm – 码农场”
[转]Eclipse下PHP开发 插件安装 – freeliver54 – 博客园
Eclipse的PHP插件Eclipse插件安装。重装了电脑后,以前配的环境又得重新配过,就当做复习吧。 继续阅读“[转]Eclipse下PHP开发 插件安装 – freeliver54 – 博客园”
Installation – PHPEclipse
The simplest way to install PHPEclipse is to use the PHPEclipse update site. 继续阅读“Installation – PHPEclipse”
PHPEclipse 官方网站
sqoop实现Mysql、Oracle与hdfs之间数据的互导 – zhangwx的专栏 – 博客频道 – CSDN.NET
SQOOP的描述
SQOOP是用于对数据进行导入导出的。 继续阅读“sqoop实现Mysql、Oracle与hdfs之间数据的互导 – zhangwx的专栏 – 博客频道 – CSDN.NET”
Spark集群部署 – zhangwx的专栏 – 博客频道 – CSDN.NET
Spark 集群
集群环境
基于hadoop集群64bit(hadoop2.5.1、jdk1.7)
CentOS 6.4下安装配置Spark-0.9集群 继续阅读“Spark集群部署 – zhangwx的专栏 – 博客频道 – CSDN.NET”
Storm集群安装部署步骤【详细版】 – 大圆那些事 – 博客园
本文以Twitter Storm官方Wiki为基础,详细描述如何快速搭建一个Storm集群,其中,项目实践中遇到的问题及经验总结,在相应章节以“注意事项”的形式给出。
Storm集群部署 – zhangwx的专栏 – 博客频道 – CSDN.NET
1. Storm集群组件
Storm集群中包含两类节点:主控节点(Master Node)和工作节点(Work
(转)Mahout使用入门 – 风生水起 – 博客园
一、简介
Mahout 是 Apache Software Foundation(ASF)旗下的一个开源项目,提供一些可扩展的机器学习领域经典算法的实现,旨在帮助开发人员更加方便快捷地创建智能应用程序。Apache Mahout项目已经发展到了它的第三个年头,目前已经有了三个公共发行版本。 继续阅读“(转)Mahout使用入门 – 风生水起 – 博客园”
mahout简单入门 – datafans – 开源中国社区
export HADOOP_HOME=/usr/local/hadoop-single
———————————————————–cluster—————— ———————————-
bin/hadoop fs -put /opt/synthetic_control.data testdata/synthetic_control.data
bin/hadoop jar /usr/local/mahout/mahout-examples-0.8-job.jar org.apache.mahout.clustering.syntheticcontrol.kmeans.Job
bin/hadoop jar /usr/local/mahout/mahout-examples-0.8-job.jar org.apache.mahout.clustering.syntheticcontrol.kmeans.Job -i /user/demo/synthetic_control.data -o /user/demo/kmeans-output
也可以在eclipse中直接运行测试
将序列文件导出查看 加上–pointsDir 就会导出所有点的集合 如果不加 就只有分类后的说明 继续阅读“mahout简单入门 – datafans – 开源中国社区”
一个国产数据库一体机厂商战胜大牛的故事 – IT国内新闻 — C114(中国通信网)
一个名不见经传的数据库一体机国产厂商,居然在电信运营商的竞标中战胜Oracle、华为这样的大牛与高手,讲来或许大家不一定相信,但已经成为事实。故事就从叶大拿说起吧……
那天,天刚朦朦亮,他就醒了。
和许多技术人一样,他习惯晚睡晚起,可是最近有一件重要的事情没有落实,也就睡不踏实。 继续阅读“一个国产数据库一体机厂商战胜大牛的故事 – IT国内新闻 — C114(中国通信网)”
Hadoop能做什么 – 大数据那些事儿 – 博客频道 – CSDN.NET
“Hadoop能做什么?” ,概括如下:
1、搜索引擎(Doug Cutting 设计Hadoop的初衷,为了针对大规模的网页快速建立索引)。
2、大数据存储,利用Hadoop的分布式存储能力,例如数据备份、数据仓库等。
3、大数据处理,利用Hadoop的分布式处理能力,例如数据挖掘、数据分析等。
4、科学研究,Hadoop是一种分布式的开源框架,对于分布式计算有很大程度地参考价值。 继续阅读“Hadoop能做什么 – 大数据那些事儿 – 博客频道 – CSDN.NET”
用Hadoop 还是不用Hadoop?_数据库/开发_比特网
Hadoop通常被认定是能够帮助你解决所有问题的唯一方案。 当人们提到“大数据”或是“数据分析”等相关问题的时候,会听到脱口而出的回答:Hadoop!实际上Hadoop被设计和建造出来,是用来解决一系列特 定问题的。对某些问题来说,Hadoop至多算是一个不好的选择。对另一些问题来说,选择Hadoop甚至会是一个错误。对于数据转换的操作,或者更广泛 意义上的抽取-转换-装载的操作(译者注:Extraction Transformation Load,ETL,数据仓库中对数据从初始状态到可用状态处理过程的经典定义), 使用Hadoop系统能够得到很多好处, 但是如果你的问题是下面5类之中的一个的话,Hadoop可能会是一不合适的解决方案。 继续阅读“用Hadoop 还是不用Hadoop?_数据库/开发_比特网”