
hadoop
fly-iot
没什么大不了,一直写代码。
展开
-
mahout 学习
http://blog.fens.me/hadoop-mahout-recommend-job/原创 2013-11-26 00:13:24 · 1572 阅读 · 0 评论 -
hadoop(1):centos 安装 hadoop & hive
1,关于hiveHive是一个基于Hadoop的数据仓库平台。通过hive,我们可以方便地进行ETL的工作。hive定义了一个类似于SQL的查询语言:HQL,能 够将用户编写的QL转化为相应的Mapreduce程序基于Hadoop执行。Hive是Facebook 2008年8月刚开源的一个数据仓库框架,其系统目标与 Pig 有相似之处,但它有一些Pig目前还不支持的机制,比如:更丰富的类型系统、更类原创 2015-08-14 17:09:17 · 4515 阅读 · 0 评论 -
hadoop(2): 安装&使用 sqoop
1,关于sqoopSqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导入到Hadoop的HDFS中,也可以将HDFS的数据导入到关系型数据库中。官网:http://sqoop.apache.org/ 一个1.4.6 版本,一个是1.99版本(开发版还没有迁移完成,生产环境不推荐)文档:原创 2015-08-18 17:42:03 · 2399 阅读 · 0 评论 -
龙星计划-机器学习分享
分享一个机器学习的视频项目地址: http://bigeye.au.tsinghua.edu.cn/DragonStar2012/index.html 百度盘分享地址: http://pan.baidu.com/share/link?shareid=27613&uk=1513052211他们最后把视频分享出来了。感谢下老师余凯博士(Dr. Kai Yu) 张潼教授 (Prof. Tong Z原创 2016-02-23 20:42:10 · 4864 阅读 · 1 评论 -
开发基于 Hbase的 应用 链接 Hbase 服务器 demo
一个网站的数据的增加是非常迅速的。。 要保存这些数据 在 mysql 数据库里面 是最好的办法。 如果这些数据 超过了一定的规模。比如 上 亿的历史数据。。查询起来可就比较麻烦了。。 而且如果要进行 统计分析。。分析用户的行为啥的。。还需要这些日志。 就连 用户的访问记录保留也是很有用的。。就像豆瓣的喜欢和垃圾桶功能也很重要。 通过这个就可以推算出你喜...2011-12-23 18:49:54 · 250 阅读 · 0 评论 -
debian 系统安装 hadoop 和hbase 环境。
由于 自己使用的电脑 是debian 系统。所以 也想在自己的电脑上面安装一个 hbase 的环境。 笔记本 是64 bit 的但好像不可以,虚拟 64bit的系统。 所以干脆 装一个 环境算了。。 参考文档: https://ccp.cloudera.com/display/CDHDOC/CDH3+Installation https://ccp.cl...2011-12-25 15:19:54 · 374 阅读 · 0 评论 -
CentOS 安装 hadoop hbase 使用 cloudera 版本。(一)
使用Virtualbox安装系统和 hadoop ,hbase 参考安装: cloudera 的hadoop 只支持 64bit的版本.而要用虚拟机安装 64bit 的要满足 4个条件. 1, 64bit的cpu 3, 64bit的操作系统 3, 64bit的VirtualBox 4, 必须允许硬件虚拟化(需要到 bios 里面打开virtuali...2011-11-09 18:25:01 · 316 阅读 · 0 评论