
Big Data -- Hadoop
SheepCore
Love to code, and love to remake the new world.
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop [1] -- Get Environment Started
I. Intro 最近生产实习开始了,我选择了Big Data 方向,虽然学习了一天,配置了一天的开发环境,但感觉还是懵懵懂懂的孩子一样,没有拨开迷雾,现在整理一下安装和配置 hadoop 的思路,因为网上大多都是 Linux 版配置,而我用的 macOS 所以,来来回回折腾了好几圈。还好,功夫不负有心人,最后还是 reach my tiny goal. Coding is my day and...原创 2019-07-09 09:19:56 · 251 阅读 · 0 评论 -
Hadoop [2] -- Hadoop 分布式文件系统剖析
I.Intro什么是 DFS?什么是 HDFS? 如何应用 HDFS?II.Get Started1.什么是 DFS?由于一台机器的存储容量有限,当我们需要处理的数据量达到一定级别时,单个机器是很难满足我们的需求的。倘若让一台机器一下子在内存处理一个几十G, 甚至上百G的文件检索任务,显然是不可能完成的,即使有这样高效配置豪华的电脑,效率也是极低的。所以我们需要将文件存放在多台机...原创 2019-07-15 20:11:58 · 223 阅读 · 0 评论 -
Mac bash 远程连接阿里云服务器
I.Intro 听说阿里云有超低价学生服务器,哈哈。果不其然,买了三个月轻量级云服务器。今天把连接步骤做个记录原创 2019-07-15 20:33:48 · 351 阅读 · 0 评论