
大数据
文章平均质量分 67
传智教育
传智播客教育科技有限公司是一家专门致力于高素质软件开发人才培养的高科技公司。它依托中国最大的程序员平台CSDN,整合了国内众多知名软件企业的资源。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
大数据:Spark与Hadoop有哪些区别?
Hadoop与Spark都是大数据计算框架,但是两者各有自己的优势,Spark与Hadoop的区别主要有以下几点。1、编程方式Hadoop的MapReduce在计算数据时,计算过程必须要转化为Map和Reduce两个过程,从而难以描述复杂的数据处理过程;而Spark的计算模型不局限于Map和Reduce操作,还提供了多种数据集的操作类型,编程模型比MapReduce更加灵活。2、数据存储Hadoop的 MapReduce进行计算时,每次产生的中间结果都是存储在本地磁盘中;而Spark在计算时产生的中原创 2021-04-14 17:59:35 · 614 阅读 · 0 评论 -
MySQL下载和安装教程
MySQL是由瑞典MySQL AB公司开发的跨平台关系型数据库管理系统,主要分为需付费购买的企业版(Enterprise Edition)和可免费使用的社区版(Community Edition)。由于具有配置简单、开发稳定和性能良好的特点,MySQL称为了一个应用十分广泛的数据库,与Python语言的结合使用也比较常见。 若希望连接MySQL数据库,需要提前在本地电脑上安装MySQL数据库。下面以Windows系统为例演示下载、安装和配置MySQL的过程,具体内容如下。 1. 下载MySQL原创 2021-01-20 14:34:54 · 1269 阅读 · 0 评论 -
Hadoop实现join的有几种方法?
问题分析本题主要是考察学员对mapreduce的熟悉程度核心答案讲解(1)reduce side joinreduce side join是一种最简单的join方式,其主要思想如下:在map阶段,map函数同时读取两个文件File1和File2,为了区分两种来源的key/value数据对,对每条数据打一个标签 (tag),比如:tag=0表示来自文件File1,tag=2表示来自文件File2。即:map阶段的主要任务是对不同文件中的数据打标签。在reduce阶段,reduce函数获取k原创 2021-01-20 14:20:07 · 299 阅读 · 0 评论 -
大数据杀熟的原理是什么?一起get
今日话题#美团被曝杀熟外卖会员#一事被顶上热搜,话题阅读量已超5亿,足以见网友们对这件事的重视程度。来自微博截图网友评论截图面对如此高的话题度,美团外卖也不能坐视不管,于是发布了以下声明证明自己的清白,但网友是否买账就不得而知了。美团外卖声明事实上,平台杀熟已经不是个例了,前有某猫会员杀熟事件,后有某猪酒店价格杀熟事件,现在又爆出了外卖平台杀熟,可见大数据的渗透面积之广。在互联网时代,每个人的信息通过网络交叉连接,数据在后台是可视的,而平台既然已经吸引了用户办会员,达到了原创 2020-12-18 11:33:53 · 2284 阅读 · 0 评论 -
大数据自学宝典15天入门Javase(内附资源)
课程亮点:1,多案例, 趣味性更强.2,从入门到JavaSE完结, 涵盖面广.3,图文并茂,化繁为简4,代码实操,深度实践适用人群:1、对大数据感兴趣的在校生及应届毕业生。2、对目前职业有进一步提升要求,希望从事大数据行业高薪工作的在职人员。3、对大数据行业感兴趣的相关人员。课程介绍:Day01: Java核心基础01.今日内容介绍02.计算机基本概述03.语言介绍04.为什么要学习Java语言05.Java语言介绍06.JDK的下..原创 2020-11-26 09:25:19 · 343 阅读 · 0 评论 -
2020版大数据学习线路图来啦(内附课程资源)
在互联网向物联网转变的时代,数字化就成了时代鲜明的特色。那么今天小编就带大家一起走进大数据的学习,来看看大数据怎么学?上图是大数据学习的线路图,当然啦,这份线路图的制作可不是拍脑袋空想出来的,而是与用人企业标准进行过对照开设出来的,具体看下图——基于此,就可以很清晰的知道企业的用人标准了,按照这些整理的知识点来学习,相信你一定会学有所得~接下来给大家分享一些学习大数据的课程资源,自行获取——一、初级阶段课程大数据教程轻松学会scala8天零基础入门大数据大数据史上最全面的原创 2020-11-12 14:49:45 · 454 阅读 · 0 评论