自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(170)
  • 资源 (1)
  • 收藏
  • 关注

原创 企业管理的三大基石及其关系

企业管理的三大基石及其关系

2023-02-10 14:40:26 761

原创 项目经理和PMO需要掌握的13个表达技巧

作为项目经理和PMO有一项最需要掌握的基本功:如何清晰表达?在进行项目汇报时、开项目各种议会时、号召成员解决困难时、项目成功庆祝时等等,都需要清晰的表达。

2022-12-19 11:47:59 768

原创 python小项目:给复制出来的段落前添加星号

python小项目:给复制出来的段落前添加星号

2025-01-02 22:38:36 830

原创 python小项目:使用多剪贴板自动回复消息

python小项目:使用多剪贴板自动回复消息

2024-12-31 23:52:31 1320

原创 Spark案例实践——广告点击实时分析

Spark案例实践——广告点击实时分析

2024-11-02 22:50:09 1122

原创 Spark入门到实践

Spark入门到实践

2024-10-28 22:11:18 3347

原创 Davinci 大数据可视化分析

Davinci 安装部署

2024-09-17 21:48:31 2497

原创 Kafka 分布式消息系统详细介绍

Kafka 分布式消息系统详细介绍

2024-09-07 22:10:19 1774 2

原创 Flume 日志采集系统

Flume 日志采集系统介绍

2024-09-05 23:55:18 1518 2

原创 Sqoop 数据迁移

Sqoop 数据迁移

2024-09-05 00:26:38 1546

原创 HBase 部署及shell操作

HBase 部署及shell操作

2024-09-01 19:51:15 1731

原创 Hive 案例分析(B站用户行为大数据分析)

Hive 案例分析(B站用户行为大数据分析)

2024-09-01 11:50:54 1839 2

原创 HIVE 数据仓库工具之第二部分(数据库相关操作)

HIVE 数据仓库工具之第二部分(数据库相关操作)

2024-08-30 23:40:52 1536 2

原创 HIVE 数据仓库工具之第一部分(讲解&部署)

HIVE 数据仓库工具之第一部分(讲解&部署)

2024-08-27 23:41:00 1822 1

原创 Hadoop集群运维管理

Hadoop集群运维管理相关

2024-08-25 22:41:12 1566

原创 Hadoop 分布式集群搭建

Hadoop 分布式集群搭建

2024-08-25 12:13:51 2178

原创 Zookeeper shell 的操作

Zookeeper 常用的shell 操作

2024-08-24 15:58:55 534

原创 ZooKeeper 集群的详细部署

ZooKeeper 集群的详细部署

2024-08-15 23:00:58 7304 3

原创 气象大数据案例项目(求各气象站的平均气温)

现在有一份来自美国国家海洋和大气管理局的数据集,里面包含近30年每个气象站、每小时的天气预报数据,每个报告的文件大小大约15M。一共有10个气象站,每个报告文件的名字包含气象站ID,每条记录包含气温、风向、天气状况等多个字段信息。现在要求统计美国各气象站30年平均气温。-9999 说明数据缺失。一共10份气象站的数据。文档里面的数据格式,

2024-08-10 22:02:25 719

原创 MapReduce 简单介绍

MapReduce 是一个使用简单的软件框架,基于它写出来的应用程序能够运行在由上千个商用机器组成的大型集群上,并以一种可靠容错式并行处理TB级别的数据集。MapReduce是一个并行程序的计算模型与方法MapReduce是一个并行程序运行的软件框架MapReduce是一个基于集群的高性能并行计算平台。

2024-08-10 16:30:06 1065

原创 YARN 调度器的配置与使用

YARN 调度器的配置与使用

2024-08-08 23:49:36 743

原创 YARN 的介绍

YARN 的介绍

2024-08-07 23:47:01 799

原创 Shell定时上传日志到HDFS

Shell定时上传日志到HDFS

2024-08-07 23:03:47 568

原创 HDFS shell 基本操作命令

HDFS shell 基本操作命令

2024-08-06 23:56:20 821

原创 部署伪分布式 Hadoop集群

Hadoop目录介绍存放内容:Hadoop的各种可执行脚本和程序,如启动和停止Hadoop服务的脚本、Hadoop命令行工具等。功能:用于执行对Hadoop相关服务(如HDFS、YARN、MapReduce等)的操作和管理任务。存放内容:Hadoop的配置文件,如hadoop-env.sh(环境变量配置)、core-site.xml(核心配置)、hdfs-site.xml(HDFS配置)、yarn-site.xml(YARN配置)和mapred-site.xml(MapReduce配置)等。

2024-08-06 22:59:32 2465

原创 vmware虚拟机linux服务器的IP需要重启才能生效问题

【代码】vmware虚拟机linux服务器的IP需要重启才能生效问题。

2024-08-04 11:05:43 547

原创 昇思25天学习打卡营第26天|Pix2Pix实现图像转换

Pix2Pix是基于条件生成对抗网络(cGAN, Condition Generative Adversarial Networks )实现的一种深度学习图像转换模型,该模型是由Phillip Isola等作者在2017年CVPR上提出的,可以实现语义/标签到真实图片、灰度图到彩色图、航空图到地图、白天到黑夜、线稿图到实物图的转换。Pix2Pix是将cGAN应用于有监督的图像到图像翻译的经典之作,其包括两个模型:生成器和判别器。

2024-07-29 22:51:55 659

原创 昇思25天学习打卡营第25天|RNN实现情感分类

情感分类是自然语言处理中的经典任务,是典型的分类问题。本节使用MindSpore实现一个基于RNN网络的情感分类模型,实现如下的效果:输入: This film is terrible正确标签: Negative预测标签: Negative输入: This film is great正确标签: Positive预测标签: Positive最后我们设计一个预测函数,实现开头描述的效果,输入一句评价,获得评价的情感分类。将输入句子进行分词;使用词表获取对应的index id序列;

2024-07-27 12:34:14 863

原创 昇思25天学习打卡营第24天|LSTM+CRF序列标注

序列标注指给定输入序列,给序列中每个Token进行标注标签的过程。序列标注问题通常用于从文本中进行信息抽取,包括分词(Word Segmentation)、词性标注(Position Tagging)、命名实体识别(Named Entity Recognition, NER)等。以命名实体识别为例:如上表所示,清华大学 和 北京是地名,需要将其识别,我们对每个输入的单词预测其标签,最后根据标签来识别实体。

2024-07-27 11:46:11 976

原创 昇思25天学习打卡营第23天|基于MindSpore的GPT2文本摘要

本次实验使用的是nlpcc2017摘要数据,内容为新闻正文及其摘要,总计50000个样本。因GPT2无中文的tokenizer,我们使用BertTokenizer替代。数据处理,将向量数据变为中文数据。

2024-07-26 23:46:43 329

原创 昇思25天学习打卡营第22天|基于MindSpore实现BERT对情绪识别

BERT全称是来自变换器的双向编码器表征量(Bidirectional Encoder Representations from Transformers),它是Google于2018年末开发并发布的一种新型语言模型。与BERT模型相似的预训练语言模型例如问答、命名实体识别、自然语言推理、文本分类等在许多自然语言处理任务中发挥着重要作用。模型是基于Transformer中的Encoder并加上双向的结构,因此一定要熟练掌握Transformer的Encoder的结构。

2024-07-26 23:18:29 915

原创 python函数的使用方式_day18

函数作用、高阶函数的用法、传参、参数的元信息、匿名函数和内联函数的用法、闭包和作用域问题、装饰器

2024-07-24 22:28:11 970

原创 昇思25天学习打卡营第21天|基于MobileNetv2的垃圾分类

MobileNet网络是由Google团队于2017年提出的专注于移动端、嵌入式或IoT设备的轻量级CNN网络,相比于传统的卷积神经网络,MobileNet网络使用深度可分离卷积(Depthwise Separable Convolution)的思想在准确率小幅度降低的前提下,大大减小了模型参数与运算量。并引入宽度系数 α和分辨率系数 β使模型满足不同应用场景的需求。

2024-07-24 22:25:44 902

原创 昇思25天学习打卡营第20天|K近邻算法实现红酒聚类

K近邻算法(K-Nearest-Neighbor, KNN)是一种用于分类和回归的非参数统计方法,最初由 Cover和Hart于1968年提出(Cover等人,1967),是机器学习最基础的算法之一。它正是基于以上思想:要确定一个样本的类别,可以计算它与所有训练样本的距离,然后找出和该样本最接近的k个样本,统计出这些样本的类别并进行投票,票数最多的那个类就是分类的结果。KNN的三个基本要素:K值,一个样本的分类是由K个邻居的“多数表决”确定的。K值越小,容易受噪声影响,反之,会使类别之间的界限变得模糊。

2024-07-23 22:26:25 924

原创 python数据结构和算法_day17

介绍数据结构和算法

2024-07-23 00:09:22 966

原创 昇思25天学习打卡营第19天|基于MindNLP+MusicGen生成自己的个性化音乐

MusicGen是来自Meta AI的Jade Copet等人提出的基于单个语言模型(LM)的音乐生成模型,能够根据文本描述或音频提示生成高质量的音乐样本,相关研究成果参考论文《Simple and Controllable Music Generation》。MusicGen直接使用谷歌的t5-base及其权重作为文本编码器模型,并使用EnCodec 32kHz及其权重作为音频压缩模型。MusicGen解码器是一个语言模型架构,针对音乐生成任务从零开始进行训练。

2024-07-22 23:03:15 763

原创 python语言进阶重点知识总结_day16

python进阶知识:生成式(推导式)的用法、嵌套的列表的坑、heapq模块(堆排序)、itertools模块、collections模块

2024-07-21 22:21:17 707

原创 昇思25天学习打卡营第18天|GAN图像生成

生成式对抗网络(Generative Adversarial Networks,GAN)是一种生成式机器学习模型,是近年来复杂分布上无监督学习最具前景的方法之一。生成器的任务是生成看起来像训练图像的“假”图像;判别器需要判断从生成器输出的图像是真实的训练图像还是虚假的图像。GAN通过设计生成模型和判别模型这两个模块,使其互相博弈学习产生了相当好的输出。GAN模型的核心在于提出了通过对抗过程来估计生成模型这一全新框架。

2024-07-21 16:34:26 1381

原创 昇思25天学习打卡营第17天|CycleGAN图像风格迁移互换

CycleGAN(Cycle Generative Adversarial Network) 即循环对抗生成网络,来自论文 Unpaired Image-to-Image Translation using Cycle-Consistent Adversarial Networks。该模型实现了一种在没有配对示例的情况下学习将图像从源域 X 转换到目标域 Y 的方法。该模型一个重要应用领域是域迁移(Domain Adaptation),可以通俗地理解为图像风格迁移。

2024-07-21 15:58:37 784

原创 昇思25天学习打卡营第16天|DCGAN生成漫画头像

在下面的教程中,我们将通过示例代码说明DCGAN网络如何设置网络、优化器、如何计算损失函数以及如何初始化模型权重。在本教程中,使用的动漫头像数据集共有70,171张动漫头像图片,图片大小均为96*96。

2024-07-18 23:31:54 856

SQL 2012数据库帮助文档

启动sql server 2012帮助库管理器,方法是依次单击“开始”、“所有程序”、“SQL Server 2012”、“帮助和社区”和“管理帮助设置”,或是启动 SQL Server Management Studio,单击“帮助”菜单,然后选择“管理帮助设置”。 在帮助库管理器中,单击“选择联机或本地帮助”。 选择“我要使用本地帮助”,然后单击“确定”。 单击“从磁盘安装内容”,并浏览到您将下载的.EXE 解压缩到的目录。 选择 HelpContentSetup.msha 文件,再单击“打开”。 单击“下一步”。 单击您要安装的文档旁边的“添加”。 单击“更新”。 退出帮助库管理器

2020-10-29

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除