作者小头像 Lv.6
更多个人资料
3278 成长值
22 关注
43 粉丝
+ 关注 私信

个人介绍

操作系统产品经理，擅长鲲鹏云环境上云架构设计与评审。linux操作系统开发工程师，在OS的调测、维优、安装、升级和裁减等领域具有丰富的设计和开发经验。在鲲鹏云服务移植方面，具有多次成功移植经验。

感兴趣或擅长的领域

IOT、人工智能、云安全、云计算、大数据
个人勋章
TA还没获得勋章~
成长雷达
3195
48
0
15
20

个人资料

个人介绍

操作系统产品经理，擅长鲲鹏云环境上云架构设计与评审。linux操作系统开发工程师，在OS的调测、维优、安装、升级和裁减等领域具有丰富的设计和开发经验。在鲲鹏云服务移植方面，具有多次成功移植经验。

感兴趣或擅长的领域

IOT、人工智能、云安全、云计算、大数据

达成规则

以上满足项可达成此勋章

  • 博客
  • 关注
  • 粉丝
  • 论坛
全部时间
全部时间
最近三天
最近一周
最近一月
  • 全部
  • 暂无专栏分类
读书——《企业迁云实战》思维导图
如下图是《企业迁云实战》一书的思维导图，读的过程顺手画了思维导图，共享学习个人感觉本书就上云流程和小案例讲的挺好。
数据迁移
作者小头像 敏敏君主 2021-02-09 16:47:53
9588
0
1
2021-02-09 16:47:53
999+
0
1
数据系列——解构数据湖
从听说数据湖开始就想解构数据湖内部的组件，今天来尝试下。如下图所示为当前几大云厂商的数据湖结构图，包含：云平台、对象存储、云数据管理服务（针对对象存储的云数据管理）、大数据计算引擎、分析引擎、AI引擎等。汇总下数据湖的几大功能：存储管理计算分析AI智能 上面5大功能，我们可以将数据湖想象为一个数据加工厂，原始数据导入后经过一系列的计算、统计、分析和AI智能化。对外对接BI报表、业务运营等，以...
作者小头像 敏敏君主 2021-02-04 14:25:33
7889
1
0
2021-02-04 14:25:33
999+
1
0
大神说——数据真的是资产吗？数据辅助决策
今天阅读阿里的一篇大数据相关文章——《阿里大数据及AI实战.pdf》，其中提到关于数据的议题，我认为说的很透彻，值得记录与思考。数据如何变成价值？第一步，业务数据化第二步，数据资产化第三步，资产应用化第四步，应用价值化其实上面4步就为了一个目的——决策，即数据辅助决策。我们展开来讨论下：数据资产化，即让管理层清楚的看到用户资产的具体情况，涉及多少个端，多少个触点，每天产生的数据，沉淀下多少用...
大数据
作者小头像 敏敏君主 2021-02-03 19:05:20
8440
0
0
2021-02-03 19:05:20
999+
0
0
HDFS官网翻译——HDFS 架构指南（四）
文件系统元数据的持久性HDFS命名空间存储在NameNode结点中。NameNode使用Editlog记录文件系统元数据的每一次变更。Editlog是一个事务型日志。例如，HDFS创建新文件时会在Editlog文件中插入一条记录。类似地，文件副本数的变更也会引起在Editlog文件中记录一条日志。NameNode结点使用本地文件系统存储Editlog文件。FsImage文件中存储了文件系统命...
Hadoop 机器翻译
作者小头像 敏敏君主 2021-02-02 20:08:52
8545
0
0
2021-02-02 20:08:52
999+
0
0
HDFS官网翻译——HDFS 架构指南（三）
翻译https://hadoop.apache.org/docs/r1.2.1/hdfs_design.html-----------------------------------------------------------------------------------------------数据复制HDFS主要用于集群中可靠存储大型文件。它将每个文件作为一个快序列存储起来；文件包含...
Hadoop 机器翻译
作者小头像 敏敏君主 2021-01-29 10:05:22
8748
0
0
2021-01-29 10:05:22
999+
0
0
HDFS官网翻译——HDFS 架构指南（二）
翻译https://hadoop.apache.org/docs/r1.2.1/hdfs_design.html-----------------------------------------------------------------------------------------------NameNode 和 DataNodesHDFS是一个主备架构。一个HDFS集群包含一个Na...
Hadoop 机器翻译
作者小头像 敏敏君主 2021-01-29 09:31:25
9118
0
0
2021-01-29 09:31:25
999+
0
0
HDFS官网翻译——HDFS 架构指南（一）
翻译https://hadoop.apache.org/docs/r1.2.1/hdfs_design.html-----------------------------------------------------------------------------------------------介绍HDFS，The Hadoop Distributed FIle System 是设计用...
Hadoop 机器翻译
作者小头像 敏敏君主 2021-01-28 20:00:19
9530
0
0
2021-01-28 20:00:19
999+
0
0
大神说——云计算的本质是什么？
       之前看Thoughwork推出的系列视频“八叉说”，其中一期聊到云计算的本质，大神是这么说的：      资源弹性扩缩容；      大厂的技术能力以低廉的价格打包为产品出售。      其实我是很认同上述观点的。经常我们也被客户问到，云与传统的IDC机房相比，变了什么？我认为在使用层面没有改变。但是对于企业IDC运营人员是本质的改变，技术、方式和运营全部变更了。以前需要跑机房...
云计算
作者小头像 敏敏君主 2021-01-27 18:34:52
8373
0
1
2021-01-27 18:34:52
999+
0
1
海量小文件处理方式——新增组件完成小文件识别、合并与预取
       上周我们一起了解了下合并算法，这篇我们开始聊聊组件架构。       整体架构如下图所示：由原来的HDFS的NameNode、DataNode，与新增的组件中各个模块组成——Building TaskQueue（小文件队列）、File Merging Strategy（小文件合并）、Index File（索引文件）、Prefetching（预取）。        除了HDFS原...
Hadoop
作者小头像 敏敏君主 2021-01-26 11:50:39
8575
0
1
2021-01-26 11:50:39
999+
0
1
海量小文件处理方式——合并算法介绍
      大数据分析平台以下面的格式存储设备文件：/var/work/${file type}/year/month/day，形象的图如下：比如/var/work/pcap/2018/10/02/file1，file2......      大数据分析平台小文件合并算法是基于上述目录分层的，算法输入是上面的某个目录，比如/var/work/pcap/2018/10/02，算法输出是一个或者...
Hadoop
作者小头像 敏敏君主 2021-01-21 19:58:09
9809
0
0
2021-01-21 19:58:09
999+
0
0
总条数：37
10
10
20
50
100
  • 1
  • 2
  • 3
  • 4

上滑加载中

https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
作者小头像
作者小头像
快速交付
+ 关注 私信