skygzx


  • 首页

  • 关于

  • 标签

  • 分类

  • 归档

  • 公益404

  • 搜索

YARN的Memory和CPU调优配置详解

发表于 2019-04-07
字数统计: 2.3k | 阅读时长 ≈ 10

Hadoop YARN同时支持内存和CPU两种资源的调度,本文介绍如何配置YARN对内存和CPU的使用。

阅读全文 »

Hadoop生态系统官网、下载地址、文档

发表于 2019-04-07
字数统计: 245 | 阅读时长 ≈ 1

Apache版本:

阅读全文 »

HDFS命令操作

发表于 2019-04-07
字数统计: 1.5k | 阅读时长 ≈ 6

命令基本格式:

1
hadoop fs -cmd < args >
阅读全文 »

Hadoop部署MapReduce+YARN

发表于 2019-04-07
字数统计: 800 | 阅读时长 ≈ 3

1.yarn部署:

阅读全文 »

Hadoop参数配置信息

发表于 2019-04-07
字数统计: 6.6k | 阅读时长 ≈ 29

前言:

Hadoop三个参数文件,我不是很理解,我网上找了一篇学习下

​ 配置hadoop,主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件,默认下来,这些配置文件都是空的,所以很难知道这些配置文件有哪些配置可以生效,上网找的配置可能因为各个hadoop版本不同,导致无法生效。浏览更多的配置,有两个方法:

阅读全文 »

Linux命令进阶

发表于 2019-04-07
字数统计: 2k | 阅读时长 ≈ 7

HDFS的基本结构

阅读全文 »

MapReduce架构设计

发表于 2019-04-07
字数统计: 1.3k | 阅读时长 ≈ 6

1.MapReduce 分布式计算框架

阅读全文 »

HDFS的读写流程及副本放置机制

发表于 2019-04-07
字数统计: 570 | 阅读时长 ≈ 2

1.写流程

阅读全文 »

Hadoop Web界面解读

发表于 2019-04-07
字数统计: 64 | 阅读时长 ≈ 1

> http://hadoop001:50070 HDFS界面

1.表头

阅读全文 »

HDFS架构设计

发表于 2019-04-07
字数统计: 809 | 阅读时长 ≈ 3

1.块 block

阅读全文 »
1…4567
skygzx

skygzx

记录skygzx的学习历程

68 日志
3 分类
63 标签
RSS
友链
  • hackeruncle
  • 大树
  • 在路上
  • wuwang
© 2019 skygzx
|
本站访客数:
0%