博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
【原创】Hadoop配置详解
阅读量:5354 次
发布时间:2019-06-15

本文共 558 字,大约阅读时间需要 1 分钟。

  1. 作业配置

mapred.job.name

作业名

mapred.job.priority

作业优先级

mapred.job.map.capacity

最多同时运行map任务数

mapred.job.reduce.capacity

最多同时运行reduce任务数

hadoop.job.ugi

作业执行权限

mapred.map.tasks

map任务个数

mapred.reduce.tasks

reduce任务个数

mapred.job.groups

作业可运行的计算节点分组

mapred.task.timeout

任务没有响应(输入输出)的最大时间

mapred.compress.map.output

map的输出是否压缩

mapred.map.output.compression.codec

map的输出压缩方式

mapred.output.compress

reduce的输出是否压缩

mapred.output.compression.codec

reduce的输出压缩方式

stream.map.output.field.separator

map输出分隔符

转载于:https://www.cnblogs.com/siwei1988/archive/2012/07/12/2588464.html

你可能感兴趣的文章
雷林鹏分享Node.js JXcore 打包
查看>>
常见错误总结
查看>>
BZOJ3545&3551[ONTAK2010]Peaks——kruskal重构树+主席树+dfs序+树上倍增
查看>>
Django框架(十九)--Django rest_framework-认证组件
查看>>
我的MFC/C++学习笔记 http://blog.bccn.net/CrystalFan/6909
查看>>
Beta 冲刺(3/7)
查看>>
控制反转(IOC)和依赖注入(DI)
查看>>
php的<?php ?>标签匹配
查看>>
百马百石
查看>>
计算几何讲义——计算几何中的欧拉定理
查看>>
第7本《万万没想到-用理工科思维理解世界1》含书评
查看>>
深入nginx之《获取用户的真实IP》
查看>>
selenium断言
查看>>
python day03
查看>>
cocos2d HelloWorld 项目横竖屏、自动旋转问题
查看>>
1013. Battle Over Cities (25)
查看>>
poj 3280 Cheapest Palindrome
查看>>
maven 安装alipay-sdk包到本地及远程仓库
查看>>
牛客网在线判题系统JavaScript(V8)使用
查看>>
PL/SQL Developer StringBuffer 专用复制
查看>>