---
layout: post
author: sjf0115
title: Hadoop 提升MapReduce性能的七点建议
date: 2018-04-22 09:32:17
tags:
- Hadoop
- Hadoop 优化
categories: Hadoop
permalink: hadoop-7-tips-for-improving-mapreduce-performance
---
在这篇文章里，我会重点介绍一些提高 MapReduce 性能的技巧。前几个技巧是面向整个集群的，对于操作人员和开发人员都很有用。后面的技巧适用于使用Java编写 MapReduce 作业的开发人员。在每一个建议中，我列出一些 '症状' 或是 '诊断测试' 来说明一些针对这些问题的改进措施。
请注意，这些建议中包含基于我在各种不同场景下总结出来的经验。它们可能不适用于你特定工作负载，数据集或集群，如果你想使用它，需要测试使用前和使用后它在你的集群中的表现。我将在4个节点的集群上展示在40GB数据�
