Hadoop-2.2.0中文文档—— MapReduce 下一代 - Encrypted Shuffle

<configuration>

  <!-- Client certificate Store -->
  <property>
    <name>ssl.client.keystore.type</name>
    <value>jks</value>
  </property>
  <property>
    <name>ssl.client.keystore.location</name>
    <value>${user.home}/keystores/client-keystore.jks</value>
  </property>
  <property>
    <name>ssl.client.keystore.password</name>
    <value>clientfoo</value>
  </property>

  <!-- Client Trust Store -->
  <property>
    <name>ssl.client.truststore.type</name>
    <value>jks</value>
  </property>
  <property>
    <name>ssl.client.truststore.location</name>
    <value>${user.home}/keystores/truststore.jks</value>
  </property>
  <property>
    <name>ssl.client.truststore.password</name>
    <value>clientserverbar</value>
  </property>
  <property>
    <name>ssl.client.truststore.reload.interval</name>
    <value>10000</value>
  </property>
</configuration>

激活Encrypted Shuffle
当你改变了上面的配置，要通过重启所有的  NodeManagers 来激活 Encrypted Shuffle.
重要: 使用 encrypted shuffle 会导致对性能有明显影响。用户应该避免这种情况，并尽可能地 保留1或更多的加密 shuffle 核心。(?)
ClientCertificates 客户端证书
使用客户端证书并不能完全保证客户端是作业的一个reducer任务。当前，客户端证书(他们的私钥)keystore 文件 必须对所有提交作业到集群的用户 是可读的。这意味着一个欺诈性的作业可以读这些 keystore 文件，并在其上使用客户端证书与一个Shuffle服务器建立安全连接。然而，除非欺诈性作业有一个合理的 JobToken, 否则它将不能从 Shuffle server 上检索数据。一个作业，用其自己的 JobToken, 仅可以检索属于它自身的数据。
重载Truststores
默认地， truststores 会每10秒重载一次他们的配置文件。如果在一个旧的 truststore 文件 上复制了一个新的，它会被重新读取，它的证书也会替换掉旧的。这种机制对于从集群上添加或删除节点，或者是添加/删除信任的客户端非常有用。这种情况下，客户端或者 NodeManager 证书就被添加到(或从中删除)系统中的所有的 truststore 文件上，并且不必重启 NodeManager 守护进程，新的配置就会被发现。
Debugging
注意: 启用 debugging 仅仅是为了发现和解决问题，作业也只是运行在小量数据上。会几个数量级地减慢作业，也是冗长的。(你可能需要增加 mapred.task.timeout 防止作业失败，因为任务执行如此之慢。)
要在 reducers 中允许 SSL debugging, 设置-Djavax.net.debug=all in the mapreduce.reduce.child.java.opts 属性; 例如：
  <property>
    <name>mapred.reduce.child.java.opts</name>
    <value>-Xmx-200m -Djavax.net.debug=all</value>
  </property>
你可以在每个作业上都这样做，或用 mapred-site.xml 的集群范围内的设置。
要在 NodeManager 中设置这个属性, 请在 yarn-env.sh 文件中设置:
  YARN_NODEMANAGER_OPTS="-Djavax.net.debug=all $YARN_NODEMANAGER_OPTS"