关于hadoop里配置的疑问

zhaopingzi

mapred-site.xml里：
mapred.output.compression.codec代表输出结果所使用的编解码器，也可以用gz或者bzip2或者lzo或者snappy等
我想问的问题是，这个值能否设置2个或多个，如这样设置：
     <property>
     <name>mapreduce.map.output.compress.codec</name>
     <value>com.hadoop.compression.lzo.LzoCodec,org.apache.hadoop.io.compress.SnappyCodec</value>
     </property>
谢谢

zhaopingzi

有明白的吗？？？

sohusina

你可以把编码器写到core-site.xml文件，如

1. <property>
   
2.     <name>io.compression.codecs</name>
   
3.     <value>org.apache.hadoop.io.compress.GzipCodec,org.apache.hadoop.io.compress.DefaultCodec,com.hadoop.compression.lzo.LzoCodec,com.hadoop.compression.lzo.LzopCodec,org.apache.hadoop.io.compress.BZip2Codec</value>
   
4.   </property>
   
5.   <property>
   
6.     <name>io.compression.codec.lzo.class</name>
   
7.     <value>com.hadoop.compression.lzo.LzoCodec</value>
   
8.   </property>

复制代码

然后把它加入mapred-site.xml，如

1. <property>
   
2.     <name>mapreduce.map.output.compress</name>
   
3.     <value>true</value>
   
4.   </property>
   
5.   <property>
   
6.     <name>mapreduce.map.output.compress.codec</name>
   
7.     <value>com.hadoop.compression.lzo.LzoCodec</value>
   
8.   </property>

复制代码