在大数据处理过程中,在数据量越来越大的场景下,合理的使用压缩技术对于作业的执行性能是有非常大的提升的。但是如果压缩方式选择的不合理,反而会导致作业性能的降低。请大家谈谈,对压缩的认识~~
提示:
1) 常用的压缩格式有哪些
2) 压缩格式对比及如何选择
3) 使用MapReduce结合LZO压缩的数据进行词频统计
在大数据处理过程中,在数据量越来越大的场景下,合理的使用压缩技术对于作业的执行性能是有非常大的提升的。但是如果压缩方式选择的不合理,反而会导致作业性能的降低。请大家谈谈,对压缩的认识~~
提示:
1) 常用的压缩格式有哪些
2) 压缩格式对比及如何选择
3) 使用MapReduce结合LZO压缩的数据进行词频统计
数据加载中...