OutputFormat 是 MapReduce 输出的基类，所有实现 MapReduce 输出的都实现了 OutputFormat 接口。下面我们介绍几种常见的OutputFormat实现类。
Hadoop 默认使用的输出类型为：TextOutputFormat。现在有以下两种情况：
- 需要将返回的数据输入到 MySQL，则需要使用
DBOutputFormat自定义OutputFormat； - 如果需要根据数据内容，将数据输出到指定名称文件夹，则需要
FileOutPutFormat自定义OutputFormat。
将数据输入到 MySQL，参考：使用DBOutputFormat把MapReduce产生的结果集导入到 MySQL 中。本文来介绍第二种情况。
自定义OutputFormat步骤
- 自定义一个类继承FileOutputFormat；
- 改写 RecordWriter，具体改写输出数据的方法 write()。
场景：
过滤输入的 log 日志，包含字符串 baidu 的网站输出到 e:/baidu.log，不包含 baidu 的网站输出到 e:/other.log 文件中
最后
以上就是机智老虎最近收集整理的关于自定义 OutputFormat 输出，指定数据写入到不同文件下的全部内容，更多相关自定义内容请搜索靠谱客的其他文章。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复