切片机制优化大量小文件
combine 合并结果集
切片过程
判断虚拟存储的文件大小是否大于setMaxInputSplitSize值,大于等于则单独形成一个切片
如果不大于则跟下一个虚拟存储文件进行合并,共同形成一个切片
CombineTextInputFormat——悟空智慧教育
原文:https://www.cnblogs.com/wukongone/p/11900652.html