小文件 面试题9 道

和小文件相关的题都在这里,涉及Spark、Hadoop / Hive / HBase、OLAP 与数据湖、分布式与综合。

  1. 99 Spark 为什么会写出大量小文件?怎么控制? Spark
  2. 142 小文件太多导致下游 Hive 查询变慢Spark 写出文件怎么控制? Spark
  3. 310 HDFS 小文件过多,怎么治理? Hadoop / Hive / HBase
  4. 346 每天跑完 ETL 后小文件爆炸,你怎么解决? Hadoop / Hive / HBase
  5. 366 上传了 10 万个小文件集群卡死了HDFS 小文件问题全解析 Hadoop / Hive / HBase
  6. 454 导入数据后查询突然变慢了Compaction 机制和小文件合并 OLAP 与数据湖
  7. 470 小文件太多,查询特别慢?OPTIMIZE 和 Z-Ordering 怎么优化数据布局? OLAP 与数据湖
  8. 480 小文件太多怎么解决?OPTIMIZE 和 Compaction OLAP 与数据湖
  9. 1090 数据倾斜和小文件问题同时出现两者有什么关联?怎么一起解决? 分布式与综合