Shuffle 面试题6 道

和Shuffle相关的题都在这里，涉及Spark、项目与面试表达、Hadoop / Hive / HBase。

全部 CheckpointWatermark反压Flink 状态Exactly-OnceFlink SQLCDC实时数仓数据倾斜ShuffleOOM 与内存小文件Join 优化Hive 调优分区与分桶HDFSYARNHBaseRebalance消息积压数据不丢不重消息顺序拉链表维度建模数仓分层宽表数据质量数据治理指标体系用户画像窗口函数连续登录留存与漏斗Top N去重MySQL 索引事务DorisStarRocksClickHouseIceberg湖仓一体RAGAgent向量数据库大模型项目怎么讲线上问题排查管理岗面试
  1. 83 Spark Shuffle 为什么慢？怎么优化？ Spark
  2. 94 Spark SQL 的 Broadcast、SortMerge 和 ShuffleHash Join 怎么选？ Spark
  3. 134 Shuffle Write 阶段特别慢，磁盘 IO 打满了Shuffle 原理和优化 Spark
  4. 296 候选人说「Shuffle 我懂」怎么三个追问把他问到底？ 项目与面试表达
  5. 314 MapReduce Shuffle 过程是怎样的？ Hadoop / Hive / HBase
  6. 372 Shuffle 是 MapReduce 最贵的操作Shuffle 过程详解和优化 Hadoop / Hive / HBase