跳到正文
全部标签

# 调优

共 2 篇文章

  • Spark 任务跑了 3 小时,别急着问 AI 怎么调参

    Spark 任务跑了 3 小时,别急着问 AI 怎么调参

    Spark 任务跑了 3 小时,很多数据开发第一反应是问 AI 要不要改 executor、shuffle、分区数。但慢任务不是靠一句调参解决的。本文结合 Expedia 分析 Spark SQL Plan 的实践,说明普通数据开发为什么要先拿出执行计划、运行指标和业务上下文这 3 份证据。
  • 数据周刊|AI 已经会查 Spark 慢任务了,但它先问你要 3 份证据

    数据周刊|AI 已经会查 Spark 慢任务了,但它先问你要 3 份证据

    本期数据周刊关注 Data Engineering Weekly #277:Databricks Lakebase、Meta AI Storage、Expedia 诊断 Spark SQL Plan、Stripe 重放历史流量。对数据分析师、BI 和数据开发来说,为什么 AI 能帮忙之前,先要准备 3 份证据?