Hacker News (AI)atharvashah
行业动态
The Cost of Running Databricks Jobs on All-Purpose Compute
AI 摘要
Databricks 平台指出，许多团队在开发阶段使用全用途（all-purpose）交互式集群，笔记本转为定时任务后仍沿用该集群，导致任务结束后计费不停止、闲置时间持续产生费用，且共享集群无法按任务拆分成本。Databricks 建议定时任务改用无服务器计算或 Jobs 计算，后者在运行结束后自动终止；并提供了系统表查询，用于找出过去 30 天运行在全用途集群上的任务。
简评
对用 Databricks 做数据开发的团队来说，这提醒了一个常见盲区：开发时图方便留下的集群配置，会随任务上线悄悄变成持续账单。把「选什么计算」纳入上线检查，既能省钱，也能让每个任务的成本算得清楚。
- 云计算成本
- 数据平台
- 成本优化
- 定时任务
本站只提供模型生成的摘要，不转载原文。 完整内容请前往原始出处阅读。
阅读原文 ↗