Databricks
面向企业的云上数据与 AI 平台,在开放数据湖之上统一数据工程、SQL 数仓、BI 看板与机器学习,并用 Unity Catalog 统管权限,适合企业数据平台团队在同一份数据上搭管道和智能体。
Databricks 是一个跑在云上的数据与 AI 平台,把数据工程、数据仓库、商业智能、机器学习和治理收进同一个工作区。它要解决的是数据团队各自为政的问题:原始数据放在数据湖里,分析要另开数仓,模型训练再换一套环境,权限和口径各管各的。Databricks 的做法是在开放的数据湖之上加一层表格式和元数据管理,让这些活在同一份数据上完成。
主要功能
平台按模块划分。数据工程用 Lakeflow 做批处理和流式数据的 ETL 与调度;数据仓库走 Lakehouse 路线,用 SQL 做分析;商业智能一侧有 AI/BI 和 Genie,支持用自然语言生成看板、做对话式查询。AI 方向提供 Agent Bricks 用来构建和部署 AI 智能体,另有 Lakebase,官方称是首个与 lakehouse 集成的无服务器 Postgres 数据库,面向数据应用和智能体。治理由 Unity Catalog 统一管理数据、模型、看板和智能体的权限与合规。
适合谁
主要是企业的数据平台团队、数据工程师、分析师和机器学习工程师。官网称超过 60% 的财富 500 强公司在用,全球客户超过两万家。个人想先试试,可以走 Free Edition,官方描述是免费使用专业的数据与 AI 工具;正式使用需要注册账号登录,平台部署在 AWS、Azure 和 GCP 上。
费用与限制
定价按 DBU 计费,官网有产品定价页和成本计算器,可以估算各家云上的计算开销,具体单价随产品和云厂商不同,页面上没有给出统一数字。界面为英文。产品线多、概念密集,不熟悉 lakehouse 和 Spark 体系的人上手成本不低;它面向的是有数据基础设施需求的组织,不是拿来即用的轻量工具。