
格兰诺拉
FREEMIUM无需机器人,智能会议记录
FEATURED

Dagster
Dagster 是一个数据编排平台,帮助团队构建、调度和监控可靠的数据管道,内置测试和可观测性功能。
什么是Dagster?
Dagster 是一款帮助自动组织和运行数据工作流的工具。可以把它看作是您所有数据任务的智能管理者。无需手动运行脚本或记住哪些文件相互依赖,Dagster 会为您处理这些。
Dagster 的独特之处在于它对数据的思考方式。它将您的表格、文件和模型视为重要的资产,而不仅仅关注创建它们的任务。这帮助您了解所有数据之间的关联。
该平台包含在代码上线前进行测试、自动检查数据质量以及展示数据处理成本的功能。您可以在自己的服务器上使用,也可以通过他们的托管服务在云端使用。
Dagster的功能
基于资产的数据编排和跟踪
本地测试和开发环境
自动数据质量验证检查
与dbt、Snowflake及其他工具集成
实时数据血缘可视化
内置成本跟踪和监控
智能触发器的调度自动化
原生Python开发体验
分支部署以确保安全测试
内置数据目录和元数据
Dagster定价
Solo
$10 /月
包含内容:
- 每月7,500积分
- 1 用户
- 1 个代码位置
- 1 次部署
- 30天免费试用
- 非常适合个人项目
最受欢迎
Starter
$100 /月
包含内容:
- 每月30,000积分
- 最多3名用户
- 5 个代码位置
- 1次部署
- 目录搜索
- 30天免费试用
- 基于角色的访问控制
Pro
Custom
包含内容:
- 无限代码位置
- 无限部署
- 成本跟踪与洞察
- 个性化入职支持
- 私人 Slack 频道
- 正常运行时间服务水平协议
- 定制安全问卷
Dagster仓库
在Github上查看| 星标 | 15,919 |
| 分支 | 2,224 |
| 仓库年龄 | 8 年 |
| 最后提交 | 19 小时 前 |
关于Dagster的常见问题
Dagster 是免费使用的吗?
是的,Dagster 有一个免费的开源版本,您可以在自己的基础设施上运行。对于托管服务,有一个每月 10 美元的 Solo 计划,提供 30 天免费试用;每月 100 美元的 Starter 计划;以及针对大型团队定制价格的 Enterprise Pro 计划。
Dagster 与 Apache Airflow 有何不同?
Dagster 关注的是您的数据资产(表格、模型、文件),而 Airflow 关注的是任务。这使得 Dagster 更适合理解数据依赖关系和血缘。Dagster 还具有更简单的本地测试和开发功能,让您无需复杂设置即可在笔记本电脑上运行管道。
我可以将 Dagster 与我现有的工具如 dbt 和 Snowflake 一起使用吗?
是的,Dagster 对 dbt、Snowflake 以及许多其他流行的数据工具有强大的内置支持。它旨在与您现有的技术栈协同工作,而不是取代它。您可以逐步采用 Dagster,而无需一次性迁移所有内容。
使用 Dagster 需要了解 Python 吗?
是的,Dagster 使用 Python 来定义管道和数据资产。不过,学习曲线较为平缓,文档中包含了许多示例。如果你熟悉 SQL 和基本的编程概念,可以相对较快地上手。
Dagster 能处理机器学习管道吗?
绝对可以。Dagster 非常适合机器学习工作流。它有助于管理训练数据、模型训练、评估和部署。许多团队同时使用 Dagster 来处理数据工程和机器学习管道,使得保持所有环节的连接和组织更加容易。
加载中...
查看用户对以下工具的评价 Dagster
0.0
0 评价
5
0
4
0
3
0
2
0
1
0
暂无评价
成为第一个评价者 Dagster













