metaflow netflix开源的数据科学ML&AI 框架,类似的也有kedro,metaflow 相比kedro 来说对于云原生周边支持的更加友好
一张图了解metaflow 能力
如下图,很清晰的说明了metaflow 的能力,而且都是基于代码声明的
说明
metaflow 官方文档比较详细,使用上相比kedro 基于项目代码结构的模式更加清晰,对于基于k8s 以及云的场景还是很值得尝试下的,同时还有一本专门的书籍值得学习下Effective Data Science Infrastructure
参考资料
https://metaflow.org/
https://github.com/Netflix/metaflow
https://kedro.org/
https://docs.metaflow.org/introduction/why-metaflow