Introducing Flyte: A Cloud Native Machine Learning and Data Processing Platform

Introducing Flyte: A Cloud Native Machine Learning and Data Processing Platform

摘要

今天Lyft很高兴地宣布Flyte的开源，Flyte是一个结构化编程和分布式处理平台，用于高并发、可扩展和可维护的工作流。Flyte在Lyft服务生产模型训练和数据处理已有三年多的时间，成为定价、地点、预计到达时间（ETA）、地图、自驾（L5）等团队事实上的平台。事实上，Flyte在Lyft管理着超过7000个独特的工作流程，每月总执行量超过10万次，100万个任务，1000万个容器。在这篇文章中，我们将向您介绍Flyte，概述它所解决的问题类型，并提供如何利用它来满足您的机器学习和数据处理需求的例子。