AI 詞彙表
人工智能完整詞典
200
類別
2,608
子類別
30,011
術語
術語
Apache Airflow
Airbnb 开发的开源工作流编排平台，通过 DAG（有向无环图）定义、调度和监控复杂数据管道。
術語
Apache Oozie
专为 Hadoop 生态系统设计的工作流系统，支持 MapReduce、Pig、Hive 和 HDFS 作业的编排，并管理时间性和条件性依赖。
術語
Luigi
Spotify 开发的开源 Python 框架，用于构建复杂数据管道，具备依赖管理、任务可视化和与 Hadoop 的原生集成。
術語
Apache NiFi
自动化、安全的数据流平台，通过实时可视化管道设计界面，实现系统间数据的传输、转换和路由。
術語
Kubeflow
用于在 Kubernetes 上部署和管理机器学习工作流的开源工具包，可编排复杂的 ML 管道，并支持版本控制和实验跟踪。
術語
Prefect
现代 Python 工作流编排引擎，提供动态流管理、原生可观测性和弹性，支持云/本地混合执行。
術語
Dagster
以资产为中心的数据编排平台，提供声明式管道开发、单元测试和数据生命周期管理，采用模块化架构。
術語
Azkaban
LinkedIn 开发的开源批处理工作流系统，专注于 Hadoop 作业调度，具有简单的 Web 界面和时间依赖管理。
術語
Apache Storm
实时分布式流处理系统，能够编排无界处理拓扑，具有毫秒级延迟并提供精确一次处理保证。
術語
Apache Beam
用于批处理和流处理管道的统一编程模型，允许在多个运行器（如 Apache Flink, Spark, Dataflow）上编写可移植的工作流。
術語
Netflix Conductor
術語
Flyte
術語
Temporal
術語
AWS Step Functions
術語
Apache Kafka Streams
術語
Operator Pattern
🔍