AI 词汇表
人工智能完整词典
200
个类别
2,608
个子类别
30,011
个术语
个术语
Apache Airflow
Airbnb 开发的开源工作流编排平台,通过 DAG(有向无环图)定义、调度和监控复杂数据管道。
个术语
Apache Oozie
专为 Hadoop 生态系统设计的工作流系统,支持 MapReduce、Pig、Hive 和 HDFS 作业的编排,并管理时间性和条件性依赖。
个术语
Luigi
Spotify 开发的开源 Python 框架,用于构建复杂数据管道,具备依赖管理、任务可视化和与 Hadoop 的原生集成。
个术语
Apache NiFi
自动化、安全的数据流平台,通过实时可视化管道设计界面,实现系统间数据的传输、转换和路由。
个术语
Kubeflow
用于在 Kubernetes 上部署和管理机器学习工作流的开源工具包,可编排复杂的 ML 管道,并支持版本控制和实验跟踪。
个术语
Prefect
现代 Python 工作流编排引擎,提供动态流管理、原生可观测性和弹性,支持云/本地混合执行。
个术语
Dagster
以资产为中心的数据编排平台,提供声明式管道开发、单元测试和数据生命周期管理,采用模块化架构。
个术语
Azkaban
LinkedIn 开发的开源批处理工作流系统,专注于 Hadoop 作业调度,具有简单的 Web 界面和时间依赖管理。
个术语
Apache Storm
实时分布式流处理系统,能够编排无界处理拓扑,具有毫秒级延迟并提供精确一次处理保证。
个术语
Apache Beam
用于批处理和流处理管道的统一编程模型,允许在多个运行器(如 Apache Flink, Spark, Dataflow)上编写可移植的工作流。
个术语
Netflix Conductor
个术语
Flyte
个术语
Temporal
个术语
AWS Step Functions
个术语
Apache Kafka Streams
个术语
Operator Pattern
🔍