Apache SystemDS 概述: SystemDS是用于端到端数据科学生命周期的通用系统,从数据集成,清理和功能工程,到高效,本地和分布式ML模型训练,再到部署和服务。 为此,我们的目标是为(1)数据科学生命周期的不同任务以及(2)具有不同专业知识的用户提供一种具有R类语法的声明性语言。 这些高级脚本被编译为本地,内存CPU和GPU操作以及Apache Spark上的分布式操作的混合执行计划。 与提供均质张量或2D数据集的现有系统相反,并且为了服务于整个数据科学生命周期,基础数据模型是DataTensor,即张量(多维数组),其第一维可能具有异类且嵌套架构。 快速入门 文档: P