轻量数据平台 · 2C4G 搞定全场景

数据平台可以很小,
功能不打折。

一套 DataY 跑起来,数据集成、任务调度、高性能数仓、智能问数 —— 全有。 一个 JAR,内嵌 DuckDB,拒绝 Hadoop / Spark / Flink / ClickHouse 组件地狱。

  • Java 17 · 零依赖启动
  • 20+ 数据源
  • 流批一体
  • 智能问数
DataY 首页资产概览
2 核 4G跑通全链路
1 个 JAR内嵌 DuckDB
20+数据源支持
5 大能力一体化平台

为什么是 DataY?

用最极致的硬件利用,交付最完整的数据能力。

传统方案

  • Hadoop / Spark / Flink / Doris / DolphinScheduler 一整套
  • 几十上百台机器起步
  • 运维门槛高,需要专职大数据工程师

DataY

  • 一个 JAR,内嵌 DuckDB,拒绝组件地狱
  • 2 核 4G 即可跑通数据集成 → 数仓 → 问数
  • 零依赖启动,10 分钟搭好开发环境

五大能力,一个平台

数据集成 · 数据建模 · 数据开发 · 任务调度 · 数据应用

数据集成

Data Integration

  • 支持 MySQL / PostgreSQL / Oracle / Doris / ClickHouse / DuckDB 等十余种数据源
  • 可视化拖拽画布编排 ETL 数据流,也可 JSON 配置文件一键跑任务
  • 全量同步、增量同步、MySQL CDC / PostgreSQL CDC 实时同步
  • 自动建表(DDL 转换),源表改字段自动同步到目标

数据建模

Data Modeling

  • 支持 Star Schema / Snowflake 维度建模,普通维度 / 层级维度 / 时间维度
  • 事实表字段关联维度,自动携带业务语义
  • 指标管理:原子指标 / 衍生指标,业务限定统一口径
  • 内嵌列存 DuckDB,单机跑出分布式数仓性能

数据开发

Data Development

  • 基于 Vue Flow 的拖拽式 ETL 画布,节点连线编排数据流,双击配置参数
  • 丰富的组件库:输入 / 处理 / 输出 / 路由组件,覆盖 CDC、SQL 处理、Doris 加载
  • 多类型任务:ETL、SQL、Shell、DAG 工作流、Demo
  • DAG 工作流编排,执行时自动拓扑排序,按序调度子任务

任务调度

Job Scheduler

  • Cron 定时调度,Quartz 引擎精准到秒,支持动态上下线
  • 依赖调度:父子任务自动拓扑排序,父任务成功后触发子任务
  • 手动触发、暂停 / 恢复、失败重试,实例全生命周期监控
  • 调度 master 与执行 worker 可分离部署,Redis 队列分发与 Leader 选举

数据应用

Data Applications

  • 智能问数:自然语言 → 指标 → 维度 → 时间过滤 → 取数,一句话拿报表
  • RAG 本地向量索引,指标口径不跑偏,业务语义有依据
  • 公共指标查询面板,选指标即可出结果

一条链路,覆盖数据全生命周期

从数据接入到数据应用,平台内闭环。

数据集成ETL / CDC
→
数据建模维度 / 指标
→
数据开发画布 / 任务
→
任务调度Cron / DAG
→
数据应用问数 / 报表
ETL 可视化画布
可视化 ETL 画布
公共指标查询面板
公共指标查询面板
智能问数解析与结果
智能问数

快速开始

克隆、构建、启动,10 分钟见到完整平台。启动时自动预置一整套电商示例,登录即用。

  • 数据源:电商数仓(DuckDB)
  • 维度表:日期 / 客户 / 门店 / 商品 / 品牌 / 品类 / 时间
  • 事实表:销售订单、订单明细、会员
  • 指标:销售额、销量、毛利、毛利率、客单价等 12 个
# 1. 克隆仓库
git clone https://cnb.cool/yuyuejia/datay

# 2. 构建项目
cd datay
mvn clean package -DskipTests

# 3. 启动(单机模式,调度 + 执行合一)
java -jar datay-web/target/*.jar \
  --DATAY_AI_API_KEY=sk-xxxxxxxxx

# 4. 打开 http://localhost:8080
#    默认账号 admin / admin

联系我们

邮件或微信,随时与我们交流合作与使用问题。

邮件

产品咨询、商务合作、问题反馈,欢迎来信。

datay@yuyuejia.com.cn

微信

扫码添加微信,加入交流群与我们沟通。

DataY 微信二维码