AEEDP 产品文档
当前可验证能力与技术边界
版本 2026-07-18产品边界
AEEDP 是面向企业数据工程与治理场景的平台，当前覆盖认证与权限、关系型数据同步、元数据、质量、SQL 模型、工作流、血缘、告警、数据 API 及治理模块。
文档口径：“已交付”表示当前代码与系统中存在对应实现；“规划中”不构成采购、验收、交付时间或服务等级承诺。
技术架构
当前系统技术栈如下：
Web 应用与 API 服务分离，异步及调度任务由独立 Worker 执行。Docker 承载应用进程，OpenResty 提供站点和 API 入口转发。
能力清单
| 领域 | 当前能力 | 状态 |
|---|---|---|
| 访问控制 | 认证、用户、角色和 RBAC | 已交付 |
| 数据源 | MySQL、PostgreSQL | 已交付 |
| 持久同步 | APPEND、TRUNCATE_INSERT、checkpoint、retry、cron | 已交付 |
| 数据工程 | SELECT AST 校验、表/视图物化、DAG、血缘 | 已交付 |
| 数据治理 | 元数据、质量、数据标准、主数据、生命周期 | 已交付 |
| 数据服务 | 受控数据 API、API key、限流、审计、API 市场 | 已交付 |
| 告警 | Webhook | 已交付 |
集成与持久同步
数据源
配置和管理 MySQL、PostgreSQL 连接，读取库表字段元数据，并用于同步与模型任务。
同步模式
APPEND 追加目标数据；TRUNCATE_INSERT 清空目标后重新写入。
运行恢复
持久化 checkpoint，任务失败后按配置重试，并保留运行状态。
调度
使用 cron 表达式配置周期执行，由独立 Worker 处理调度和执行。
模型、DAG 与血缘
SQL 模型仅接受 SELECT 查询，并在执行前进行 AST 校验。模型输出可物化为表或视图。工作流使用 DAG 表达任务依赖，执行状态与依赖关系可用于形成数据血缘。
SQL 校验用于限制模型语句类型，不等同于数据库权限隔离。生产环境仍需使用最小权限的数据源账号和网络访问控制。
元数据、质量与治理
元数据
管理数据源、数据库、表与字段信息，为质量、模型、血缘和服务发布提供上下文。
质量规则
NOT_NULL：检查目标字段非空。UNIQUE：检查目标字段值唯一。ROW_COUNT_MIN：检查结果行数不低于配置阈值。
治理模块
当前提供数据标准、主数据和数据生命周期管理。具体规则、审批责任和执行范围应按组织治理流程配置。
告警与数据服务
Webhook 告警
可配置 Webhook 接收端，用于发送任务异常等运行事件。接收端鉴权、可用性和消息处置由实施范围共同确定。
受控数据 API
数据服务以 REST API 对外提供受控访问，支持 API key、请求限流和调用审计。API 市场用于管理 API 目录与订阅关系。
API 入口
开发环境公开 API 基础入口：
https://dev.aeedp.com/api具体资源路径、请求参数与权限以系统中的路由和 API 市场目录为准。调用受认证、API key、权限或限流策略约束。
规划能力
以下能力尚未作为当前已交付能力发布：
| 方向 | 状态 |
|---|---|
| AI 辅助 | 规划中 |
| BI 分析 | 规划中 |
| CDC | 规划中 |
| 批量导入 | 规划中 |
| 工单 | 规划中 |
| 成本管理 | 规划中 |
路线图会随验证结果调整，不提供未实现能力的上线日期或服务等级承诺。
更新日志
本日志记录面向用户的产品能力和文档变化。内部部署信息、安全细节及凭据变更不在公开日志中披露。
20260613 · 初始版本
初始发布
- 发布 AEEDP 官网、产品文档和管理端初始界面。
- 建立用户认证、角色权限、用户管理和基础审计能力。
- 提供数据源、同步任务及数据治理等核心模块的初始产品框架。
- 形成数据集成、治理、服务和分析方向的产品路线图。
该版本包含部分原型与规划界面；当时文档中的路线图能力不代表均已完成生产验证。
20260715 · 生产化能力更新
历史版本
新增与完善
- 完成 MySQL、PostgreSQL 数据源发现及持久化同步，支持 checkpoint、失败重试和 cron 调度。
- 完成元数据、质量规则、数据标准、主数据和数据生命周期管理。
- 完成 SELECT SQL 模型、表/视图物化、DAG 工作流和数据血缘。
- 完成 Webhook 告警、受控数据 API、API key、限流、审计和 API 市场。
- 更新管理端文档中心与 FAQ，使帮助内容与已交付能力一致。
文档与边界调整
- 官网和产品文档改为以可验证实现为准，移除未经验证的量化指标和案例。
- AI、BI、CDC、批量导入、工单和成本管理明确标记为规划能力。
- 技术架构更新为 React 19、Express、TypeScript、Prisma、MySQL、独立 Worker、Docker 和 OpenResty。
安全与隐私
- 增加隐私说明、咨询表单防滥用和访问统计数据最小化措施。
- 加强后台会话、请求校验和敏感运行配置保护。
20260718 · 可靠性与一致性更新
当前版本
数据执行
- 生命周期归档增加写入与删除数量校验，归档冲突时整批回滚，不删除未归档源数据。
- 元数据重扫保留字段标识与数据标准映射；Worker 增加周期心跳和执行 lease 校验。
- 同步、模型、主数据和生命周期手动运行增加并发入队保护，模型调度失败不再跳过当前周期。
访问与管理端
- API 配额采用并发预留，Webhook 禁止自动重定向，数据源与同步任务更新加强有效性校验。
- 管理端合并并发 token 刷新，启动时刷新当前角色和权限，并完善主数据分页与密码找回入口。
- 规划页面统一标识为开发中和演示数据，不作为当前交付能力。
官网与隐私
- 访问统计改为原子增量汇总，匿名访客并发去重，降低公开请求的数据库聚合开销。
- 咨询网络地址按网段匿名化；管理员会话增加账号复核、空闲时限和绝对时限。