首页/产品/DataHub · 数据枢纽
产品能力

结构化与非结构化数据治理,构建 AI-ready 中间产物。

DataHub 将数据库、IoT、Word、PDF、图片、音频与视频统一纳入治理闭环,生成可信中间数据库、语义索引、证据包与 AI-ready 上下文,让 Agent、Canvas 和 Console 可以稳定调用。

申请体验
数据流向示意
IoT 设备
业务系统
历史档案
文档 / 图像
API 接口
DATAHUB
6 STAGES
可信中间库
语义索引
证据包
AI-ready 产物
数据 API
中间库
结构化、文档、图片、音频、视频统一治理
证据包
规则、样本、血缘、置信度随产物输出
AI-ready
语义索引、特征表、上下文包标准化生成
可审计
处理前后差异和产物版本全程留痕
核心命题

基于证据的数据治理,而不是不可追溯的 AI 判断。

DataHub 将 ETL、Python 规则分析、非结构化解析和 AI-ready 产物生成放在一条可验证链路里。每一个中间产物都能回到具体字段、规则、样本与血缘证据。

01
ETL 接入清洗
Extract · Transform · Load
统一接入多源数据,完成字段标准化、类型转换、去重、缺失补全与任务重跑。
02
规则中心校验
Rules · Metrics · Profiling
沉淀可复用规则库,统一检测数据质量、Schema 漂移、跨表一致性与敏感字段命中。
03
证据化异常诊断
Evidence Packet
每个异常输出规则 ID、影响字段、样本证据、严重等级、置信度与血缘路径。
04
AI-ready 产物
Context · Evidence · Index
将数据证据、语义索引、规则命中和字段血缘整理成 Agent、Canvas 与 Console 可调用的中间产物。
05
验证与审计回写
Verify · Record
复跑规则验证处理结果,将操作日志、血缘变化和治理经验写回知识层。
Evidence Packet
每个 AI-ready 产物,都带着数据证据。

中间产物不是不可追溯结果,而是由规则命中、样本记录、血缘路径和业务语义共同组成的证据包。

ruleId
missing_rate_check
severity
high
field
resident.health_record
confidence
0.92
规则中心

先验证,再进入智能决策。

DataHub 的规则中心把数据质量、敏感探测和风险识别放在同一个治理入口。无论数据来自数据库、文档、图片还是音视频,进入 Agent 或 Canvas 前都会先形成可配置、可复用、可审计的规则结果。

01
配置规则
02
数据准入
03
命中证据
04
告警处置
05
复核回写
数据验证规则

在数据进入分析、推理和自动化流程前,先校验格式、必填项、取值范围、枚举口径、唯一性和跨表一致性。

字段类型完整性枚举漂移跨表一致
敏感探测规则

识别身份证号、手机号、地址、健康档案、财务字段、业务密钥等敏感内容,并按场景触发标记、脱敏或隔离。

PII 探测业务密级脱敏策略风险隔离
规则生命周期

每条规则都有版本、责任人、适用数据域、命中样本、误报反馈和审计记录,支持复用到不同业务场景。

版本管理责任归属命中证据审计回放
Validation Issue
居民健康档案缺失率异常
High
Issue ID
DQ-2026-0619-017
字段
resident.health_record
规则
required_field_missing_rate
责任组
公共卫生数据组
状态
待复验
批次:community_a_20260618影响:1,246 行样本缺失率:18.4%阈值:<= 3%
单条 Issue 的验证与处理闭环

每个数据验证问题都会保留规则、字段、样本、责任人、处理动作和复验结果,便于技术团队排查,也便于业务和审计方回看。

01
定位异常批次
按来源系统、区县、上传时间切片,确认异常集中在新接入批次。
02
生成修复建议
对照字段映射历史,建议回退新模板映射并补跑缺失字段抽取。
03
复跑验证规则
修复后自动复验,缺失率降至 1.7%,记录处理前后差异。
覆盖范围

一个数据枢纽,统一治理结构化、非结构化与多模态数据。

页面不再把能力拆成许多平行模块,而是围绕“数据进入可信闭环”组织:先接入,再解析,再校验,再形成可信中间数据库、证据包和 AI-ready 中间产物。

结构化与实时数据

数据库、API、消息队列和 IoT 遥测进入同一条 ETL/ELT 生产线。

MySQL / PostgreSQL / OracleKafka / MQTT / OPC-UAREST / GraphQL / gRPC
文件与多模态数据

Word、PDF、图片、音频、视频被解析成可治理、可追踪的数据资产。

Word / PDF / ExcelJPG / PNG / TIFFMP3 / WAV / MP4
语义与知识资产

抽取出的实体、表格、事件、指标口径进入向量索引、知识图谱和审计记录。

Entity / Table / EventVector Index / Knowledge GraphLineage / Evidence Packet
安全引用层

让数据资产被外部系统与 AI Agent 放心调用。

DataHub 不只负责把数据整理成资产,也负责定义资产如何被安全引用。外部 API、MCP 工具链与 RLS 策略共享同一套权限、审计和治理证据,避免智能体或业务系统绕过数据边界。

01
资产授权
02
引用配置
03
策略校验
04
调用审计
05
回写证据
06
持续复核
Open API
外部 API 引用

将治理后的数据资产以受控 API、实时订阅和只读视图开放给业务系统、自动化流程与外部应用。

OAuth / API Key 鉴权字段级授权范围限流与调用审计Webhook / SSE 订阅
MCP Tools
MCP 快捷设置

把已授权的数据资产快速发布为 MCP Server / Tool,让 AI Agent 通过标准协议引用数据,而不是绕过治理直连底层系统。

一键生成工具描述按数据域绑定权限工具调用日志留痕沙箱测试与灰度发布
Row Level Security
RLS 安全策略

在行级、租户级和组织级设置访问边界,确保不同角色、部门和客户只看到自己被授权的数据范围。

租户与部门隔离角色条件表达式敏感行动态脱敏策略命中可回放
多模态治理

Word、PDF、图片、音频、视频,都能进入同一套治理闭环。

DataHub 不只处理数据库和表格,也能把文档、图片、录音和视频转成可检索、可抽取、可审计的数据资产,并生成 Python 规则结果与 AI-ready 中间产物。

文件接入
内容解析
结构化抽取
质量校验
语义索引
Agent 审核
当前文件类型:Word / Docx
会议纪要、合同、审批材料、专家报告
内容解析
解析标题、段落、表格、批注、页眉页脚与附件引用。
结构化抽取
抽取责任人、时间、事项、金额、指标口径和待办动作。
质量治理
检查模板缺项、字段口径冲突、重复版本和敏感字段外泄。
Agent 动作
Agent 对比历史版本和字段字典,发现“服务对象”口径变更未同步到下游表单。
Python / AI 工具链
python-docxunstructuredpydanticpandera
治理产物
结构化纪要记录 + 字段映射建议 + 人工复核任务
交互演示

点击体验 DataHub 如何处理数据源、Python 工具与 AI-ready 产物。

选择一个业务场景,再点击数据源、Python 包或治理步骤。页面会同步展示样本字段、质量问题、工具产物和可交给 Agent 的上下文。

Health Governance
公共卫生数据治理

整合体检、营养档案、随访记录与社区服务数据,持续发现字段缺失、口径冲突和高风险人群线索。

数据源
Active Evidence
数据源
居民健康档案
当前问题
health_record 缺失率升至 18.4%
Python 工具
pandas / polars
Agent 状态
Observe
Python 数据处理工具链
点击包名查看用途
DataFrame
pandas / polars
批量画像、缺失率、重复率与字段分布计算
Output
quality_profile.json
Agent Loop 处理过程
Quality Agent
读取 ETL 后的健康档案画像,发现 health_record 缺失率异常升高。
Evidence
ruleId=missing_rate_check · field=health_record · missing=18.4%
Result
生成高优先级异常事件,进入诊断队列。
当前数据字段
resident_idagebmichronic_tags
企业级可信层

规则、血缘、审计和人审,支撑 Agent 真正落地。

技术细节被收束到可信层:它不抢主叙事,但给技术团队、管理者和审计方足够的落地信心。

验证与敏感探测

规则中心持续检测缺失率、重复率、Schema 漂移、枚举漂移、跨表一致性与敏感字段命中。

panderagreat_expectationsPIImasking
多模态解析

文档、图像、音频和视频先转为结构化证据,再进入统一治理流程。

pdfplumberPaddleOCROpenCVwhisper
血缘证据

每次判断都带规则、样本、字段、来源、影响范围和置信度。

OpenLineagenetworkxauditIdevidence
人在回路

低风险动作可自动执行,高风险修复进入审批、复核和回滚机制。

approvalrollbackreviewpolicy
Connector Index
MySQLPostgreSQLOracleMongoDBRedisElasticsearchKafkaRabbitMQPulsarRESTGraphQLgRPCMQTTModbusOPC-UAHadoopSparkFlinkCSVExcelJSONJPGPNGTIFFMP3WAVMP4MOVRTSPS3OSSAzure Blob
携手共建

申请体验,开启您的 AI 运营闭环。

告诉我们你的场景、数据系统与部署环境,解决方案团队会据此安排产品体验、场景演示或试点沟通。

申请体验