Skip to content
Merged
Show file tree
Hide file tree
Changes from all commits
Commits
File filter

Filter by extension

Filter by extension

Conversations
Failed to load comments.
Loading
Jump to
Jump to file
Failed to load files.
Loading
Diff view
Diff view
11 changes: 8 additions & 3 deletions docs/MatrixOne-Intelligence/Data-Connect/loading.md
Original file line number Diff line number Diff line change
Expand Up @@ -15,7 +15,7 @@ MatrixOne Intelligence 提供高性能的数据载入能力,支持从多种渠

| 载入类型 | 支持格式 | 应用场景 |
|---------|---------|---------|
| 非结构化数据 | PDF、TXT、图片、Word 等 | 知识库构建、文档处理、多文档问答 |
| 非结构化数据 | 文档、图片、视频、音频等 | 知识库构建、文档处理、多文档问答 |
| 结构化数据(表导入) | CSV、XLSX、XLS | 财务、运营、销售等表格数据导入 |

!!! note
Expand All @@ -29,13 +29,18 @@ MatrixOne Intelligence 提供高性能的数据载入能力,支持从多种渠

1. 选择数据源(连接器文件 / 本地上传)
2. 选择载入类型(非结构化 / 结构化)
3. 配置载入方式:一次性载入或周期性载入(非结构化数据)
3. 配置载入设置
4. 选择目标位置(数据卷或数据库表)
5. 创建任务并查看执行状态

## 非结构化数据载入

适用于文档、图片、音频和视频类非结构化文件。用户只需选择要载入的文件,指定目标数据卷既可创建载入任务。
适用于文档、图片、音频和视频类非结构化文件。

- 载入模式:一次性载入适合仅需导入一次的场景,周期性载入适合定期更新数据的需求,并可设置具体周期(如每小时或每日)。
- 解压策略:支持自动解压。zip、. rar、. 7z、. tar.gz、. tar.bz2、. tar 类型压缩包,忽略目录结构将维护原有文件夹层级,扁平化结构将所有文件放在同一级目录。
- 重复文件处理:为避免重复导入相同文件,提供根据文件名和文件内容(md5)文件选择跳过或者覆盖。
- 载入范围:载入范围由文件类型与路径正则表达式共同限定,二者为且关系。当路径正则表达式为空时,表示不对路径进行限制,仅按文件类型进行筛选。对于压缩文件,路径正则匹配基于解压前的压缩包原始路径;匹配成功后,包内文件在解压后再按文件类型规则进行筛选。

![](https://community-shared-data-1308875761.cos.ap-beijing.myqcloud.com/artwork/mocdocs/images/load_1.png)

Expand Down
1 change: 1 addition & 0 deletions docs/MatrixOne-Intelligence/Data-Processing/workflow.md
Original file line number Diff line number Diff line change
Expand Up @@ -112,6 +112,7 @@
| 模块 | 功能说明 |
|---------------|---------------------------|
| 节点名称 | 100 字符以内,工作流内唯一,默认为节点类型名称。 |
| 提取结果 |•每个文件单独生成结果:对工作流输入的每个文件独立提取信息,并分别生成对应的 JSON 结果文件。 <br>•所有文件共同生成一个结果:将工作流输入的所有文件作为整体处理,从全部文件中查找并整合所需信息,最终仅生成一个合并后的 JSON 结果文件。 |
| 提取模型 | 支持接入大语言模型(Qwen-Turbo)和多模态模型(Qwen/Qwen2.5-VL-32B-Instruct)进行字段提取。当选择多模态模型时,可在工作流中直接连接至开始节点,直接处理包含文档与图片的文件 (暂不支持直接处理 htm/html/xlsx/xls/csv 格式文件),无需经过额外的解析节点,token 不能超过 128k。 |
| 提取信息 | 默认内置三种字段提取模版:财务报表(含表格)、发票 和 简历。同时支持通过表单方式自定义配置字段,系统将根据字段的名称、类型、含义及是否必填,自动生成对应的 JSON Schema。支持最多 4 层嵌套结构,字段数量上限为 40 个。配置过程中可随时切换至 JSON 预览模式,直观查看系统生成的实际 Schema 内容。 |
| 说明 | 节点备注 |
Expand Down
4 changes: 2 additions & 2 deletions docs/MatrixOne-Intelligence/Data-Sharing/pub-sub-overview.md
Original file line number Diff line number Diff line change
@@ -1,6 +1,6 @@
# 数据分享

MatrixOne Intelligence 为用户提供了集群内跨实例的数据分享功能,极大地增强了数据的流动性和可用性。用户可以在数据库管理界面进行发布订阅操作,实现不同实例间的数据实时同步和交流。MatrixOne Intelligence 的发布订阅机制为用户提供了一个强大、灵活且可靠的数据共享解决方案
MatrixOne Intelligence 提供集群内跨实例的数据发布与订阅能力,打破实例间的数据边界,显著提升数据流动性与复用效率。用户可通过数据库管理界面完成数据的发布与订阅配置,实现不同实例之间的数据实时共享与同步。同时,平台支持将数据库实例中的业务数据直接发布至 GenAI 工作区,为 NL2SQL 等智能分析与应用场景提供可靠的数据基础,帮助用户更高效地实现数据驱动的智能化决策

## 应用场景

Expand Down Expand Up @@ -36,7 +36,7 @@ MatrixOne Intelligence 为用户提供了集群内跨实例的数据分享功能
- **发布名**:发布名,唯一值,长度不大于 64 字符。
- **发布数据库**:发布对应的数据库名,不支持发布订阅库和系统数据库。
- **发布权限**:发布库为只读。
- **发布目标**:发布目标仅限于同一集群内的实例。您至少需要指定一个发布目标,而且可以添加任意数量的目标。通过下拉菜单,可以选择本组织内的实例,或者手动输入其他组织的实例 ID。请注意,不允许将实例设置为发布给它自己。
- **发布目标**:发布目标仅限于同一集群内的实例。您至少需要指定一个发布目标,而且可以添加任意数量的目标。通过下拉菜单,可以选择本组织内的实例,或者手动输入其他组织的实例 ID。请注意,不允许将实例设置为发布给它自己。如果是工作区则需要输入工作区的 id。
- **备注**:对于该发布的备注

发布创建成功后,您将能够查看发布的详细信息,并可以对其进行编辑或删除。
Expand Down
52 changes: 52 additions & 0 deletions docs/MatrixOne-Intelligence/Release-Notes/2025.md
Original file line number Diff line number Diff line change
@@ -1,5 +1,57 @@
# **MatrixOne Intelligence 2025 发布报告**

## 2025 年 12 月 18 日

**功能**

MatrixOne Intelligence v4.1.3 发布声明
功能

- 工作区支持对 Table 权限管理

工作区新增 Table 对象权限管理能力,支持对表对象以及行列级别数据进行精细化访问控制,用户可根据不同角色与业务场景灵活限定数据可见范围,在保障数据安全与合规的前提下,实现同一工作区内的数据共享与高效使用,满足分析、NL2SQL、智能体等多种数据访问场景需求。

<div align="center">
<img src=https://community-shared-data-1308875761.cos.ap-beijing.myqcloud.com/artwork/mocdocs/images/4.1.3_release_1.png
width=100% heigth=100%/>
</div>

- 信息提取节点功能增强

本次版本对信息提取节点能力进行了增强,新增多文件合并提取功能,支持从多个文件中统一抽取并整合信息,满足跨文件信息汇总与分析需求。同时,支持上传本地 JSON 文件自动生成提取 Schema,显著降低复杂场景下的配置成本,提升信息整合效率与易用性。

<div align="center">
<img src=https://community-shared-data-1308875761.cos.ap-beijing.myqcloud.com/artwork/mocdocs/images/4.1.3_release_2.png
width=100% heigth=100%/>
</div>

- 非结构化数据载入支持更多功能

新增对压缩文件的自动解压支持,并在载入过程中基于文件名与 MD5 实现智能去重,有效避免重复数据带来的存储与处理成本。同时支持按文件类型及文件路径的正则规则进行精细化过滤,帮助用户更高效地管理海量非结构化数据,提升数据准备效率与数据质量。

<div align="center">
<img src=https://community-shared-data-1308875761.cos.ap-beijing.myqcloud.com/artwork/mocdocs/images/4.1.3_release_3.png
width=100% heigth=100%/>
</div>

- 支持 MatrixOne 实例数据发布至 GenAI 工作区

新增支持将 MatrixOne 实例中的库表发布至 GenAI 工作区使用。
GenAI 工作区可通过订阅方式直接获取业务表数据,用于 NL2SQL 场景,提升 AI 对结构化数据的理解与查询能力,实现数据与 AI 应用的高效联动。

- 工作区支持 SQL 形式 API

支持以 SQL 形式的 API 执行 CREATE TABLE、INSERT、UPDATE 等操作。通过该能力,调用方可通过统一的 SQL API 完成表结构管理及数据写入、更新,降低接口使用复杂度,提升数据操作与自动化能力。

- 新增删除工作区功能

工作区新增删除能力,支持对不再使用的工作区进行清理。通过该功能,可减少无效资源占用,提升工作区管理的灵活性与整体运维效率。

**错误修复**

- 修复了不同角色权限赋给同一个用户,用户查不到数据的问题;
- 修复了数据增强 style_prompt 太长报错的问题。

## 2025 年 11 月 28 日

**功能**
Expand Down
26 changes: 21 additions & 5 deletions docs/MatrixOne-Intelligence/Workspace-Mgmt/data_mgt/catalog.md
Original file line number Diff line number Diff line change
@@ -1,6 +1,6 @@
# 数据中心

数据中心是数据存储与管理的关键组件,专为多模态数据场景打造,在数据驱动的业务中用于高效存储数据卷
数据中心是统一的数据存储与管理枢纽,面向多模态数据场景进行设计,支持对结构化与非结构化数据的高效存储与组织,满足数据驱动业务在规模化、稳定性与可管理性方面的需求。同时,数据中心支持直接订阅来自 MatrixOne 实例的数据库表,实现业务数据的集中汇聚与持续同步,为分析、建模及智能应用提供可靠的数据基础

## 数据组织结构说明

Expand All @@ -26,6 +26,8 @@ MOI 平台采用三级结构进行数据管理:**目录 → 库 → 卷**,
- **原始数据**:不能修改和删除,用于存放用户上传的原始文件或数据,并内置样例数据卷存放工作流模版的样例数据。
- **处理数据**:不能修改和删除,用于存放经过清洗、解析、提取等处理后的数据成果

## 非结构化数据

### 结果展示

点击文件列表右侧的预览按钮可查看该文件的血缘信息。
Expand All @@ -47,7 +49,7 @@ MOI 平台采用三级结构进行数据管理:**目录 → 库 → 卷**,
<tbody>
<tr>
<td rowspan="4">文档</td>
<td>• 文档解析节点<br>• 数据清洗节点<br>• 分段节点(4.0)</td>
<td>• 文档解析节点<br>• 数据清洗节点<br>• 分段节点</td>
<td>• json 文件(解析结果)<br>• md 文件(存放完整的解析后 markdown 内容)<br>• images 文件夹(存放解析生成的图片资源)<br>• tables 文件夹(存放解析生成的表格资源)</td>
</tr>
<tr>
Expand All @@ -64,7 +66,7 @@ MOI 平台采用三级结构进行数据管理:**目录 → 库 → 卷**,
</tr>
<tr>
<td rowspan="4">图片</td>
<td>• 图片解析节点<br>• 数据清洗节点<br>• 分段节点(4.0)</td>
<td>• 图片解析节点<br>• 数据清洗节点<br>• 分段节点</td>
<td>• json 文件(解析结果)<br>• images 文件夹</td>
</tr>
<tr>
Expand All @@ -81,7 +83,7 @@ MOI 平台采用三级结构进行数据管理:**目录 → 库 → 卷**,
</tr>
<tr>
<td rowspan="4">音频/视频</td>
<td>• 音频解析节点 / 视频解析节点<br>• 数据清洗节点<br>• 分段节点(4.0)</td>
<td>• 音频解析节点 / 视频解析节点<br>• 数据清洗节点<br>• 分段节点 </td>
<td>• json 文件(解析结果)</td>
</tr>
<tr>
Expand All @@ -97,4 +99,18 @@ MOI 平台采用三级结构进行数据管理:**目录 → 库 → 卷**,
<td>• jsonl 文件 (存放增强生成的 QA 对)</td>
</tr>
</tbody>
</table>
</table>

## 结构化数据

### 结果展示

点击表名可以查看表的详情信息,包括行列信息,建表语句、抽样数据等。

![](https://community-shared-data-1308875761.cos.ap-beijing.myqcloud.com/artwork/mocdocs/images/table_1.png)

### 结果下载

点击右侧的下载按钮可将表数据导出为 csv 文件

![](https://community-shared-data-1308875761.cos.ap-beijing.myqcloud.com/artwork/mocdocs/images/table_2.png)
Original file line number Diff line number Diff line change
@@ -1,21 +1,37 @@
# 角色权限配置

RBAC(基于角色的访问控制)是一种权限管理模型。该模型通过“用户 - 角色 - 权限”三层结构实现权限的统一分配与集中管理:用户不直接拥有权限,而是通过绑定角色间接获得权限。支持权限的集中配置与复用,实现权限管理的抽象化、标准化与规模化
在工作区创建完成后,系统默认生成两个角色:

- 超级管理员:拥有对工作区所有资源和操作的完全权限,不可修改、禁用或删除,用于保障系统的核心管理能力。
- 数据开发:同样具备全权限,但可根据实际需求进行修改、禁用或删除,支持灵活配置与角色继承。
在工作区创建完成后,系统默认生成超级管理员角色:拥有对工作区所有资源和操作的完全权限,不可修改、禁用或删除,用于保障系统的核心管理能力。

进入到工作区后,依次点击用户权限->角色权限->新建角色,填写角色名并配置改角色权限:

- 全局权限

| 模块 | 权限配置 |
|---------|-----------------------------------|
| 连接器 | <br>• 创建连接器 <br>• 查看连接器 <br>• 修改连接器 <br>• 删除连接器 |
| 载入任务 | <br>• 创建载入任务 <br>• 查看载入任务 <br>• 修改载入任务 <br>• 删除载入任务|
| 工作流 | <br>• 创建工作流 <br>• 运行工作流 <br>• 查看工作流 <br>• 停止工作流 <br>• 修改工作流<br>• 删除工作流 |
| 数据卷 | <br>• 创建数据卷 <br>• 查看数据卷 <br>• 删除数据卷 <br>• 导出数据卷 |
| 告警 | <br>• 创建告警规则 <br>• 查看告警规则 <br>• 修改告警规则 <br>• 创建通知对象 <br>• 查看通知对象 <br>• 修改通知对象 <br>• 删除通知对象 <br>• 查看告警记录 |
| 用户 | <br>• 创建用户 <br>• 查看用户信息 <br>• 修改用户角色 <br>• 修改用户信息 <br>• 启用/禁用用户 <br>• 删除用户 |
| 角色 | <br>• 创建角色 <br>• 查看角色 <br>• 修改角色 <br>• 启用/禁用角色 |
| 导出任务 | <br>• 创建导出任务 <br>• 查看导出任务 <br>• 导出任务查询 <br>• 导出任务修改 <br>• 导出任务删除|
| 工作流 | <br>• 创建工作流 <br>• 运行工作流 <br>• 查看工作流 <br>• 工作流查询 <br>• 停止工作流 <br>• 修改工作流<br>• 删除工作流 |
| 告警 | <br>• 创建告警规则 <br>• 查看告警规则 <br>• 修改告警规则 <br>• 删除告警规则 <br>• 创建通知对象 <br>• 查看通知对象 <br>• 修改通知对象 <br>• 删除通知对象 <br>• 查看告警记录 |
| 用户 | <br>• 创建用户 <br>• 查看用户 <br>• 修改用户密码 <br>• 修改用户角色 <br>• 修改用户信息 <br>• 启用/禁用用户 <br>• 删除用户 <br>• 查看用户日志 |
| 角色 | <br>• 创建角色 <br>• 查看角色 <br>• 修改角色 <br>• 删除角色 <br>• 启用/禁用角色 <br>• 查看角色日志 |
| 目录 | <br>• 创建目录 <br>• 查看目录 <br>• 修改目录 <br>• 删除目录 |
| 库 | <br>• 创建库 <br>• 查看库 <br>• 修改库 <br>• 删除库 |
| 卷 | <br>• 创建卷 <br>• 查看卷 <br>• 修改卷 <br>• 删除卷 <br>• 卷查询 <br>• 卷写入 |
| 表 | <br>• 创建表 <br>• 查看表 <br>• 修改表 <br>• 删除表 <br>• 创建视图 <br>• 修改视图 <br>• 删除视图 <br>• 表查询 <br>• 表写入 <br>• 表更新 <br>• 表删除 <br>• 表清除 |
| 知识库 | <br>• 创建知识库 <br>• 查看知识库 <br>• 修改知识库 <br>• 删除知识库 <br>• 使用知识库 |
| 发布订阅 | <br>• 查看订阅 <br>• 添加订阅 <br>• 修改订阅 <br>• 删除订阅 |

- 对象权限

| 对象 | 说明 |
|---------|-----------------------------------|
| 连接器 | <br>• 连接器查询 <br>• 连接器修改 <br>• 连接器删除 <br>• 连接器使用 |
| 导出任务 | <br>• 导出任务查询 <br>• 导出任务修改 <br>• 导出任务删除 |
| 目录 | <br>• 修改目录 <br>• 删除目录 <br>• 创建库 <br>• 查看库 |
| 库 | <br>• 修改库 <br>• 删除库 <br>• 创建卷 <br>• 查看卷 <br>• 创建表 <br>• 查看表 <br>• 创建视图 |
| 卷 | <br>• 修改卷 <br>• 删除卷 <br>• 卷查询 <br>• 卷写入 |
| 表 | <br>• 修改表 <br>• 删除表 <br>• 修改视图 <br>• 删除视图 <br>• 表查询(行列权限) <br>• 表写入 <br>• 表更新 <br>• 表删除 <br>• 表清除 |

![角色列表](../../Image/role1.png)
![](https://community-shared-data-1308875761.cos.ap-beijing.myqcloud.com/artwork/mocdocs/images/role_1.png)
Loading