|
|
50f2da5503
|
fix: 修复 hasArchive 和 splitByLine 同时存在的问题
问题：hasArchive 默认为 true，而 splitByLine 可以与其同时开启，
导致压缩包被错误地按行分割，产生逻辑矛盾。
修复：
1. 当 hasArchive=true 时，禁用 splitByLine switch
2. 添加 useEffect，当 hasArchive 变为 true 时自动关闭 splitByLine
修改文件：frontend/src/pages/DataManagement/Detail/components/ImportConfiguration.tsx
|
2026-02-04 15:43:53 +08:00 |
|
|
|
3af1daf8b6
|
fix: 修复流式分割上传的"预上传请求不存在"错误
问题：handleStreamUpload 中为所有文件只调用一次 preUpload，设置
totalFileNum: files.length（原始文件数），但实际上传的文件数量
是按行分割后的总行数，导致后端提前删除预上传请求。
修复：将 preUpload 调用移到文件循环内部，为每个原始文件单独调用
preUpload，设置 totalFileNum: 1，每个文件有自己的 reqId。
这样可以避免按行分割导致的请求被提前删除问题。
修改文件：frontend/src/hooks/useSliceUpload.tsx
|
2026-02-04 15:39:05 +08:00 |
|
|
|
7c7729434b
|
fix: 修复流式分割上传的三个问题
1. 实现真正的并发控制，避免同时产生大量请求
- 使用任务队列模式，确保同时运行的任务不超过 maxConcurrency
- 完成一个任务后才启动下一个，而不是一次性启动所有任务
2. 修复 API 错误（预上传请求不存在）
- 所有分片使用相同的 fileNo=1（属于同一个预上传请求）
- chunkNo 改为行号，表示第几行数据
- 这是根本原因：之前每行都被当作不同文件，但只有第一个文件有有效的预上传请求
3. 保留原始文件扩展名
- 正确提取并保留文件扩展名
- 例如：132.txt → 132_000001.txt（而不是 132_000001）
|
2026-02-04 15:06:02 +08:00 |
|
|
|
17a62cd3c2
|
fix: 修复上传取消功能，确保 HTTP 请求正确中止
- 在 XMLHttpRequest 中添加 signal.aborted 检查
- 修复 useSliceUpload 中的 cancelFn 闭包问题
- 确保流式上传和分片上传都能正确取消
|
2026-02-04 14:51:23 +08:00 |
|
|
|
f381d641ab
|
fix(upload): 修复流式上传中的文件名处理逻辑
- 修正预上传接口调用时传递正确的文件总数而非固定值-1
- 移除导入配置中文件分割时的文件扩展名保留逻辑
- 删除流式上传选项中的fileExtension参数定义
- 移除流式上传实现中的文件扩展名处理相关代码
- 简化新文件名生成逻辑，不再附加扩展名后缀
|
2026-02-04 07:47:41 +08:00 |
|
|
|
c8611d29ff
|
feat(upload): 实现流式分割上传，优化大文件上传体验
实现边分割边上传的流式处理，避免大文件一次性加载导致前端卡顿。
修改内容：
1. file.util.ts - 流式分割上传核心功能
- 新增 streamSplitAndUpload 函数，实现边分割边上传
- 新增 shouldStreamUpload 函数，判断是否使用流式上传
- 新增 StreamUploadOptions 和 StreamUploadResult 接口
- 优化分片大小（默认 5MB）
2. ImportConfiguration.tsx - 智能上传策略
- 大文件（>5MB）使用流式分割上传
- 小文件（≤5MB）使用传统分割方式
- 保持 UI 不变
3. useSliceUpload.tsx - 流式上传处理
- 新增 handleStreamUpload 处理流式上传事件
- 支持并发上传和更好的进度管理
4. TaskUpload.tsx - 进度显示优化
- 注册流式上传事件监听器
- 显示流式上传信息（已上传行数、当前文件等）
5. dataset.model.ts - 类型定义扩展
- 新增 StreamUploadInfo 接口
- TaskItem 接口添加 streamUploadInfo 和 prefix 字段
实现特点：
- 流式读取：使用 Blob.slice 逐块读取，避免一次性加载
- 逐行检测：按换行符分割，形成完整行后立即上传
- 内存优化：buffer 只保留当前块和未完成行，不累积所有分割结果
- 并发控制：支持 3 个并发上传，提升效率
- 进度可见：实时显示已上传行数和总体进度
- 错误处理：单个文件上传失败不影响其他文件
- 向后兼容：小文件仍使用原有分割方式
优势：
- 大文件上传不再卡顿，用户体验大幅提升
- 内存占用显著降低（从加载整个文件到只保留当前块）
- 上传效率提升（边分割边上传，并发上传多个小文件）
相关文件：
- frontend/src/utils/file.util.ts
- frontend/src/pages/DataManagement/Detail/components/ImportConfiguration.tsx
- frontend/src/hooks/useSliceUpload.tsx
- frontend/src/pages/Layout/TaskUpload.tsx
- frontend/src/pages/DataManagement/dataset.model.ts
|
2026-02-03 13:12:10 +00:00 |
|
|
|
88b1383653
|
fix: 恢复前端发送空字符串以支持清除关联数据集
修改说明：
移除了之前将空字符串转换为 undefined 的逻辑，
现在直接发送表单值，包括空字符串。
配合后端修改（commit cc6415c）：
1. 当用户选择"无关联数据集"时，发送空字符串 ""
2. 后端 handleParentChange 方法通过 normalizeParentId 将空字符串转为 null
3. Dataset.parentDatasetId 字段添加了 @TableField(updateStrategy = FieldStrategy.IGNORED)
4. 确保即使值为 null 也会被更新到数据库
|
2026-02-03 10:57:14 +00:00 |
|
|
|
2445235fd2
|
fix: 修复编辑数据集时清除关联数据集不生效的问题
问题描述：
在数据管理的数据集编辑中，如果之前设置了关联数据集，编辑时选择不关联数据集后保存不会生效。
问题原因：
- BasicInformation.tsx中，"无关联数据集"选项的值是空字符串""
- 当用户选择不关联数据集时，parentDatasetId的值为""
- 后端API将空字符串视为无效值而忽略，而不是识别为"清除关联"的操作
修复方案：
- 在EditDataset.tsx的handleSubmit函数中，将parentDatasetId的空字符串转换为undefined
- 使用 formValues.parentDatasetId || undefined 确保空字符串被转换为 undefined
- 这样后端API能正确识别为要清除关联数据集的操作
|
2026-02-03 09:23:13 +00:00 |
|
|
|
893e0a1580
|
fix: 上传文件时任务中心立即显示
问题描述：
在数据管理的数据集详情页上传文件时，点击确认后，弹窗消失，但是需要等待文件处理（特别是启用按行分割时）后任务中心才弹出来，用户体验不好。
修改内容：
1. useSliceUpload.tsx: 在 createTask 函数中添加立即显示任务中心的逻辑，确保任务创建后立即显示
2. ImportConfiguration.tsx: 在 handleImportData 函数中，在执行耗时的文件处理操作（如文件分割）之前，立即触发 show:task-popover 事件显示任务中心
效果：
- 修改前：点击确认 → 弹窗消失 → （等待文件处理）→ 任务中心弹出
- 修改后：点击确认 → 弹窗消失 + 任务中心立即弹出 → 文件开始处理
|
2026-02-03 09:14:40 +00:00 |
|
|
|
05e6842fc8
|
refactor(DataManagement): 移除不必要的数据集类型过滤逻辑
- 删除了对数据集类型的过滤操作
- 移除了不再使用的 textDatasetTypeOptions 变量
- 简化了 BasicInformation 组件的数据传递逻辑
- 减少了代码冗余，提高了组件性能
|
2026-02-03 13:33:12 +08:00 |
|
|
|
c44c75be25
|
fix(login): 修复登录页面样式问题
- 修正了标题下方描述文字的CSS类名，移除了错误的空格
- 更新了页脚版权信息的样式类名
- 简化了底部描述文本的内容，保持一致的品牌信息
|
2026-02-02 22:49:46 +08:00 |
|
|
|
e71116d117
|
refactor(components): 更新标签组件类型定义和数据处理逻辑
- 修改 Tag 接口定义，将 id 和 color 字段改为可选类型
- 更新 onAddTag 回调函数参数类型，从对象改为字符串
- 在 AddTagPopover 组件中添加 useCallback 优化数据获取逻辑
- 调整标签去重逻辑，支持 id 或 name 任一字段匹配
- 更新 DetailHeader 组件的数据类型定义和泛型约束
- 添加 parseMetadata 工具函数用于解析元数据
- 实现 isAnnotationItem 函数判断注释类型数据
- 优化知识库详情页的标签处理和数据类型转换
|
2026-02-02 22:15:16 +08:00 |
|
|
|
cac53d7aac
|
fix(knowledge): 更新知识管理页面标题为知识集
- 将页面标题从"知识管理"修改为"知识集"
|
2026-02-02 21:49:39 +08:00 |
|
|
|
43b4a619bc
|
refactor(knowledge): 移除知识库创建中的扩展元数据字段
- 删除了表单中的扩展元数据输入区域
- 移除了对应的 Form.Item 包装器
- 简化了创建知识库表单结构
|
2026-02-02 21:48:21 +08:00 |
|
|
|
b36fdd2438
|
feat(annotation): 添加数据类型过滤功能到标签配置树编辑器
- 引入 DataType 枚举类型定义
- 根据数据类型动态过滤对象标签选项
- 在模板表单中添加数据类型监听
- 改进错误处理逻辑以提高类型安全性
- 集成数据类型参数到配置树编辑器组件
|
2026-02-02 20:37:38 +08:00 |
|
|
|
daa63bdd13
|
feat(knowledge): 移除知识库管理中的敏感级别功能
- 注释掉创建知识集表单中的敏感级别选择字段
- 移除知识集详情页面中的敏感级别显示项
- 注释掉相关的敏感级别选项配置常量
- 更新表单布局以保持一致的两列网格结构
|
2026-02-02 19:06:03 +08:00 |
|
|
|
85433ac071
|
feat(template): 移除模板类型和版本字段并添加管理员权限控制
- 移除了模板详情页面中的类型和版本显示字段
- 移除了模板列表页面中的类型和版本列
- 添加了管理员权限检查功能，通过 localStorage 键控制
- 将编辑和删除操作按钮限制为仅管理员可见
- 将创建模板按钮限制为仅管理员可见
|
2026-02-02 18:59:32 +08:00 |
|
|
|
fc2e50b415
|
Revert "refactor(template): 移除模板列表中的类型、版本和操作列"
This reverts commit a5261b33b2.
|
2026-02-02 18:39:52 +08:00 |
|
|
|
26e1ae69d7
|
Revert "refactor(template): 移除模板列表页面的创建按钮"
This reverts commit b2bdf9e066.
|
2026-02-02 18:39:48 +08:00 |
|
|
|
b2bdf9e066
|
refactor(template): 移除模板列表页面的创建按钮
- 删除了右上角的创建模板按钮组件
- 移除了相关的点击事件处理函数调用
- 调整了页面布局结构以适应按钮移除后的变化
|
2026-02-02 16:35:09 +08:00 |
|
|
|
a5261b33b2
|
refactor(template): 移除模板列表中的类型、版本和操作列
- 移除了类型列（内置/自定义标签显示）
- 移除了版本列
- 移除了操作列（查看、编辑、删除按钮）
- 保留了创建时间列并维持其渲染逻辑
|
2026-02-02 16:20:50 +08:00 |
|
root
|
52daf30869
|
a
|
2026-02-02 16:09:25 +08:00 |
|
|
|
a73571bd73
|
feat(annotation): 优化模板配置树编辑器中的属性填充逻辑
- 修改对象配置属性填充条件，仅在名称不存在时设置默认值
- 为控制配置添加标签类别判断逻辑
- 区分标注类和布局类控件的属性填充策略
- 标注类控件始终填充必需属性，布局类控件仅在需要时填充
- 修复属性值设置逻辑，确保正确引用名称属性
|
2026-02-02 15:26:25 +08:00 |
|
|
|
00fa1b86eb
|
refactor(DataAnnotation): 移除未使用的状态变量并优化选择器逻辑
- 删除未使用的 addChildTag 和 addSiblingTag 状态变量
- 将 Select 组件的值设置为 null 以重置选择状态
- 简化 handleAddNode 调用的处理逻辑
- 移除不再需要的状态管理代码以提高性能
|
2026-02-02 15:23:01 +08:00 |
|
|
|
626c0fcd9a
|
fix(data-annotation): 修复数据标注任务进度计算问题
- 添加 toSafeCount 工具函数确保数值安全处理
- 支持 totalCount 和 total_count 字段兼容性
-
|
2026-02-01 23:42:06 +08:00 |
|
|
|
2f2e0d6a8d
|
feat(KnowledgeManagement): 保留知识集原始字段信息
- 在更新标签时保持知识集的名称、描述、状态等核心属性
- 保留领域、业务线、负责人等元数据信息
- 维护有效期、敏感度等配置项
- 确保源类型和自定义元数据字段不被覆盖
- 防止更新标签操作意外丢失其他重要字段值
|
2026-02-01 23:30:01 +08:00 |
|
|
|
10fad39e02
|
feat(KnowledgeManagement): 为知识集详情页添加标签功能
- 引入 updateKnowledgeSetByIdUsingPut、createDatasetTagUsingPost 和 queryDatasetTagsUsingGet API
- 添加 Clock 图标用于显示更新时间
- 替换条目数和更新时间的图标为 File 和 Clock 组件
- 配置标签组件以支持添加、获取和创建标签
- 实现标签的创建和添加逻辑
- 集成标签的异步加载和更新功能
|
2026-02-01 23:26:54 +08:00 |
|
|
|
9014dca1ac
|
fix(knowledge): 修复知识集详情页面状态判断逻辑
- 修正了 office 预览状态的条件判断
- 移除了对 PENDING 状态的冗余检查
- 优化了状态轮询的触发条件
|
2026-02-01 23:15:50 +08:00 |
|
|
|
0b8fe34586
|
refactor(DataManagement): 简化文件操作逻辑并移除文本数据集类型检查
- 移除了未使用的 DatasetType 导入
- 删除了 TEXT_DATASET_TYPE_PREFIX 常量定义
- 移除了 isTextDataset 工具函数
- 直接设置 excludeDerivedFiles 参数为 true，简化查询逻辑
|
2026-02-01 23:13:09 +08:00 |
|
|
|
27e27a09d4
|
fix(knowledge): 移除知识条目编辑器中的冗余提示消息
- 删除了文件上传成功后的重复提示信息
- 保持了文件对象的正确处理逻辑
- 优化了用户体验避免不必要的操作反馈
|
2026-02-01 23:07:32 +08:00 |
|
|
|
d24fea83d8
|
feat(KnowledgeItemEditor): 添加文件上传替换功能的加载状态
- 添加 loading 状态用于控制文件上传和替换操作
- 在文件上传前设置 loading 状态为 true
- 在文件替换前设置 loading 状态为 true
- 在操作完成后通过 finally 块重置 loading 状态
- 将 loading 状态绑定到确认按钮的 confirmLoading 属性
|
2026-02-01 23:07:10 +08:00 |
|
|
|
05088fef1a
|
refactor(data-management): 优化文本数据集类型判断逻辑
- 添加 TEXT_DATASET_TYPE_PREFIX 常量定义
- 新增 isTextDataset 工具函数用于判断文本数据集类型
- 使用 isTextDataset 函数替换原有的直接比较逻辑
- 提高代码可读性和类型判断的准确性
|
2026-02-01 23:02:05 +08:00 |
|
|
|
6c4f05c0b9
|
fix(data-management): 修复文件预览状态检查逻辑
- 移除 PENDING 状态的预览轮询检查
- 避免在 PENDING 状态下重复轮询导致的性能问题
- 优化预览加载状态管理流程
|
2026-02-01 22:32:03 +08:00 |
|
|
|
438acebb89
|
feat(data-management): 添加Office文档预览功能
- 集成LibreOffice转换器实现DOC/DOCX转PDF功能
- 新增DatasetFilePreviewService处理预览文件管理
- 新增DatasetFilePreviewAsyncService异步转换任务
- 在文件删除时同步清理预览文件
- 前端实现Office文档预览状态轮询机制
- 添加预览API接口支持状态查询和转换触发
- 优化文件预览界面显示转换进度和错误信息
|
2026-02-01 22:26:05 +08:00 |
|
|
|
f06d6e5a7e
|
fix(utils): 修复请求工具中的XMLHttpRequest配置问题
- 移动XMLHttpRequest实例化到方法开头避免重复创建
- 删除被注释掉的旧请求完成事件处理代码
- 修正请求错误和中止事件的错误处理逻辑
- 移除重复的xhr.open调用确保正确的HTTP方法设置
|
2026-02-01 22:07:43 +08:00 |
|
|
|
fda283198d
|
refactor(knowledge): 移除未使用的Tag组件导入
- 从KnowledgeSetDetail.tsx中移除未使用的Tag组件导入
- 保持代码整洁性，消除无用的依赖项
|
2026-02-01 22:05:10 +08:00 |
|
|
|
d535d0ac1b
|
feat(knowledge): 添加Office文档预览轮询机制
- 引入useRef钩子用于管理轮询定时器和当前处理项目
- 添加Spin组件用于预览加载状态显示
- 新增queryKnowledgeItemPreviewStatusUsingGet API调用接口
- 设置OFFICE_PREVIEW_POLL_INTERVAL和OFFICE_PREVIEW_POLL_MAX_TIMES常量
- 移除原有的Office预览元数据解析相关代码
- 添加officePreviewStatus、officePreviewError状态管理
- 实现pollOfficePreviewStatus函数进行预览状态轮询
- 添加clearOfficePreviewPolling清理轮询定时器功能
- 在handlePreviewItemFile中集成预览状态轮询逻辑
- 更新关闭预览时清理轮询和重置状态
- 移除表格中的Office预览标签显示
- 优化PDF预览界面，在无预览URL时显示加载或错误状态
|
2026-02-01 22:02:57 +08:00 |
|
|
|
4d2c9e546c
|
refactor(menu): 调整菜单结构并更新数据管理标题
- 将数据管理菜单项标题从"数据管理"改为"数集管理"
- 重新排列菜单项顺序，将数据标注和内容生成功能移至数据管理后
- 数据集统计页面标题从"数据管理"更新为"数据集统计"
- 移除重复的数据标注和内容生成菜单配置项
|
2026-02-01 21:40:21 +08:00 |
|
|
|
2430db290d
|
fix(knowledge): 修复知识管理页面统计信息显示错误
- 将第二个统计项从"文件总数"更正为"知识类别"
- 将第三个统计项从"标签总数"更正为"文件总数"
- 在统计数据显示区域调整标签总数的位置
- 确保统计数据与标题正确对应
|
2026-02-01 20:46:54 +08:00 |
|
|
|
40889baacc
|
feat(knowledge): 添加知识库条目预览功能
- 集成 docx4j 和 LibreOffice 实现 Office 文档转 PDF 预览
- 新增 KnowledgeItemPreviewService 处理预览转换逻辑
- 添加异步任务 KnowledgeItemPreviewAsyncService 进行文档转换
- 实现预览状态管理包括待转换、转换中、就绪和失败状态
- 在前端界面添加 Office 文档预览状态标签显示
- 支持 DOC/DOCX 文件在线预览功能
- 添加预览元数据存储和管理机制
|
2026-02-01 20:05:25 +08:00 |
|
|
|
551248ec76
|
feat(data-annotation): 添加表格序号列并移除任务ID列
- 添加序号列显示当前页码计算后的行号
- 移除原有的任务ID列
- 序号列居中对齐宽度为80px
- 序号基于当前页码和页面大小动态计算
- 保持表格
|
2026-02-01 19:11:39 +08:00 |
|
|
|
0bb9abb200
|
feat(annotation): 添加标注类型显示功能
- 在前端页面中新增标注类型列并使用Tag组件展示
- 添加AnnotationTypeMap常量用于标注类型的映射
- 修改接口定义支持labelingType字段的传递
- 更新后端项目创建和更新逻辑以存储标注类型
- 添加标注类型配置键常量统一管理
- 扩展数据传输对象支持标注类型属性
- 实现模板标注类型的继承逻辑
|
2026-02-01 19:08:11 +08:00 |
|
|
|
d135a7f336
|
feat(knowledge): 添加知识库标签统计功能
- 在 KnowledgeItemApplicationService 中注入 TagMapper 并调用统计方法
- 新增 countKnowledgeSetTags 方法用于计算知识库中的标签总数
- 在 KnowledgeManagementStatisticsResponse 中添加 totalTags 字段
- 在前端 KnowledgeManagementPage 中显示标签总数统计信息
- 更新统计卡片布局从 3 列改为 4 列以适应新增统计项
- 在知识管理模型中添加 totalTags 类型定义
|
2026-02-01 18:46:31 +08:00 |
|
|
|
7043a26ab3
|
feat(auth): 添加登录功能和路由保护
- 在侧边栏添加退出登录按钮并实现登出逻辑
- 添加 ProtectedRoute 组件用于路由权限控制
- 创建 LoginPage 组件实现登录界面和逻辑
- 集成本地登录验证到 authSlice 状态管理
- 配置路由表添加登录页面和保护路由
- 实现自动跳转到登录页面的重定向逻辑
|
2026-02-01 14:11:44 +08:00 |
|
|
|
906bb39b83
|
feat(annotation): 添加保存并跳转到下一段功能
- 新增 SAVE_AND_NEXT_LABEL 常量用于保存并跳转按钮文本
- 添加 saveDisabled 状态控制保存按钮禁用逻辑
- 修改顶部工具栏布局为三列网格结构
- 在工具栏中间位置添加保存并跳转到下一段/下一条按钮
- 调整保存按钮样式移除主色调设置
- 优化保存按钮禁用状态逻辑统一管理
- 修改保存功能区分普通保存和跳转保存操作
|
2026-02-01 13:09:55 +08:00 |
|
|
|
dbf8ec53dd
|
style(ui): 统一预览模态框宽度为响应式尺寸
- 将 CreateAnnotationTaskDialog 中的预览模态框宽度从固定像素改为 80vw
- 将 VisualTemplateBuilder 中的预览抽屉宽度从 600px 改为 80vw
- 将 PreviewPromptModal 中的模态框宽度从 800px 改为 80vw
- 将 Overview 组件中的文本和媒体预览宽度统一改为 80vw
- 将 KnowledgeSetDetail 中的文本和媒体预览宽度统一改为 80vw
- 移除原来固定的像素值，使用响应式单位提升用户体验
|
2026-02-01 12:49:56 +08:00 |
|
|
|
5f89968974
|
refactor(dataset): 重构数据集基础信息组件
- 优化 BasicInformation 组件结构和逻辑
- 更新 CreateDataset 组件的数据处理流程
- 改进表单验证和错误处理机制
- 统一组件间的事件传递方式
- 提升代码可读性和维护性
|
2026-02-01 11:31:09 +08:00 |
|
|
|
aeec19b99f
|
feat(annotation): 添加保存快捷键功能
- 实现了 Ctrl+S 保存快捷键检测逻辑
- 添加了 handleSaveShortcut 事件处理函数
- 在窗口上注册键盘事件监听器
- 修改 requestExport 函数支持 autoAdvance 参数
- 更新保存按钮点击事件传递 autoAdvance 参数
|
2026-01-31 20:47:33 +08:00 |
|
|
|
4f99875670
|
feat(data-management): 添加数据集类型判断并控制按行分割功能显示
- 从 dataset.model 中导入 DatasetType 类型定义
- 新增 isTextDataset 变量用于判断当前数据集是否为文本类型
- 将按行分割配置项包裹在条件渲染中，仅在文本数据集时显示
- 保持原有非文本文件禁用逻辑不变
|
2026-01-31 18:50:56 +08:00 |
|
|
|
c23a9da8cb
|
feat(knowledge): 添加知识库目录管理功能
- 在知识条目表中新增relative_path字段用于存储条目相对路径
- 创建知识条目目录表用于管理知识库中的目录结构
- 实现目录的增删查接口和相应的应用服务逻辑
- 在前端知识库详情页面集成目录显示和操作功能
- 添加目录创建删除等相关的API接口和DTO定义
- 更新数据库初始化脚本包含新的目录表结构
|
2026-01-31 18:36:40 +08:00 |
|
