q792602257/DataMate
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
376 Commits 1 Branch 0 Tags
ab957ab53d84e2296d48e38dda1b81df9d012ca2
Commit Graph
100 Commits
This Branch
This Branch
All Branches
Author SHA1 Message Date
q792602257 ab957ab53d feat(dataset): 添加PDF文本提取功能支持 
- 新增dataset模块路由配置
- 添加PdfTextExtractRequest和PdfTextExtractResponse数据传输对象
- 实现PDF文本提取接口，支持从PDF文件中提取文本内容
- 集成数据库会话管理和异步处理能力
 2026-01-29 11:45:23 +08:00
q792602257 5eafcf0145 refactor(request): 优化请求处理逻辑并添加PDF提取接口定义 
- 简化catch语句移除不必要的异常变量
- 删除无用的FormData条件判断代码
- 将变量声明从let改为const提升代码质量
- 移除响应拦截器中的冗余参数传递
- 在数据集模式模块中添加PDF文本提取相关的请求响应模型
- 更新模块导出列表包含新的PDF提取接口类型定义
 2026-01-29 11:40:30 +08:00
q792602257 ce98be5778 feat(knowledge): 添加知识条目文件预览和替换功能 
- 后端实现知识条目文件预览接口，支持多种文件类型在线预览
- 后端实现知识条目文件替换功能，保留原有文件管理逻辑
- 前端新增文件预览模态框组件，支持文本、图片、音视频预览
- 前端知识条目编辑器添加文件替换上传功能
- 前端优化文件内容截断预览逻辑，统一使用工具函数处理
- 前端修复 PUT 请求中 FormData 处理问题，确保文件上传正常工作
- 新增文件预览相关工具函数和常量配置
 2026-01-29 11:38:43 +08:00
q792602257 d0b5473068 feat(knowledge): 添加知识条目文件上传和下载功能 
- 新增文件上传接口支持批量上传知识条目文件
- 实现文件存储路径管理和安全验证机制
- 添加文件下载功能支持知识条目文件导出
- 扩展知识内容类型枚举增加FILE类型
- 扩展知识来源类型枚举增加FILE_UPLOAD类型
- 新增上传请求DTO定义文件验证和元数据配置
- 实现文件上传目录管理和文件名安全处理
- 添加文件扩展名识别和内容类型转换逻辑
 2026-01-29 11:17:24 +08:00
q792602257 3c4b66b451 feat(DataManagement): 添加文件预览功能支持多种文件类型 
- 实现文本、图片、视频、音频文件的预览功能
- 添加预览模态框支持不同文件类型的展示
- 集成文件类型检测和预览内容加载逻辑
- 添加预览加载状态和错误处理机制
- 实现大文件内容截断和滚动预览功能
- 添加预览窗口关闭和资源清理功能
 2026-01-28 11:18:08 +08:00
q792602257 4233da5b91 fix(annotation): 调整模板查询大小限制 
- 将模板查询大小从 200 减少到 100
- 添加注释说明后端最大限制为 100
- 确保与模板 API 的 'size' 参数一致
 2026-01-28 10:03:11 +08:00
q792602257 43f7d88ad2 fix(data-cleaning): 修复数据集文件查询方法调用参数缺失问题 
- 为datasetFileService.getDatasetFiles方法调用补充了缺失的参数
- 确保分页查询功能正常工作
- 解决了因参数不匹配导致的方法
 2026-01-27 19:54:11 +08:00
q792602257 a28b427e21 feat(data-annotation): 添加任务预加载功能以提升用户体验 
- 引入 UpsertAnnotationResponse 类型定义用于处理标注更新响应
- 移除废弃的 mergeTaskPages 函数并优化任务列表合并逻辑
- 新增 prefetchSeqRef 和 prefetching 状态管理预加载过程
- 实现 startPrefetchTasks 函数用于后台预加载剩余页的任务数据
- 更新 loadTasks 函数移除 refresh 模式并集成预加载机制
- 修改标注保存逻辑直接更新本地任务状态而非重新加载全部数据
- 在加载按钮中显示预加载状态提示用户当前操作进度
- 项目切换时重置预加载序列号确保状态一致性
 2026-01-27 19:45:25 +08:00
q792602257 1158647217 feat(annotation): 实现任务列表分页加载和优化排序功能 
- 添加分页相关字段到EditorTaskListResponse类型定义
- 定义TASK_PAGE_START和TASK_PAGE_SIZE常量及NormalizedTaskList类型
- 实现mergeTaskItems、mergeTaskPages和normalizeTaskListResponse工具函数
- 添加taskPage、taskTotal、taskTotalPages和loadingMore状态管理
- 优化后端查询逻辑，使用case语句实现标注状态排序
- 集成外连接查询同时获取文件信息和标注结果
- 改进前端任务列表的数据合并和分页加载机制
 2026-01-27 19:08:37 +08:00
q792602257 3a93098b57 feat(data-management): 添加数据集文件标注结果过滤功能 
- 在 OpenAPI 规范中添加 hasAnnotation 查询参数用于过滤存在标注结果的文件
- 修改后端服务层 DatasetFileApplicationService 支持 hasAnnotation 参数
- 更新数据访问层 DatasetFileRepositoryImpl 实现基于标注结果的存在性查询
- 调整前端 DatasetFileTransfer 组件支持标注过滤功能
- 移除无用的分块选项配置并优化全选逻辑
- 修复文件查询时的参数传递和依赖追踪问题
 2026-01-27 18:11:30 +08:00
q792602257 e56211107e feat(annotation): 添加Label Studio文本编辑器的焦点管理功能 
- 实现focusIframe函数用于聚焦iframe元素
- 在iframeReady和lsReady状态变化时自动聚焦编辑器
- 添加窗口聚焦事件监听器以保持编辑器焦点
- 在编辑器容器上添加鼠标点击事件以获取焦点
- 确保标签工作室准备就绪后正确设置焦点
- 优化用户体验通过自动焦点切换机制
 2026-01-27 14:37:14 +08:00
q792602257 e489a0023a refactor(annotation): 优化模板默认选择逻辑 
- 添加 resolveTemplateTimestamp 函数解析模板时间戳
- 将默认模板选择逻辑从查找内置模板改为选择最新更新的模板
- 使用 reduce 方法实现按时间戳排序的模板选择
- 提高模板选择的准确性和时效性
 2026-01-27 00:07:33 +08:00
q792602257 977a930c97 feat(annotation): 支持音频和视频数据类型的标注任务 
- 添加了音频和视频数据类型常量定义
- 实现了音频和视频标注模板的内置配置
- 扩展前端组件以支持按数据类型过滤标注模板
- 重构后端编辑器服务以处理音频和视频任务构建
- 更新数据库初始化脚本包含音频和视频标注模板
- 添加音频和视频数据类型的预览URL映射逻辑
 2026-01-26 23:54:40 +08:00
q792602257 47295e8cdf fix(annotation): 修复文本数据集段落切片显示条件
CodeQL Advanced / Analyze (java-kotlin) (push) Has been cancelled
Details
CodeQL Advanced / Analyze (javascript-typescript) (push) Has been cancelled
Details
CodeQL Advanced / Analyze (python) (push) Has been cancelled
Details
CodeQL Advanced / Analyze (actions) (push) Has been cancelled
Details 
- 添加 selectedDatasetId 条件确保段落切片仅在选择数据集后显示
- 防止在未选择数据集时错误显示段落切片配置选项
 2026-01-26 13:49:58 +08:00
q792602257 7cc3d34575 refactor(annotation): 优化段落切片配置的显示逻辑 
- 移除非文本数据集的段落切片配置选项
- 简化条件渲染逻辑，仅在文本数据集时显示段落切片配置
- 统一两个组件中的段落切片配置显示规则
- 移除冗余的数据集选择和类型检查提示信息
- 优化编辑模式下的禁用状态处理
 2026-01-26 12:19:49 +08:00
q792602257 371df12a96 feat(annotation): 添加文本数据集段落切片功能 
- 在前端组件中新增 segmentationEnabled 字段控制切片开关
- 为文本数据集添加段落切片配置选项，默认启用切片功能
- 在后端接口中新增 segmentation_enabled 参数传递给标注项目
- 实现切片逻辑控制，支持文本数据的自动段落分割
- 添加数据集类型判断，仅文本数据集支持切片配置
- 更新标注任务创建和编辑表单中的切片相关字段处理
 2026-01-26 12:14:27 +08:00
q792602257 fa160164d2 feat(annotation): 添加文本标注编辑器中的段落树导航和自动跳转功能 
- 引入 Tree 和 Empty 组件用于段落导航展示
- 实现分段树形结构数据生成和展示功能
- 添加自动跳转到下一个待标注文件或段落的功能
- 优化文件选择逻辑，优先选择未标注的文件
- 实现段落切换时的状态管理和依赖更新
- 添加段落树节点选中和展开状态控制
- 优化界面布局和滚动区域的高度计算
 2026-01-26 11:44:33 +08:00
q792602257 6835511f5a feat(data-management): 修改知识项导出功能为ZIP格式 
- 将导出文件格式从JSON改为ZIP压缩包
- 使用ZipArchiveOutputStream实现ZIP文件创建
- 为每个知识项创建独立的文件条目
- 添加文件名规范化和长度限制逻辑
- 实现重复文件名的索引编号处理
- 移除Jackson ObjectMapper依赖引入
- 更新响应头内容类型为application/zip
 2026-01-26 11:15:58 +08:00
q792602257 a8c7c9404c feat(knowledge): 添加知识条目导出功能和文件上传支持 
- 在 KnowledgeItemApplicationService 中新增 exportKnowledgeItems 方法实现知识条目导出
- 添加 export 相关常量配置包括文件名格式、内容类型等
- 在 KnowledgeItemRepository 中新增 findAllBySetId 查询方法
- 在 KnowledgeItemController 中新增 export 接口端点
- 在 KnowledgeItemEditor 组件中添加文件上传功能支持 txt/md/markdown 格式
- 在 KnowledgeSetDetail 页面中添加导出按钮并集成导出 API
- 更新前端 API 文件添加 exportKnowledgeItemsUsingGet 方法
- 配置文件上传验证和自动填充标题内容逻辑
 2026-01-26 11:13:21 +08:00
q792602257 be98a9534c feat(dataannotation): 隐藏自定义配置选项 
- 在创建标注任务对话框中注释掉自定义配置按钮
- 在创建任务页面中注释掉自定义配置按钮
- 暂时移除用户自定义配置功能入口
 2026-01-26 10:31:19 +08:00
q792602257 d26040a6e0 refactor(DataManagement): 重构数据管理详情页面组件 
- 移除 Overview 组件中的文件列表多选配置功能
- 添加 DatasetFileRow 类型定义并更新相关类型注解
- 修改 Overview 组件属性接口，增加 onUpload 回调函数
- 更新表格渲染函数中的类型注解，统一使用 DatasetFileRow 类型
- 简化按钮点击事件处理函数的参数传递
- 在 DatasetDetail 页面中移除顶部工具栏的上传按钮
- 将上传功能集成到 Overview 组件的文件操作区域
- 通过回调函数实现
 2026-01-26 10:31:09 +08:00
q792602257 a8c5de0aa6 feat(db): 添加图像分类标注模板到数据库初始化脚本 
- 新增图像分类标注模板配置，支持内容审核、安全检测等场景
- 集成 ResNet、EfficientNet、Vision Transformer 关联模型
- 添加 Choices 标签配置，包含 Adult content、Weapons、Violence 选项
- 设置 Image 对象类型用于图像展示和标注
- 配置水平布局样式和计算机视觉类别属性
 2026-01-26 10:19:55 +08:00
q792602257 c5aa052451 feat(annotation): 添加图像分类内置模板 
- 新增 IMAGE_CLASSIFICATION_LABEL_CONFIG 配置定义
- 添加图像分类内置模板定义，包含 Adult content、Weapons、Violence 分类选项
- 配置图像分类模板的数据类型为图片类型
- 设置图像分类模板的标签配置和样式
- 定义图像分类模板的描述信息和版本信息
 2026-01-25 19:00:01 +08:00
q792602257 250a13ff70 feat(annotation): 支持图像标注项目并添加内置标注模板 
- 扩展标注编辑器支持 TEXT/IMAGE 数据类型
- 添加三个内置图像标注模板：目标检测、语义分割（掩码）、语义分割（多边形）
- 实现内置标注模板的数据库初始化功能
- 集成标注配置验证和模板管理服务
- 更新项目不支持提示信息以反映新的数据类型支持
 2026-01-25 18:35:07 +08:00
q792602257 c5ace0c4cc feat(annotation): 支持图像数据集的内嵌标注编辑器 
- 添加文件预览接口，支持以 inline 方式预览数据集中的指定文件
- 实现图像任务构建功能，支持图像标注任务的数据结构
- 扩展标注编辑器服务以支持 TEXT 和 IMAGE 类型数据集
- 添加媒体对象分类支持，解析图像标注配置
- 实现图像文件预览 URL 构建逻辑
- 优化项目信息获取和任务响应构建流程
- 修复数据库查询中的项目 ID 引用错误
 2026-01-25 17:25:44 +08:00
q792602257 e6d1e4763f feat(template): 添加标签显示名称映射功能 
- 引入 COMMON_TAG_DISPLAY_NAMES 映射表，为常用标签提供中文显示名称
- 更新布局控件选项以使用中文显示名称
- 修改容器选项以使用中文显示名称
- 添加 getTagDisplayName 回调函数，统一处理标签名称显示逻辑
- 优化节点标题显示，结合标签类型和属性值展示更友好的名称
- 更新依赖数组以包含新的显示名称函数
 2026-01-24 17:36:18 +08:00
q792602257 03402e4559 fix(annotation): 修复段落导航栏布局问题 
- 修改段落导航容器为 flex-nowrap 防止换行
- 为段落标签添加 shrink-0 类避免压缩
- 使用 flex-1 min-w-0 优化段落列表容器
- 添加 overflow-x-auto 和 whitespace-nowrap 实现横向滚动
- 为右侧控制区域添加 shrink-0 和 whitespace-nowrap 类
 2026-01-24 16:28:07 +08:00
q792602257 0e30e658e9 feat(annotation): 添加 JSONL 文件支持和文本键解析功能 
- 添加 JSONL 文件扩展名常量定义
- 实现主文本键解析方法 _resolve_primary_text_key
- 添加 JSONL 记录解析方法 _parse_jsonl_records
- 修改任务数据构建方法以支持主文本键参数
- 实现主文本值解析方法 _resolve_primary_text_value
- 更新项目信息获取逻辑以支持 JSONL 多行记录处理
- 修改分段逻辑以支持 JSONL 多行或超长文本分段
- 调整标注处理逻辑以正确处理分段标注场景
 2026-01-23 22:09:06 +08:00
q792602257 8e06a36460 fix(annotation): 修复模板配置树编辑器组件渲染问题 
- 为 Tree 组件添加 key 属性以确保正确的组件实例化
- 启用 defaultExpandAll 属性以默认展开所有节点
- 保持拖拽功能在结构锁定状态下的正常工作
 2026-01-23 16:16:02 +08:00
q792602257 3f566a0b08 feat(annotation): 替换模板配置表单为树形编辑器组件 
- 移除 TemplateConfigurationForm 组件并引入 TemplateConfigurationTreeEditor
- 使用 useTagConfig Hook 获取标签配置
- 将自定义XML状态 customXml 替换为 labelConfig
- 删除模板编辑标签页和选择模板状态管理
- 更新XML解析逻辑支持更多对象和标注控件类型
- 添加配置验证功能确保至少包含数据对象和标注控件
- 在模板详情页面使用树形编辑器显示配置详情
- 更新任务创建页面集成新的树形配置编辑器
- 调整预览数据生成功能适配新的XML解析方式
 2026-01-23 16:11:59 +08:00
q792602257 76d06b9809 fix(template): 移除内置模板的编辑和删除权限限制 
- 删除了内置模板的编辑按钮隐藏逻辑
- 移除了内置模板的删除按钮禁用条件
- 允许所有模板类型显示完整的操作按钮组
- 统一了模板列表的操作按钮渲染逻辑
 2026-01-22 21:35:09 +08:00
q792602257 ccb581d501 feat(template): 添加模板搜索功能和优化数据获取 
- 添加 keyword 参数支持模板名称和描述模糊搜索
- 在 useFetchData hook 中添加 filterParamMapper 参数用于过滤参数映射
- 为模板列表页面实现内置标志过滤器映射功能
- 优化模板配置更新逻辑，改进数据验证和转换流程
- 完善模板服务中的条件查询，支持多字段模糊匹配
- 更新数据获取 hook 的依赖数组以正确处理轮询逻辑
 2026-01-22 21:25:04 +08:00
q792602257 d22d677efe fix(annotation): 更新受限模式下的修改权限提示 
- 在受限模式提示中添加来源名称可修改的说明
- 移除控件ID输入框的禁用状态以支持来源名称修改
- 更新编辑模式下的权限描述文本
 2026-01-22 21:12:47 +08:00
q792602257 9eafdc86bb fix(annotation): 修正知识库同步服务中的分页参数 
- 将_list_knowledge_sets方法中的page参数从0改为1
- 将文件检索接口中的page参数从0改为1
- 统一所有分页查询的起始页码为1，避免空结果返回
 2026-01-22 20:28:20 +08:00
q792602257 90c5cc44e8 feat(annotation): 优化知识同步服务的响应处理 
- 在HTTP请求后添加响应解包功能
- 实现_code_方法来处理API响应格式
- 添加错误码检查和异常抛出机制
- 提取数据字段并返回正确的内容结构
- 保持原有安全JSON序列化功能不变
 2026-01-22 20:23:37 +08:00
q792602257 9376382791 refactor(annotation): 简化知识库集查找逻辑 
- 移除项目参数依赖，简化 _find_knowledge_set_by_name 方法
- 删除不再使用的 _parse_metadata 和 _metadata_matches_project 方法
- 更新知识库集创建流程中的查找调用方式
- 统一所有知识库集查找操作的参数结构
 2026-01-22 20:18:42 +08:00
q792602257 cb71712f51 feat(annotation): 优化知识集合同步服务逻辑 
- 添加 KNOWLEDGE_SET_LIST_SIZE 常量配置知识集列表大小为50
- 实现现有知识集名称检查避免重复创建
- 添加 _list_knowledge_sets 方法用于查询知识集列表
- 实现 _parse_metadata 和 _metadata_matches_project 方法解析匹配项目元数据
- 添加 _find_knowledge_set_by_name 方法按名称查找知识集
- 优化知识集创建流程增加重试和回退机制
- 实现项目配置更新保存知识集ID和名称信息
 2026-01-22 17:48:27 +08:00
q792602257 389c04b46a feat(annotation): 添加切换段落时自动保存功能 
- 在 LabelStudioTextEditor 组件中新增 Switch 组件用于控制自动保存
- 添加 autoSaveOnSwitch 状态管理自动保存开关
- 修改 confirmSaveBeforeSwitch 函数支持保存、放弃、取消三种决策
- 实现自动保存逻辑，当开关开启时直接保存而不弹出确认对话框
- 在段落导航栏添加自动保存开关和标签显示
- 更新切换段落时的未保存更改处理逻辑
 2026-01-22 17:38:25 +08:00
q792602257 9c9d5ecbe2 feat(annotation): 添加标注检查和段落切换保护功能 
- 在LSF中实现LS_EXPORT_CHECK消息处理以获取当前标注状态
- 添加requestId支持用于标注导出请求的追踪
- 实现稳定字符串化算法用于标注快照比较
- 添加段落切换前的未保存更改检测和确认对话框
- 集成标注快
 2026-01-22 17:29:21 +08:00
q792602257 1eee1e248e feat(annotation): 添加分段索引支持和优化标注编辑器 
- 在前端 lsf.html 中添加 segmentIndex 字段解析逻辑
- 在 LabelStudioTextEditor 中添加分段索引相关类型定义和处理函数
- 使用 useCallback 优化组件中的异步函数性能
- 添加对驼峰命名和下划线命名的数据字段兼容处理
- 实现分段模式下的标注状态更新功能
- 添加任务 ID 验证防止过期保存请求
- 在后端 editor.py 中添加分段索引字段支持
- 统一前后端数据传输格式确保字段一致性
 2026-01-22 17:14:37 +08:00
q792602257 c638182c72 feat(annotation): 增强标注编辑器的文本数据处理功能 
- 添加 JSON 和 XML 解析支持用于处理标注配置
- 实现文本占位符填充机制优化用户体验
- 集成标签工作室配置管理功能
- 添加文本对象类型检测和分类处理
- 实现标注配置装饰器增强编辑器
 2026-01-22 16:22:32 +08:00
q792602257 d996040b7f feat(KnowledgeManagement): 添加知识条目阅读功能 
- 在知识集详情页面中添加阅读按钮，支持查看知识条目的内容
- 实现文本和Markdown格式知识条目的在线阅读预览
- 集成文件下载功能，支持从数据集文件中读取内容
- 添加内容长度限制，超过50000字符时截断并提示
- 使用模态框展示阅读内容，提供良好的用户体验
-
 2026-01-22 15:09:10 +08:00
q792602257 73f0ab65fa feat(annotation): 实现标注结果同步到知识管理功能 
- 在知识条目实体中新增来源数据集ID和文件ID字段
- 实现标注编辑器中同步标注结果到知识管理的服务逻辑
- 添加知识同步服务类处理标注到知识条目的转换和同步
- 实现通过下载接口获取文本内容的独立服务模块
- 更新知识条目查询接口支持按来源数据集和文件ID过滤
- 自动创建和关联标注项目对应的知识集
- 支持文本和Markdown文件的内容合并标注结果
- 添加同步过程中的错误处理和日志记录机制
 2026-01-21 16:09:34 +08:00
q792602257 6baf66b304 fix(dataset): 修复数据集详情页面初始化逻辑 
- 添加 id 参数存在性检查避免空值调用
- 将 fetchFiles 函数依赖添加到 useEffect 依赖数组中
- 确保在 id 不存在时不执行数据获取操作
 2026-01-21 14:10:23 +08:00
q792602257 d88bdfb1f4 feat(dataset): 添加子数据集展示功能 
- 在 DatasetDetail 页面引入 Table 和 Tag 组件用于子数据集展示
- 新增 queryDatasetsUsingGet 接口调用方法用于获取子数据集列表
- 添加 childDatasets 和 childDatasetsLoading 状态管理
- 实现 tabList 动态渲染，父数据集显示子数据集选项卡
- 添加 fetchChildDatasets 方法异步获取子数据集数据
- 实现子数据集表格列定义，包含名称、类型、状态、文件数等信息
- 在子数据集选项卡中展示表格并添加加载状态和空数据提示
- 添加子数据集数量统计显示
- 优化标签颜色显示和数据映射逻辑
 2026-01-21 13:50:18 +08:00
q792602257 ec27e2fa3e Merge branch 'editor_next' into lsf 2026-01-21 13:28:01 +08:00
q792602257 712fc013f5 refactor(Sidebar): 优化侧边栏菜单激活项初始化逻辑 
- 添加 useCallback 包装 initActiveItem 函数以提升性能
- 引入 isPathMatch 工具函数替代简单的路径匹配逻辑
- 重构菜单项遍历逻辑，使用 for...of 循环替代 forEach
- 修复路径匹配逻辑，统一处理 /data/ 路径前缀
- 移除未使用的 Sparkles 图标导入
- 更新 useEffect 依赖数组以
 2026-01-21 13:26:39 +08:00
q792602257 34fa184b69 feat(knowledge): 添加知识管理功能模块 
- 实现知识集的创建、编辑、删除功能
- 实现知识条目的创建、编辑、删除功能
- 添加知识集详情页面展示功能
- 实现知识条目导入数据集文件功能
- 添加知识管理主页列表展示功能
- 实现知识集和知识条目的状态管理
- 集成标签管理和搜索过滤功能
- 添加知识条目的批量操作支持
 2026-01-21 11:48:36 +08:00
q792602257 da6c7860cb refactor(routes): 重构路由配置和菜单结构 
- 更新了路由定义文件以支持新的导航需求
- 调整了菜单组件的数据结构和渲染逻辑
- 统一了路由路径和菜单项的命名规范
- 优化了路由懒加载配置提升性能
- 修改了菜单权限验证机制
- 清理了废弃的路由配置项
 2026-01-21 11:47:54 +08:00
q792602257 e78acbea0a feat(data-management): 添加知识库管理功能 
- 在DataManagementErrorCode中新增知识库相关错误码定义
- 在数据库初始化脚本中创建知识集和知识条目表结构
- 新增KnowledgeItemApplicationService实现知识条目的CRUD操作
- 新增KnowledgeSetApplicationService实现知识集的CRUD操作
- 定义KnowledgeContentType、KnowledgeSourceType和KnowledgeStatusType枚举类型
- 创建KnowledgeItem和KnowledgeSet领域模型实体
- 实现KnowledgeItemMapper和KnowledgeSetMapper数据访问接口
- 提供KnowledgeItemRepositoryImpl和KnowledgeSetRepositoryImpl仓储实现
- 添加知识条目按条件分页查询功能
- 实现知识条目从数据集文件导入的功能
- 支持知识集和知识条目的标签管理和状态控制
 2026-01-21 11:32:45 +08:00
q792602257 ecec69422d Revert "feat(layout): 添加知识管理菜单项并优化侧边栏显示" 
This reverts commit 2c7b027488.
 2026-01-21 10:31:23 +08:00
q792602257 2c7b027488 feat(layout): 添加知识管理菜单项并优化侧边栏显示 
- 在菜单中新增了知识管理功能入口，支持数据标注和标记
- 移除了侧边栏中任务中心按钮的文本内容，优化界面显示
- 配置了新的绿色主题色用于知识管理模块标识
 2026-01-21 09:15:58 +08:00
q792602257 c51e0fab2f feat(dataset): 添加子数据集创建功能 
- 在创建页面集成父数据集ID传递逻辑
- 使用useMemo缓存location状态中的parentDatasetId
- 添加useEffect同步parentDatasetId到表单状态
- 实现handleCreateChildDataset函数用于导航到创建页面
- 在数据集详情页的操作菜单中添加"创建子数据集"选项
- 为子数据集创建按钮添加PlusOutlined图标
- 定义CreateDatasetLocationState接口规范传递参数类型
 2026-01-21 01:00:17 +08:00
q792602257 0c23fd6c23 fix(import): 修复文件上传配置和表单状态管理问题 
- 移除手动fileList状态管理，改用Form组件内置字段
- 修复重置状态时的初始值设置，确保hasArchive和splitByLine默认值正确
- 更新文件上传验证逻辑，使用form.getFieldValue获取文件列表
- 修改拖拽上传组件配置，移除不必要的回调函数
- 修复按钮禁用条件判断，使用正确的字段路径检查文件长度
- 移除表单项的initialValue配置，统一在state初始化时设置默认值
- 调整Sidebar组件中的注释标记，修复任务中心弹窗显示逻辑
 2026-01-21 00:56:09 +08:00
q792602257 221899e194 Merge branch 'dataset_parent' into lsf 2026-01-21 00:17:20 +08:00
q792602257 d58d026256 refactor(dataset): 更新数据集导入配置接口定义 
- 添加 DatasetImportConfig 接口定义
- 定义 source、target、dataSource 等属性
- 支持 splitByLine 和 hasArchive 配置选项
- 将 importConfig 类型从 any 改为 DatasetImportConfig
- 增强类型安全性和代码可维护性
 2026-01-20 13:39:04 +08:00
q792602257 79371ba078 feat(data-management): 添加数据集父子层级结构功能 
- 在OpenAPI规范中新增parentDatasetId字段用于层级过滤
- 实现数据集父子关系的创建、更新和删除逻辑
- 添加数据集移动时的路径重命名和文件路径前缀更新
- 增加子数据集数量验证防止误删父数据集
- 更新前端界面支持选择父数据集和导航显示
- 优化Python后端自动标注任务的路径处理逻辑
- 修改数据库表结构添加外键约束确保数据一致性
 2026-01-20 13:34:50 +08:00
q792602257 d391f9fd2d config(content-generation): 更新内容生成页面的iframe地址配置
CodeQL Advanced / Analyze (java-kotlin) (push) Has been cancelled
Details
CodeQL Advanced / Analyze (javascript-typescript) (push) Has been cancelled
Details
CodeQL Advanced / Analyze (python) (push) Has been cancelled
Details
CodeQL Advanced / Analyze (actions) (push) Has been cancelled
Details 
- 将iframe源地址从百度首页更新为本地开发服务器地址
- 修改URL从 https://www.baidu.com 到 http://192.168
 2026-01-20 12:57:59 +08:00
q792602257 bde00c3c38 style(layout): 更新侧边栏Logo样式 
- 将Logo高度从h-8调整为h-12
- 将Logo宽度从w-24调整为w-40
- 移除原有的文字标题"知识应用管理系统"
 2026-01-20 10:41:12 +08:00
q792602257 8d6b4a4265 refactor(home): 移除外部链接跳转功能并优化路由导航 
- 移除百度链接跳转功能，改为内部路由导航到内容生成页面
- 删除无用的 isChecking 状态和 handleChatClick 处理函数
- 移除菜单项中的 externalLink 属性配置
- 简化侧边栏点击事件处理逻辑，移除外部链接检查代码
- 添加内容生成页面的路由配置
 2026-01-20 10:34:13 +08:00
q792602257 7f100c08ca remove(home): 移除首页数据编排和智能代理展示模块 
- 移除了数据智能编排可视化流程设计相关内容
- 移除了Data Agent对话式业务操作功能展示
- 移除了完整数据清洗工作流展示模块
- 清理了相关的卡片组件和导航跳转功能
- 删除了可视化拖拽设计界面组件
- 移除了智能错误检测和修复建议功能介绍
 2026-01-20 09:53:10 +08:00
q792602257 dd314025bd ``` 
refactor(home): 简化首页对话功能实现

- 移除接口连通性检查逻辑
- 直接使用 window.open 打开百度链接
- 简化按钮点击事件处理
- 更新按钮显示文案为"内容生成"
- 移除数据智能编排功能入口
```
 2026-01-20 09:39:33 +08:00
q792602257 ea6765ea0f fix(annotation): 修改数据集文件状态查询逻辑 
- 将文件状态查询从仅统计 ACTIVE 状态扩展为 ACTIVE 和 COMPLETED 状态
- 使用 in_ 操作符替代等于操作符以支持多状态查询
- 保持原有数据集标注计数功能不变
 2026-01-20 00:30:21 +08:00
q792602257 d890a5679d refactor(annotation): 统一查询参数命名规范 
- 将分页查询参数 pageSize 替换为 size
- 更新所有相关函数中的参数引用
- 修改日志输出中的参数名称显示
- 保持原有的分页逻辑不变
 2026-01-19 23:56:40 +08:00
q792602257 cc0a977349 feat(annotation): 添加标注任务的数据量统计功能 
- 在前端表格中新增数据量和已标注列显示
- 添加标注完成百分比计算和提示功能
- 在后端schema中增加totalCount和annotatedCount字段
- 实现项目统计数据查询服务方法
- 集成前后端数据映射和接口响应更新
 2026-01-19 22:43:41 +08:00
q792602257 649ab2f6bb refactor(annotation): 移除调试日志和异常堆栈跟踪 
- 移除了项目映射获取接口中的traceback打印
- 简化了内部服务器错误响应消息
- 删除了映射服务中的多个调试日志输出
- 清理了响应数据构建过程中的调试信息
 2026-01-19 21:58:00 +08:00
q792602257 496161b1f1 ``` 
chore(annotation): 添加调试日志到映射服务

- 在 _to_response_from_row 方法中添加配置和标签配置的调试日志
- 在 _to_response 方法中添加映射ID和配置信息的调试日志
- 添加响应数据键名的调试日志
- 优化配置解析逻辑以确保字典类型的正确检查
```
 2026-01-19 21:52:01 +08:00
q792602257 f4a86b4af1 feat(annotation): 添加 labelConfig 字段并优化配置解析逻辑 
- 在 DatasetMappingResponse 模型中新增 label_config 字段
- 修改前端获取 labelConfig 的逻辑，优先使用任务自身配置
- 移除模板配置的 condition 分支，统一从 XML 解析配置
- 更新后端服务从 configuration JSON 字段中提取 label_config 和 description
- 优化前后端配置解析的一致性处理
 2026-01-19 21:39:00 +08:00
q792602257 85b8513b43 feat(annotation): 支持从XML配置解析标注任务模板 
- 添加 XML 配置解析功能，支持从 Label Studio XML 格式提取 objects 和 labels
- 优化模板配置加载逻辑，优先使用 configuration 字段，否则从 labelConfig 解析
- 增加对多种数据对象类型的解析支持（Image、Text、Audio 等）
- 实现标签控件类型的完整解析（Choices、Labels、RectangleLabels 等）
 2026-01-19 20:42:48 +08:00
q792602257 2229eb218d feat(annotation): 添加标注任务编辑功能 
- 新增编辑模式支持，通过 editTask 属性控制
- 添加 getAnnotationTaskByIdUsingGet 和 updateAnnotationTaskByIdUsingPut API 接口
- 实现编辑模式下的任务详情加载和表单填充
- 编辑模式下禁用数据集修改和配置模式切换
- 更新模态框标题为动态显示（创建/编辑）
- 在任务列表操作菜单中添加编辑按钮
- 编辑模式下只允许修改标签取值，限制模板结构调整
- 添加任务详情加载状态显示
 2026-01-19 20:25:56 +08:00
q792602257 11980a8edd feat(home): 添加外部链接支持并优化网格布局 
- 实现外部链接功能，支持在新标签页打开外部URL
- 将网格布局改为弹性布局，提升响应式显示效果
- 为卡片组件添加固定宽度，优化不同屏幕尺寸下的显示
- 重构导航逻辑，区分内部路由和外部链接跳转方式
 2026-01-19 19:51:12 +08:00
q792602257 fa3d02ea83 feat(layout): 添加内容生成菜单项并支持外部链接跳转 
- 在侧边栏菜单中新增内容生成选项
- 集成 Sparkles 图标用于内容生成功能
- 为菜单项添加外部链接跳转功能
- 实现点击外部链接时在新标签页打开
- 更新菜单配置以支持外部链接属性
 2026-01-19 19:50:04 +08:00
q792602257 21cc505f97 feat(data-annotation): 扩展文件预览功能支持多媒体格式 
- 添加对图片、视频、音频文件的预览支持
- 新增文件类型检测逻辑，支持多种媒体格式扩展名
- 实现不同文件类型的预览界面适配
- 更新预览弹窗以支持文本、图像、音视频内容展示
- 调整预览窗口尺寸以优化不同媒体类型显示效果
- 完善预览组件卸载时的状态清理机制
 2026-01-19 19:38:57 +08:00
q792602257 7a73322858 feat(annotation): 添加数据集文件内容预览功能 
- 添加文件内容预览相关状态管理
- 实现支持多种文本格式文件的预览功能（JSON、JSONL、TXT、CSV等）
- 添加文件内容长度限制以避免页面卡顿
- 在数据集预览表格中添加文件名点击预览功能
- 创建文件内容预览弹窗界面
- 添加文件预览加载状态和错误处理
 2026-01-19 19:24:42 +08:00
q792602257 fe5c0fd0a3 feat(annotation): 更新标注任务创建对话框的数据集预览功能 
- 替换 previewDatasetUsingGet 为 queryDatasetFilesUsingGet 接口
- 使用 App.useApp() 获取 message 实例替代直接导入
- 调整数据集预览表格结构显示文件名和大小信息
- 修改预览模态框标题和宽度设置
- 优化文件大小格式化显示功能
- 统一错误处理消息提示方式
 2026-01-19 18:47:57 +08:00
q792602257 1c5ff37985 feat(annotation): 添加数据集预览功能 
- 引入 previewDatasetUsingGet API 接口用于数据集预览
- 添加数据集预览相关的状态管理（可见性、数据、加载状态等）
- 实现 handlePreviewDataset 函数用于获取并展示数据集预览数据
- 在数据集选择区域添加预览按钮，点击可查看数据集内容
- 添加数据集预览弹窗组件，以表格形式展示数据集内容
- 移除原有的 XML 编辑标签页，简化模板配置界面
- 更新表单项标签结构，集成预览按钮到数据集选择区域
 2026-01-19 18:35:30 +08:00
q792602257 efafe82a33 refactor(menu): 移除未使用的图标导入 
- 注释掉 Shuffle 图标导入
- 注释掉 BarChart3 图标导入
- 注释掉 Database 图标导入
- 注释掉 Store 图标导入
- 注释掉 Merge 图标导入
- 保留其他必要的图标导入
 2026-01-19 18:25:48 +08:00
q792602257 d568de7d45 feat(layout): 隐藏数据归集和数据清洗菜单项并添加首页路由 
- 注释掉数据归集菜单项
- 注释掉数据清洗菜单项
- 注释掉算子市场菜单项
- 注释掉侧边栏中的任务中心弹窗组件
- 添加首页路由配置
- 将根路径重定向改为首页组件渲染
 2026-01-19 18:23:38 +08:00
q792602257 71c4a8d8a6 feat(annotation): 添加文本分段标注功能 
- 引入文本分割器实现长文本按200字符自动分段
- 增加分段状态管理和段落导航界面
- 支持按段落保存和加载标注数据
- 实现分段模式下的标注状态跟踪
- 扩展API接口支持段落索引参数
- 添加分段相关的数据模型定义
 2026-01-19 18:18:19 +08:00
q792602257 3af0f0b3a1 refactor(config): 优化导入配置组件结构 
- 重构 ImportConfiguration 组件的内部逻辑
- 提升代码可读性和维护性
- 优化组件性能表现
- 调整组件
 2026-01-19 17:10:53 +08:00
q792602257 0cd30a9085 style(layout): 更新侧边栏头部布局样式 
- 将文本标题替换为 logo 图片
- 调整标题文字换行显示
- 优化侧边栏头部布局结构
 2026-01-19 17:05:11 +08:00
q792602257 879da760c7 feat(DataManagement): 添加按行分割文件功能 
- 引入 Tooltip 和 QuestionCircleOutlined 组件用于提示信息
- 移除未使用的 useMemo 钩子和 fileSliceList 变量
- 新增 splitFileByLines 函数实现文件按行分割逻辑
- 在 handleUpload 函数中集成分行分割功能
- 添加 splitByLine 开关配置项到表单中
- 实现文本文件每行分割成独立文件的功能
- 优化文件上传处理流程以支持分割后的文件列表
 2026-01-19 16:55:12 +08:00
q792602257 6fac8c1322 refactor(data-management): 移除数据集详情中的存储路径和存储名称字段 
- 从数据集概览组件中移除 targetLocation 和 pvcName 字段显示
- 保留创建者、创建时间等核心信息展示
- 清理相关的代码结构和布局调整
 2026-01-19 16:46:48 +08:00
q792602257 70ea998564 feat(annotation): 优化标注编辑器的标签配置获取逻辑 
- 优先使用项目配置中的label_config（用户编辑版本）
- 其次使用模板默认配置作为备选方案
- 支持从项目配置字典中获取label_config字段
- 保持向后兼容性，当项目配置无效时回退到模板配置
 2026-01-19 16:34:20 +08:00
q792602257 4df48e08c8 feat(annotation): 移除标注历史功能 
- 移除了 annotations:history 权限配置项
- 简化了权限控制列表结构
 2026-01-19 16:11:58 +08:00
q792602257 ed7a5c6873 feat(annotation): 添加标注编辑器侧边栏折叠功能 
- 引入 MenuFoldOutlined 和 MenuUnfoldOutlined 图标用于侧边栏控制
- 添加 sidebarCollapsed 状态管理侧边栏展开/收起状态
- 扩展 Label Studio 界面配置，启用完整的标注界面组件
- 实现可折叠的左侧文件列表，支持展开/收起操作
- 优化顶部工具栏布局，调整标题层级和按钮标签
- 改进文件列表样式，添加悬停效果和更清晰的状态标识
- 调整整体布局结构，提升编辑器区域的空间利用率
 2026-01-19 16:10:26 +08:00
q792602257 a778ac23b5 feat(annotation): 添加模板受限编辑模式 
- 引入 restrictedMode 属性控制表单编辑权限
- 在数据对象区域显示锁定状态提示
- 禁用受限制字段的输入功能
- 隐藏受限制时的删除和添加按钮
- 在标签控件区域显示可编辑状态提示
- 更新XML编辑器为只读模式并显示相应提示
- 添加模板选择状态跟踪功能
 2026-01-19 15:55:23 +08:00
q792602257 e192c826eb fix(annotation): 解决文件名中文编码问题 
- 添加 urllib.parse.quote 用于文件名编码
- 实现 RFC 5987 标准支持 UTF-8 编码的文件名
- 修改 Content-Disposition 头部使用 filename* 参数
- 确保中文文件名在下载时正确显示
 2026-01-19 14:23:14 +08:00
q792602257 acc284761f feat(menu): 移除数据合成菜单功能 
- 注释掉数据合成主菜单项
- 移除合成任务子菜单
- 移除配比任务子菜单
- 保留数据评估菜单功能
 2026-01-19 13:21:53 +08:00
q792602257 109069c0da 1 2026-01-19 13:09:48 +08:00
q792602257 0a936495b9 ``` 
feat(registry): 添加模块注册日志记录功能

- 在 _register_module 方法中添加 logger.info 日志输出
- 记录模块名称、模块类和模块路径信息
- 便于调试和追踪模块注册过程
```
 2026-01-19 12:59:24 +08:00
q792602257 8b45063958 feat(dataset): 移除数据血缘和数据质量功能模块 
- 删除了数据血缘功能入口
- 移除了数据质量监控模块
- 简化了数据集详情页面导航结构
 2026-01-19 12:57:05 +08:00
q792602257 3f36be0f9f feat(runtime): 实现运行时操作模块的自动导入功能 
- 添加 importlib 和 os 模块用于动态导入
- 集成 loguru 日志记录器进行错误追踪
- 实现自动遍历并导入所有子模块的逻辑
- 添加异常处理机制捕获模块加载失败的情况
- 确保所有子模块注册的算子能够正确加载
- 修复模块导入顺序以支持注解操作正常工作
 2026-01-19 12:37:40 +08:00
q792602257 d84e6b2ebc style(layout): 移除侧边栏标题中的图标 
- 移除了侧边栏标题区域的 Sparkles 图标元素
- 保留了标题文字 "DataBuilder知识应用管理系统"
- 简化了侧边栏头部的布局结构
 2026-01-19 12:15:21 +08:00
q792602257 0ed5a27a72 fix(dataset): 解决操作符查找失败时的错误处理 
- 当操作符在任何注册表中都找不到时抛出ImportError异常
- 对无效的注册表内容类型抛出更具体的ImportError异常
- 提供更清晰的错误信息帮助用户诊断问题
 2026-01-19 12:12:47 +08:00
q792602257 3e04aecb34 refactor(annotation): 移除自动标注功能模块并简化创建对话框 
- 删除 AutoAnnotation 相关的所有组件和页面文件
- 从 CreateAnnotationTaskDialog 中移除自动标注相关的表单和逻辑
- 简化 CreateAnnotationTaskDialog 为仅支持手动标注模式
- 移除 COCO_CLASSES 常量和相关依赖项
- 清理无用的导入和状态变量
- 更新对话框布局以适应单一标注模式
 2026-01-19 12:02:16 +08:00
q792602257 3dbd6cdd90 docs(app): 更新应用标题为DataBuilder知识应用管理系统 
- 修改主页面标题从DataMate到DataBuilder知识应用管理系统
- 更新侧边栏显示名称从DataMate到DataBuilder知识应用管理系统
- 调整LSF页面标题从DataMate到DataBuilder知识应用管理系统
 2026-01-19 11:46:03 +08:00
q792602257 25d74f7f7f fix(label-studio): 修复编辑器初始化失败时的加载状态问题 
- 在初始化失败时也设置 lsReady 状态为 true
- 避免页面一直显示"初始化编辑器..."的状态
- 保持原有的错误处理逻辑不变
 2026-01-19 11:31:16 +08:00
q792602257 fb278e206e doc(db): 更新数据库初始化脚本注释说明 
- 为音频语音处理模块添加调试状态注释
- 将聊天评估模块标记为暂未调试完成
- 为计算机视觉模块添加调试状态注释
- 将结构化数据模块标记为暂未调试完成
- 为时间序列模块添加调试状态注释
- 将视频处理模块标记为暂未调试完成
 2026-01-19 11:20:29 +08:00
q792602257 c985fb0f9b fix(data): 修复分页总数获取逻辑 
- 修改 useFetchData 钩子中的分页总数计算方式
- 添加对 data?.total 的备选值支持
- 使用空值合并运算符替代逻辑或运算符提高健壮性
 2026-01-19 10:59:18 +08:00