hefanli
|
a07fba23f2
|
feature：数据集导入数据集支持选择归集任务导入 (#92)
* feature: 实现obs归集
* feature: 增加数据集中出现同名文件时的处理方式
* feature: 前端数据集导入数据时增加可以选择归集任务导入
|
2025-11-19 11:05:33 +08:00 |
|
Dallas98
|
15498f27cf
|
feat: add file copying functionality to dataset directory and update base path configuration #80
|
2025-11-13 16:52:14 +08:00 |
|
Vincent
|
2b09c7dfd1
|
feature：mysql数据库归集为csv文件 (#76)
* fix：配比任务需要能够跳转到目标数据集
* feature：增加配比任务详情接口
* fix：删除不存在的配比详情页面
* fix：使用正式的逻辑来展示标签
* fix：参数默认值去掉多余的-
* fix：修复配比任务相关操作
* fix：去除不需要的日志打印和import
* feature：数据归集创建时将obs、mysql归集也放出
* refactor：重构数据归集的代码
* refactor：重构数据归集的代码
* feature：增加实现mysql归集为csv文件
|
2025-11-12 17:05:31 +08:00 |
|
Vincent
|
b8d7aca8b7
|
refactor：重构数据归集部分代码 (#75)
* fix：配比任务需要能够跳转到目标数据集
* feature：增加配比任务详情接口
* fix：删除不存在的配比详情页面
* fix：使用正式的逻辑来展示标签
* fix：参数默认值去掉多余的-
* fix：修复配比任务相关操作
* fix：去除不需要的日志打印和import
* feature：数据归集创建时将obs、mysql归集也放出
* refactor：重构数据归集的代码
* refactor：重构数据归集的代码
|
2025-11-12 09:34:50 +08:00 |
|
hefanli
|
08bd4eca5c
|
feature：增加数据配比功能 (#52)
* refactor: 修改调整数据归集实现，删除无用代码，优化代码结构
* feature: 每天凌晨00：00扫描所有数据集，检查数据集是否超过了预设的保留天数，超出保留天数的数据集调用删除接口进行删除
* fix: 修改删除数据集文件的逻辑，上传到数据集中的文件会同时删除数据库中的记录和文件系统中的文件，归集过来的文件仅删除数据库中的记录
* fix: 增加参数校验和接口定义，删除不使用的接口
* fix: 数据集统计数据默认为0
* feature: 数据集状态增加流转，创建时为草稿状态，上传文件或者归集文件后修改为活动状态
* refactor: 修改分页查询归集任务的代码
* fix: 更新后重新执行；归集任务执行增加事务控制
* feature: 创建归集任务时能够同步创建数据集，更新归集任务时能更新到指定数据集
* fix: 创建归集任务不需要创建数据集时不应该报错
* fix: 修复删除文件时数据集的统计数据不变动
* feature: 查询数据集详情时能够获取到文件标签分布
* fix: tags为空时不进行分析
* fix: 状态修改为ACTIVE
* fix: 修改解析tag的方法
* feature: 实现创建、分页查询、删除配比任务
* feature: 实现创建、分页查询、删除配比任务的前端交互
* fix: 修复进度计算异常导致的页面报错
|
2025-11-03 10:17:39 +08:00 |
|
hhhhsc
|
41e7e684c3
|
Merge branch 'main' into develop_deer
|
2025-10-28 11:03:01 +08:00 |
|
hhhhsc
|
a69b9f4921
|
feature: 对接deer-flow
|
2025-10-28 10:54:29 +08:00 |
|
Dallas98
|
f54afddbeb
|
refactor: rename artifactId and application name to 'datamate'; add model configuration and related services (#26)
|
2025-10-28 10:39:26 +08:00 |
|
hefanli
|
46dfb389f1
|
feature：增加定时清除超出保留期限数据集的功能；增加数据归集任务绑定数据集的接口 (#24)
* refactor: 修改调整数据归集实现，删除无用代码，优化代码结构
* feature: 每天凌晨00：00扫描所有数据集，检查数据集是否超过了预设的保留天数，超出保留天数的数据集调用删除接口进行删除
* fix: 修改删除数据集文件的逻辑，上传到数据集中的文件会同时删除数据库中的记录和文件系统中的文件，归集过来的文件仅删除数据库中的记录
* fix: 增加参数校验和接口定义，删除不使用的接口
* fix: 数据集统计数据默认为0
* feature: 数据集状态增加流转，创建时为草稿状态，上传文件或者归集文件后修改为活动状态
* refactor: 修改分页查询归集任务的代码
* fix: 更新后重新执行；归集任务执行增加事务控制
* feature: 创建归集任务时能够同步创建数据集，更新归集任务时能更新到指定数据集
|
2025-10-25 15:59:36 +08:00 |
|
hefanli
|
cc072bbf90
|
refactor: 修改调整数据归集实现，删除无用代码，优化代码结构 (#20)
|
2025-10-23 21:10:57 +08:00 |
|
Dallas98
|
1c97afed7d
|
init datamate
|
2025-10-21 23:00:48 +08:00 |
|