Jerry Yan 10e39a506c feat(task): 优化文件列表获取逻辑并添加缓存机制 ...

- 实现按时间前缀获取文件列表，支持小时级目录检索
- 添加降级机制，当时间前缀方式无法找到文件时回退到按天目录
- 在适配器层添加单例模式和客户端连接池管理
- 为S3和AliOSS适配器添加文件列表缓存功能
- 修复跨天任务处理逻辑，约束业务不支持跨天操作
- 优化文件去重逻辑，避免重复处理相同文件
- 添加详细的链路追踪和错误处理机制

2025-12-29 18:39:24 +08:00

api

fix(s3): 解决缓存清理时的类型断言错误

2025-12-29 10:49:42 +08:00

config

feat(config): 添加文件列表缓存配置并优化阿里云和S3适配器缓存实现

2025-12-29 11:17:18 +08:00

core

feat(task): 优化文件列表获取逻辑并添加缓存机制

2025-12-29 18:39:24 +08:00

dto

支持浮点偏移

2025-04-13 15:23:58 +08:00

fs

feat(task): 优化文件列表获取逻辑并添加缓存机制

2025-12-29 18:39:24 +08:00

logger

日志

2025-08-04 10:49:24 +08:00

model

feat(config): 更新配置文件并新增自定义时间类型

2025-11-24 16:12:31 +08:00

telemetry

修改排序，更多埋点信息

2025-04-13 12:32:27 +08:00

util

feat(config): 更新配置文件并新增自定义时间类型

2025-11-24 16:12:31 +08:00

.gitignore

feat(config): 添加文件列表缓存配置并优化阿里云和S3适配器缓存实现

2025-12-29 11:17:18 +08:00

config.yaml

feat(config): 添加文件列表缓存配置并优化阿里云和S3适配器缓存实现

2025-12-29 11:17:18 +08:00

go.mod

feat(config): 添加文件列表缓存配置并优化阿里云和S3适配器缓存实现

2025-12-29 11:17:18 +08:00

go.sum

feat(config): 添加文件列表缓存配置并优化阿里云和S3适配器缓存实现

2025-12-29 11:17:18 +08:00

main.go

feat(config): 更新配置文件并新增自定义时间类型

2025-11-24 16:12:31 +08:00

Description

No description provided

234 KiB

Languages

Go 100%