|
|
ef4cf549c4
|
feat(storage): 增强文件上传功能并添加详细的指标追踪
- 在存储服务中新增 upload_file_with_metrics 方法，返回上传结果和详细指标
- 为上传操作添加完整的指标收集，包括 HTTP 尝试次数、重试次数、状态码等
- 集成 OpenTelemetry 追踪，记录文件上传的关键属性和错误标记
- 改进缓存写回逻辑，添加缓存写入失败的日志记录
- 支持 Rclone 上传方式的指标追踪和回退到 HTTP 的情况记录
- 优化本地文件大小检查，避免重复的文件系统调用
- 添加更详细的错误日志，包含上传方法、状态码和错误类型信息
|
2026-02-07 18:29:20 +08:00 |
|
|
|
d955def63c
|
feat(tracing): 增强文件下载上传的日志记录和追踪功能
- 添加任务上下文信息到日志前缀，便于追踪具体任务
- 在跨度中增加文件源URL和上传URL的属性记录
- 将存储服务中的info级别日志调整为debug级别以减少冗余输出
- 添加文件访问地址的调试日志输出
- 优化根日志级别设置允许DEBUG日志流入处理器
- 修复重试失败后的错误日志格式问题
|
2026-02-07 00:26:01 +08:00 |
|
|
|
9b373dea34
|
feat(tracing): 集成 OpenTelemetry 链路追踪功能
- 在 base.py 中添加文件下载、上传和 FFmpeg 执行的链路追踪
- 在 api_client.py 中实现 API 请求的链路追踪和错误标记
- 在 lease_service.py 中添加租约续期的链路追踪支持
- 在 task_executor.py 中集成任务执行的完整链路追踪
- 新增 util/tracing.py 工具模块提供统一的追踪上下文管理
- 在 .env.example 中添加 OTEL 配置选项
- 在 index.py 中初始化和关闭链路追踪功能
|
2026-02-07 00:11:01 +08:00 |
|
|
|
a6263398ed
|
fix(storage): 解决URL编码字符处理问题
- 添加了URL解码功能以处理编码字符（如%2F转换为/）
- 修复了URL匹配逻辑中的编码问题
- 确保替换操作正确处理已编码的路径字符
|
2026-01-24 23:33:50 +08:00 |
|
|
|
885b69233a
|
feat(storage): 添加上传日志记录功能
- 导入 urllib.parse.unquote 模块用于 URL 解码
- 在使用 rclone 上传时添加上传目标 URL 的日志记录
- 便于调试和监控文件上传过程
|
2026-01-24 23:29:37 +08:00 |
|
|
|
797507d24b
|
feat(storage): 添加文件上传的 Content-Type 检测功能
- 添加文件扩展名到 Content-Type 的映射表
- 实现根据文件扩展名获取对应 Content-Type 的函数
- 将上传日志中的调试信息改为信息级别并显示 Content-Type
- 使用正确的 Content-Type 替换默认的 application/octet-stream
- 支持 mp
|
2026-01-21 15:01:22 +08:00 |
|
|
|
f7ca07b9db
|
debug(storage): 添加上传URL调试日志
- 在上传过程中添加HTTP URL的调试日志输出
|
2026-01-21 14:56:55 +08:00 |
|
|
|
b291f33486
|
feat(material-cache): 添加缓存锁机制防止并发冲突
- 实现跨进程缓存锁获取和释放功能
- 在下载过程中使用UUID生成唯一的临时文件名避免并发覆盖
- 添加超时机制和轮询间隔控制锁等待时间
- 修改清理逻辑跳过锁文件和下载中的临时文件
- 添加测试验证缓存锁功能正常工作
fix(ffmpeg): 优化FFmpeg命令执行和错误处理
- 添加默认日志级别为error减少冗余输出
- 修复subprocess运行参数传递方式
- 改进错误信息截取避免空值解码异常
refactor(system-info): 优化系统信息获取和缓存机制
- 实现FFmpeg版本、编解码器信息缓存避免重复查询
- 添加系统信息TTL缓存机制提升性能
- 实现GPU信息检查状态缓存避免重复检测
- 整合静态系统信息和动态信息分离处理
refactor(storage): 优化HTTP上传下载资源管理
- 使用上下文管理器确保请求连接正确关闭
- 修改rclone命令构建方式从字符串改为列表形式
- 改进错误处理截取stderr输出长度限制
- 优化响应处理避免资源泄露
|
2026-01-19 20:03:18 +08:00 |
|
|
|
2911a4eff8
|
refactor(core): 移除旧版 FFmpeg 业务逻辑并重构常量配置
- 删除 biz/ffmpeg.py 和 biz/task.py 旧版业务模块
- 删除 entity/ffmpeg.py FFmpeg 任务实体类
- 删除 config/__init__.py 旧版配置初始化
- 更新 constant/__init__.py 常量定义，从 v1/v2 版本改为统一版本
- 修改 handlers/base.py 基础处理器，替换 OSS 相关导入为存储服务
- 添加 subprocess_args 工具函数支持跨平台进程参数配置
- 新增 probe_video_info 函数用于视频信息探测
- 新增 probe_duration_json 函数用于媒体时长探测
|
2026-01-12 17:01:18 +08:00 |
|
