Spaces:
Runtime error
Runtime error
Commit History
-
Change trade_date to String type to avoid SQLAlchemy datetime conversion errors
d4f9f67 -
Deploy to Hugging Face Spaces - SQLite version with 10k sample data
0e8f624 -
Enhances platform with robust monitoring and notifications
Introduces comprehensive health checks, multi-channel alerting, and a subscription-based notification system to improve operational visibility and user engagement. Key improvements include: - Establishes a detailed `.env.template` for centralized configuration. - Integrates Celery, Redis, and Elasticsearch into the Docker Compose setup, enabling a distributed architecture for background tasks and advanced search. - Implements extensive health and data consistency checks across PostgreSQL, ClickHouse, Elasticsearch, and Redis. - Develops an advanced alerting module with support for Feishu, DingTalk, and WeCom webhooks. - Adds asynchronous data export capabilities, including CSV generation, secure download, and email notifications. - Introduces a real-time subscription matching engine to notify users of new data based on their criteria. - Enhances trade search functionality to leverage Elasticsearch for full-text queries, with PostgreSQL fallback. - Provides a dedicated script for reind…4e22b4d
-
feat: 完成多国家海关数据源接入与核心功能全量迭代
- 新增印度、越南、印尼、欧盟Eurostat海关数据源接入及对应语言字典映射 - 集成ClickHouse OLAP数据库与Elasticsearch全文检索,实现业务数据双写同步 - 新增异步导出、企业订阅管理、BI供应链分析等API接口 - 内置API鉴权、企业实体解析引擎与NLP智能处理工具 - 补充数据质量监控、冷数据归档与全链路运维方案 - 更新依赖配置、Docker Compose部署配置与项目文档8ca8917 -
feat(customs): 完成美墨两国海关数据连接器开发与文档适配
1. 新增apps/worker下的两国海关数据启动脚本,支持通过--start/--end参数指定运行周期 2. 新增packages/dictionaries下的专用字典工具,处理编码转换与代码映射逻辑 3. 编写packages/connectors下的两国数据采集适配器,实现完整的数据流转流程 4. 更新项目任务文档与两国接入详情文档,标记美墨两国海关接入开发完成69b1d78 -
feat: 新增智利海关数据接入链路,完善系统框架与文档
新增智利海关全套接入组件:字典映射工具、数据连接器、独立运行脚本及Celery定时同步任务 优化巴西海关连接器,新增本地CSV文件历史回补模式 增强HTTP客户端:实现代理池获取逻辑,新增Cloudflare/验证码拦截识别与自动重试机制 新增基线回归测试框架与配套文档,规避回归风险 补充国家接入卡片模板、历史数据回补策略、系统中长期架构规划等文档 完善历史回补脚本,新增本地数据目录参数支持89d8756 -
chore: 添加开发辅助脚本用于测试和数据库检查
新增 run_test_backfill.py 用于测试巴西贸易数据连接器的回填任务,新增 check_db.py 用于检查并展示数据库贸易记录。本次提交还包含临时日志文件与Python缓存文件,此类文件通常不应纳入版本控制。c3202cd -
feat: 新增贸易查询筛选条件并完善巴西贸易数据解析
- 扩展TradeQueryRequest查询schema,新增贸易方向、商品名称、原产国、目的国等筛选参数 - 更新贸易路由文档,补充新支持的筛选维度 - 为贸易路由添加对应新增参数的数据库筛选逻辑 - 重构巴西ComexStat连接器,新增官方表格数据加载与标准化映射工具 - 完善巴西贸易记录的国家、港口、运输方式及商品名称解析逻辑 - 补充完整的巴西运输方式标准化映射表98897be -
feat: 接入巴西真实海关数据源并优化回补逻辑与HTTP客户端
- 实现巴西Comex Stat官方开放CSV数据源的拉取、解析与标准化流程,替换原Mock模拟数据 - 优化回补脚本run_backfill.py,支持巴西按年月范围批量执行回补任务 - 修复HTTP客户端SSL证书校验失败的降级重试逻辑,新增代理与SSL参数配置能力 - 添加项目下一步开发规划文档与测试日志示例a241a73 -
chore: change DB to SQLite for Hugging Face Space deployment
b643537 -
Initial commit for Hugging Face Space
3834ddb