返回项目经历

Project detail

影像数据采集与入库管理平台

面向多源影像与空间数据的数据采集和入库管理平台,统一接入本地文件、FTP 与数据库中的栅格、矢量及业务数据,并通过 Server/Worker 分离和分布式调度管理长耗时处理任务。

项目周期
负责内容
  • 负责影像入库核心流程、分布式任务调度和文件解析能力建设。
  • 支持本地文件、FTP 与数据库等数据源,以及栅格和矢量文件的差异化处理。
  • 完善长时间运行任务的暂停、恢复、重试、异常重跑和服务启停控制。
工程亮点
  • 拆分 Server 与 Worker 职责,将文件解析和计算任务下沉至工作节点,降低服务节点负载。
  • 统一本地文件、FTP 与数据库采集入口,并针对栅格、矢量及 GDB 等空间数据实现差异化解析与入库。
  • 实现任务暂停、恢复、立即执行、失败重试和异常任务重跑,并限制运行中任务的冲突操作。
  • 串联影像入库、质检、重新打标、上图与快视图生成流程,覆盖原始影像和成果影像管理。
  • 设计保留源文件的失败恢复策略,并为算法调用和中断任务提供可重试机制,降低数据丢失风险。