← 回到智能制造合集
Smart Manufacturing · 01

双臂轮式机器人 · 物流开箱检测

需求方 · 浙江恒东智能科技
沉淀人 · 公度 / Hermes
日期 · 2026-06-18
范围 · 一期(模块 1/2/3/6)
状态 · 需求拆解完成 · 待启动
一句话定位

双臂轮式具身智能机器人 + 本地大模型,替代/辅助海关/物流查验关员做"开箱 + 同物比对 + 报告导出",覆盖一期系统闭环 + 二期模型迭代 + 数据专项。

关键约束

本地大模型(数据不出境,政务/物流合规)

不直接替代人工裁决(辅助复核 = 始终 human-in-the-loop)

三系统架构:工控系统 / BS 后台 / 同物比对分析服务,独立部署

§1

一期范围与边界

SCOPE
模块状态说明
§1 业务主流程与案件管理✅ 一期全做案件创建 / 编号 / 状态机 / 图片上传 / 报关信息 / 队列
§2 同物比对与证据帧⚠️ 一期做核心BS 侧全做;算法侧做图片比对(视频/关键帧/证据帧 暂缓)
§3 规则库与品牌库✅ 一期全做规则 / 品牌 / 别名 / 关键词 / 异常筛查引擎
§4 本地大模型❌ 不在一期文档明确"不在开发内容",二期专项
§5 人工复核 / 日志 / 报告❌ 不在一期文档明确"一期暂不考虑",二期专项
§6 部署与联调✅ 一期全做Docker 部署 / 联调 / 演示样本 / 培训

一期真正交付的 = 案件管理 + 同物比对(BS + 算法)+ 规则品牌 + 部署联调。接口和数据结构为二期全部预留,避免补坑。

§2

能力盘点 · 我们能做什么

CAPABILITY
BS 前端
✅ 全做
Vue/React + 组件库
后端接口
✅ 全做
Spring Boot / FastAPI
数据库
✅ 全做
PostgreSQL + 索引 + 90 天滚动
对象存储
✅ 全做
MinIO,图片原图保留 90 天
规则引擎
✅ 自研
JSON 条件 + 求值器 + Excel
RBAC 权限
✅ 基础版
Spring Security / Casbin
同物比对算法
⚠️ OpenCLIP
开源免费,二期 fine-tune
OCR / 品牌识别
⚠️ 接收
由工控自带,我们只接结果
本地大模型
❌ 不做
文档明确"不在开发内容"
机器人 / 工控机
❌ 不做
物理层由客户/集成商负责
部署 + 培训
✅ 全做
Docker Compose + 现场培训
海关系统对接
⚠️ 适配层
依赖客户提供接口文档
§3

WBS 工作分解

WBS
一期物流开箱检测系统(8 周 × 8 工作包 · ≈93.5 人天)
│
├── W1 基础平台搭建 ······························· 10.5 人天
│   ├── W1.1 数据库 schema 设计 + 评审
│   ├── W1.2 Docker Compose 骨架
│   ├── W1.3 案件中心骨架(CRUD + 编号 + 状态机)
│   ├── W1.4 接口规范定稿(OpenAPI 3.0)
│   └── W1.5 OpenCLIP PoC(相似度可行性)
│
├── W2 案件中心完成 ······························· 18 人天
│   ├── W2.1 案件列表 + 详情 + 队列
│   ├── W2.2 图片上传 + MinIO + 90 天清理
│   ├── W2.3 报关信息录入(19 字段)
│   ├── W2.4 状态流转接口
│   └── W2.5 WMS 推送接入
│
├── W3 规则品牌基础 ······························· 16 人天
│   ├── W3.1 规则 CRUD + JSON 条件引擎
│   ├── W3.2 规则 Excel 导入 + 模板
│   ├── W3.3 品牌名录 + 别名映射
│   ├── W3.4 关键词库 + OCR 匹配
│   └── W3.5 参考图库 CRUD + 分类 + 版本
│
├── W4 同物比对 v1 ································ 18 人天
│   ├── W4.1 资料接收 + 工控对接(gRPC stream)
│   ├── W4.2 图像预处理(OpenCV + pHash)
│   ├── W4.3 OpenCLIP 特征提取 + FAISS 检索
│   ├── W4.4 同物置信度 + 7 类风险标签
│   └── W4.5 后台比对结果展示(只读 UI)
│
├── W5 异常筛查引擎 + 集成 ························· 15 人天
│   ├── W5.1 异常筛查引擎(规则求值 + 标签)
│   ├── W5.2 异常 → 状态联动
│   ├── W5.3 异常日统计
│   ├── W5.4 BS ↔ 算法服务内调(gRPC)
│   └── W5.5 全流程联调
│
├── W6 优化与压测 ································ 10 人天
│   ├── W6.1 性能压测(100 并发 / 1k 案件)
│   ├── W6.2 慢 SQL + 索引调优
│   ├── W6.3 前端体验优化
│   ├── W6.4 安全自查
│   └── W6.5 90 天清理实测
│
├── W7 部署 + 文档 ································ 8 人天
│   ├── W7.1 部署脚本 + 备份演练
│   ├── W7.2 演示样本(5 类异常)
│   ├── W7.3 用户操作手册
│   ├── W7.4 管理员手册 + 接口文档
│   └── W7.5 部署文档 + FAQ
│
└── W8 联调 + 培训 + 交付 ··························· 12 人天
    ├── W8.1 现场联调(工控+海关+WMS 三方)
    ├── W8.2 异常场景测试 + Bug 修复
    ├── W8.3 培训(4 类角色)
    ├── W8.4 演示流程彩排 + 录屏
    └── W8.5 一期项目总结 + 验收交付
§4

团队配置 · 最小 7.5 人

TEAM
角色人数主要负责关键产出
前端 A1案件中心 / 队列 / 详情(§1)案件相关 5 个页面
前端 B1规则 / 品牌 / 参考图库 / 比对展示(§2 §3)规则 + 比对 6 个页面
后端 A1案件 / 报关 / 文件 / 接口 / 部署(§1 + §6)案件中心全链路 + 部署
后端 B1规则引擎 / 品牌 / 异常筛查(§3)引擎 + 7 类异常标签
后端 C1同物比对 BS 侧 / 算法编排(§2)资料接收 + 比对编排
算法 A1OpenCLIP / 预处理 / 置信度(§2)算法服务 v1
运维 A1Docker / Nginx / 备份 / 部署 / 培训部署包 + 培训支持
售前/培训0.5(兼职)文档 / 培训 / 演示样本(§6)5 类样本 + 培训交付
合计7.5≈ 93.5 人天(8 周 × 5 工作日 × 投入度)
§5

8 周甘特图

GANTT
角色 / 周
W1
6/22-26
W2
6/29-7/3
W3
7/6-10
W4
7/13-17
W5
7/20-24
W6
7/27-31
W7
8/3-7
W8
8/10-14
前端 A · 案件
骨架
详情+队列
优化
手册
联调
前端 B · 规则
接入
规则+品牌
比对
优化
手册
联调
后端 A · 案件
案件+接口
图片+报关
压测+安全
部署
联调
后端 B · 引擎
规则+引擎
品牌+别名
异常引擎
手册
联调
后端 C · 比对
资料接收
内调+联调
优化
联调
算法 A · OpenCLIP
PoC
预处理
特征+检索
调优
运维 A · 部署
Compose
联调支持
压测+备份
完整部署
联调+培训
客户配合
接口签字
海关接口
参考图库
联调支持
演示确认
培训+验收
前端 后端 算法 运维 售前/培训 客户配合(关键路径)
§6

4 个交付里程碑

MILESTONES
M1
骨架可跑
W2 末 · 7/3
案件能创建、状态能流转、Docker 一键起
验收:内部演示视频
M2
业务闭环
W4 末 · 7/17
案件/图片/规则/品牌/参考图全部 CRUD
验收:功能 checklist
M3
流程跑通
W5 末 · 7/24
工控推图 → 比对 → 异常 → 状态变更 全链路
验收:联调报告
M4
可交付
W8 末 · 8/14
客户能试用、能培训、能演示
验收:交付清单全套
§7

风险登记表

RISKS
概率
影响
等级
风险描述
缓解措施
触发器
+2 周
P0
海关接口规格 W2 末仍未到位
立即拉接口文档 + 提前 mock 走通
W1 接口评审未通过
+1 周
P0
工控接口协议"已确定"≠"已文档化"
客户给接口 mock 提前联调
W1 末没有 mock
+1 周
P0
客户参考图库延迟到位
用 mock 图库先开发,真实图库上线替换
W3 末未到位
+2-3 周
P1
OpenCLIP 在垂域(包装/品牌)效果差
M1 末 PoC 必出结论 + 备用百度/阿里云 API
PoC top-1 < 70%
+1 周
P1
客户服务器资源不到位
W1 末发资源清单 + 备份方案
W7 前未到位
+50%
P1
关键开发人员离职
知识库沉淀 + 双人交叉
任意时间
§8

本周立即启动 · 7 件事

ACTIONS

今天 / 明天(必须做)

  1. 拉齐"接口协议签字"会议(客户 WMS / 工控 / 海关 三方)负责人:Rus · 输出:签字版接口规范W1 周三
  2. OpenCLIP PoC 启动(5 个测试品牌跑相似度)负责人:算法 A · 输出:top-1/top-3 准确率报告W1 周五
  3. 数据库 schema v1 出稿(25 张表)负责人:后端 A · 输出:DDL + 字段说明W1 周五

W1 末必达成

  1. Docker Compose 骨架能 up -d 起来负责人:运维 A · 验收:5 个服务全绿W1 周五
  2. 案件中心 MVP(CRUD + 状态机 + 编号生成)负责人:后端 A + 前端 A · 验收:能创建案件并流转W2 周三

持续进行(W3 末必到位)

  1. 客户参考图库对接(≥10 品牌 × 50 张真实脱敏图)负责人:Rus + 售前W3 周五
  2. 演示样本采集启动(5 类异常样本)负责人:售前/培训W4 周五
§9

Rus 必拍 10 个决策

DECISIONS

前 3 项 = 阻塞启动,缺一不可。

#决策项默认假设截止阻塞
1海关接口规格HTTP 推送,19 字段W1 周三§1.3.4 全部
2工控接口规格gRPC stream,12 字段W1 周三§2.5.1 全部
3WMS 接口字段HTTP POST 箱件码W1 周三§1.3.1 双入口
4同物比对算法OpenCLIP 自研W1 周五(看 PoC)§2.7.6 全部
5参考图库来源客户提供种子W3 周五§2.7.5
6相似度阈值0.75W1 周五§2.7.7 公式
7异常自动进复核规则任一异常即复核W5 周三§3.3.6 引擎
8案件编号规则YYYYMMDD-{箱号6位}-{序号}W1 周五§1.3.2
9一期范围锁版文档"暂不考虑"项全部二期W1 周五全局范围
10OCR/品牌识别结果来源工控自带W1 周五§1.3.3 + §2.5.1
§10

日常协作节奏

RHYTHM
频率事项参与人时长
每日早站会(昨天 / 今天 / 卡点)全员10 min
每周一周计划 review + 周报全员 + Rus30 min
每周三客户进度同步会Rus + 后端 A + 客户30 min
每周五演示 + 自测报告全员60 min
每两周里程碑评审(M1/M2/M3/M4)全员 + Rus + 客户90 min
按需接口联调会(工控/海关/WMS)后端 A + 客户技术60 min
§11

技术栈与架构

STACK
Vue 3 / React
Spring Boot 3
FastAPI
PostgreSQL 15
MinIO
Redis
OpenCLIP ViT-B/32
FAISS
OpenCV + Pillow
Docker Compose
Nginx
WireMock
┌─────────────────────────────────────────────────────────────┐
│  Nginx(反向代理 + 静态资源 + HTTPS)                          │
│  :80 / :443                                                    │
└──────────────┬──────────────────────────────────────────────┘
               │
   ┌───────────┼─────────────┬───────────────────┐
   ▼           ▼             ▼                   ▼
┌────────┐ ┌────────┐ ┌──────────────┐ ┌──────────────┐
│ 后台   │ │ 算法   │ │ PostgreSQL   │ │ MinIO        │
│ Spring │ │ FastAPI│ │ :5432        │ │ :9000/:9001  │
│ :8080  │ │ :8000  │ │ 业务数据      │ │ 图片+视频    │
└───┬────┘ └───┬────┘ └──────────────┘ └──────────────┘
    │ gRPC     │ 读
    └──────────┤
               ▼
        ┌──────────────────┐
        │ FAISS Index       │
        │ 特征向量落盘       │
        └──────────────────┘
               ▲
               │ HTTP / gRPC
               │
   ┌───────────┼───────────┬──────────────┐
   │           │           │              │
┌──┴──┐   ┌────┴───┐  ┌────┴────┐   ┌─────┴─────┐
│ WMS │   │ 现场   │  │ 海关     │   │ 人工后台   │
│ 推送 │   │ 工控   │  │ 接口     │   │ 录入/审核  │
└─────┘   └────────┘  └─────────┘   └───────────┘