多模态数据表征建模分析工具
将摄像头图像帧、毫米波雷达点云段与激光雷达点云段映射到统一核心数据空间,形成可检索、可比较的安全表征。
文件指纹、熵值与格式特征提取视频抽帧车辆/行人识别与绿/橙框标注512 维核心数据空间向量8 项安全维度与模态画像数据空间覆盖率与跨模态对齐度
面向摄像头、毫米波雷达、激光雷达及多模态融合数据,构建“数据空间表征—风险动态感知—量化评估—路径示踪—差异化加固—复测验证”的闭环能力。系统采用 Flask + MySQL 本地部署,模型接口可插拔,原始数据不出域。
将摄像头图像帧、毫米波雷达点云段与激光雷达点云段映射到统一核心数据空间,形成可检索、可比较的安全表征。
面向风险数据集执行动态感知与量化评估,输出可核验的风险分、置信度、证据和严重等级,支撑风险筛查与排序处置。
基于风险传播路径生成针对性加固策略,在采集、传输、表征、融合和模型调用等环节协同防护,并通过复测验证效果。
| 层级 | 核心组件 | 职责 |
|---|---|---|
| 接入层 | 资产接入 / 文件指纹 / 数据解析 | 多模态文件与元数据接入、完整性校验 |
| 表征层 | 特征提取 / 空间映射 / 模态画像 | 构建核心数据空间与安全维度基线 |
| 评估层 | 规则引擎 / 大模型适配器 | 风险识别、量化打分、证据生成 |
| 示踪层 | 传播图谱 / 路径概率计算 | 还原风险从采集到决策的传导链 |
| 加固层 | 策略匹配 / 策略下发 / 策略包 | 差异化防护与审计留痕 |
| 验证层 | 复测任务 / 对比报告 | 验证策略有效性并沉淀反馈 |
| 方法 | 路径 | 用途 | 关键参数 |
|---|---|---|---|
| GET | /api/health | 服务与数据库健康检查 | — |
| GET | /api/dashboard | 驾驶舱指标、趋势与风险分布 | — |
| GET | /api/assets | 获取多模态数据资产列表 | — |
| POST | /api/assets | 接入新资产并自动表征 | multipart: name, modalities, file |
| GET | /api/assets/{id}/video | 视频目标识别与关键帧结果 | — |
| GET | /api/assets/{id}/video/cover | 车辆/行人标注关键帧封面 | — |
| GET | /api/assets/{id}/video/media | 播放原始视频 | Range |
| POST | /api/assets/{id}/detect | 对指定资产快速发起检测 | scope, use_model |
| POST | /api/tasks | 创建风险检测任务 | asset_id, name, scope, use_model |
| GET | /api/tasks/{id}/status | 轮询任务进度与风险概况 | — |
| GET | /api/tasks/{id}/trace | 获取风险传播图谱 | — |
| POST | /api/tasks/{id}/protect | 下发差异化加固策略 | plan_ids |
| POST | /api/tasks/{id}/retest | 发起防护复测 | — |
| GET | /api/tasks/{id}/report | 获取完整检测报告数据 | — |
| PUT | /api/model/config | 保存模型接口配置 | provider, base_url, model_name, api_key |
| POST | /api/model/test | 测试大模型接口连通性 | — |