NBT 评测平台

内部评测网站:模型与数据管理、算法评测、结果管理和数据共享,并预留 badcase 分析、回流数据管理和建图结果展示接口。

腾讯地图 2021 – 2022 设计与开发

1个平台统一管理模型、数据、评测和结果
  • 评测
  • Web 开发
  • MLOps
本页目录

问题

团队需要一个共享的地方来管理模型和数据、运行算法评测、保存结果和共享数据,而不是每个人各自记录。

设计

平台把模型、数据、评测任务和结果统一放在一个 Web 界面之后,并提供 API 供其他工具接入。

评测平台架构
平台架构
  • 模型与数据管理集中在一处。
  • 算法评测通过平台运行,结果以同样的方式产生。
  • 结果管理与数据共享面向整个团队。
  • 预留接口用于 badcase 分析、回流数据管理和建图结果展示。
评测平台界面设计
界面设计

产品

评测平台第一版
第一版
评测平台第二版
第二版

经验

  • 可比性本身就是产品功能。 统一的评测路径比任何单个指标都重要。
  • 先设计接口,再设计功能。 为 badcase 分析和数据回流预留位置,平台才能持续扩展。