AI 视觉模型下工地一线“干活”：Bedrock Robotics 携手 AWS 缓解建筑业缺工难题

在全球制造业和建筑业普遍面临用工紧缺的大环境下，如何让挖掘机等各类重型机械实现自动作业，正在成为行业关注的重点方向。初创公司Bedrock Robotics近期与 AWS 生成式 AI 创新中心展开合作，借助视觉语言模型（VLMs），切入并攻克了自动驾驶系统开发中最耗时的一环——对海量施工视频进行精细标注。

在以往，要训练一个用于工地自动化控制的系统，需要人工花费大量时间查看、标记数以百万小时计的监控画面，对各种铲斗、吊钩以及不同工况任务进行逐一识别，这种方式成本非常高，效率却十分有限。通过引入Amazon Bedrock平台上的视觉语言模型，团队可以像与人对话一样，用简单自然的语言给出指令，让 AI 自动识别并用文字描述视频中的复杂施工场景。

这种“用 AI 来帮忙做标注”的方式，让数据处理效率成倍提升。相关报道提到，由于拍摄视角怪异、工地粉尘干扰等因素，原先普通模型对施工工具的识别准确率只有 34%；在利用针对性的提示工程（Prompt Engineering）进行优化后，准确率提升到了 70%。这意味着过去需要人工反复筛选、核对的数据标注工作，如今已经可以变成一条自动化、可扩展的数据处理流水线。

目前，这套技术方案已被用在Bedrock Operator的设备改造中，让普通挖掘机也能实现厘米级的精细操作。这个实践案例不仅展示了 AI 在处理复杂物理世界数据方面的巨大潜力，也为正遭遇“用工荒”的建筑、物流和农业等行业，提供了一套可以借鉴、可落地的自动化转型路径。