AI算法实时分析摄像头画面,识别当前正在操作的零部件、工具及动作,并与SOP进行比对。若发现跳步、错序,立即在AR界面发出视觉与语音警报。
结合SOP,AI算法模型可以自动识别装配动作是否规范,并给出提醒。
在装配完成后,AI自动对装配结果进行AI分析,检测漏装丝、垫片缺失、线東连接不到位、插头未插紧、标签粘贴错误等常见质量缺陷。
集成蓝牙装配和测量工具,自动采集装配数据如扭矩、缝隙距离等,实时比对工艺标准,智能判定装配结果,自动关联、打包装配过程数据,形成“一机一档”的完整数字化记录,便于追溯。
包含装配的方法和标准,装配物体照片及序号,装配视频、3D模型、图纸等资料。
基于TSM和FUTR模型,结合AR眼镜采集视频,实现离线与在线动作识别、标准SOP动作动态匹配与未来操作预测。系统可实时检测操作偏差,通过AR界面提供纠偏指引,并结合GSC与AKDE算法提升语音交互鲁棒性,未来支持联邦学习优化模型泛化。
在AI大模型加持下,作业人员通过头戴AR眼镜,使用自然语言与软件进行交互,传统的交互方式是语音指令,对普通话标准要求高,语音指令与用户语音转录的文字匹配率低。
软件支持在客户内网本地、私有化部署,对客户内网环境无特殊要求。