项目名称:基于视觉和语音交互的学习型配餐机器人

组 别: 高中组 省赛奖项: 一等奖
代表团: 福建 参赛队员: 张羽田 参赛队:
辅导教师: 陈思鑫 梁良飞 杨利

项目摘要:

随着人工智能的发展和人工成本的提升,餐饮业中的服务要求越来越高,本研究是基于视觉交互和语音交互来满足餐饮业中个性化定制和服务提升的要求。 在硬件上,采用3D设计软件在电脑上进行仿真设计,制作多维度的机器人头部和身体驱干,包括眼球、鼻子、嘴巴、耳朵、脖子等模块,把语音和视觉系统融合到结构中,产生灵活生动的交互效果。一只手臂持可转动的托盘,根据顾客的个性喜好配置不同的比例和花色的餐饮,另一只手臂则可持骰子盅,增加餐饮的娱乐功能,利用摄像头进行结果的识别。 在软件上,利用基于Tensorflow和face_recognition算法的人脸识别技术和二维码识别技术对顾客进行身份认定,结合语音语义分析,提供顾客个性化的配餐方案。 利用舵机和直流电机等运动控制来实现多维度表情包的实现,构建娱乐性的用餐环境。是一款新型的聪明的配餐机器人。

演示视频:

演示图片: