“2024全球开发者先锋大会”(GDC)3月23日在上海徐汇盛大开幕。开幕式上，《润爱无声助聋门诊场景》——基于手语大模型的交互式数字人手语翻译等一批项目重磅发布。这批市级重大应用场景技术集成度高、公众显示度亮、行业影响力大，更具头雁效应。

项目亮点介绍

《润爱无声助聋门诊场景》是上海广播电视台创意发起，联合上海科技大学的人工智能研发团队，强强联手共同研发国内首创的将人工智能、元宇宙、机器人等技术集合在一起的手语大模型首个落地应用场景。致力于让人工智能服务于听障人群，有效提升了上海在数字化转型中的城市温度。

自2023年5月起，上海广播电视台便携手上海科技大学组建了《润爱无声——人工智能手语》项目团队，通过自主研发的多模态高精度动作捕捉系统，结合手部光学和解剖学数据以及自然语言处理高纬度信息的积累，开展了以国家通用手语为基础的手语词汇语料、自然手语语料采集工作，积极进行手语大模型的训练和应用场景的特化训练。

2023年11月起，项目组开启与徐汇区牙防所的深度合作，开设了全国第一家牙科助聋门诊，为患者提供从预约到就诊治疗的全套手语服务。同时建立医疗场景数据采集基地，并进行数据采集、标注和训练。

第一套应用于牙科治疗的智能手语服务系统计划在今年4月进入测试阶段，争取在2024年人工智能大会期间发布《润爱无声助聋手语门诊服务场景》的正式应用版本。《润爱无声——人工智能手语》项目的更多应用场景也正在规划研发当中，未来将切实服务无障碍民生、教育、就业等广泛领域。