主题论坛5多感官交互与沉浸式人机融合论坛

2026年8月15日 09:30–11:30 5楼桃花厅

论坛简介

多感官交互与沉浸式人机融合论坛聚焦视觉、听觉、触觉、力觉、前庭觉、本体觉等多通道感知信息在人机交互中的融合、表达与调控,探讨新型交互技术如何提升人与机器、人与环境之间的感知一致性、交互自然性和体验沉浸感。论坛将围绕沉浸式交互技术、多感官感知机制建模、可穿戴交互、多感官交互装置设计、人机协同与智能系统应用等方向展开报告与交流,关注从基础理论、关键技术到典型应用的系统性问题。 本论坛旨在汇聚人机交互、虚拟现实、设计学、可穿戴计算等领域的专家学者,共同汇报与讨论多感官交互在人机环境系统中的前沿进展与发展趋势,推动多学科交叉融合,为构建更加自然、高效、安全和具有沉浸体验的新一代人机融合系统提供理论支撑与技术路径。

论坛主席
罗天任

罗天任

主席/联系人

西北大学

简介:

罗天任,西北大学计算机学院教授,博士毕业于中国科学院软件研究所,博士、硕士阶段分别师从人机交互与虚拟现实领域知名学者田丰研究员、潘志庚教授。现任CCF与CSIG人机交互专委会执委、CSIG数字文化遗产专委会副秘书长。主要从事人机交互与虚拟现实研究,重点聚焦虚拟现实重映射交互、沉浸式环境中多感官冲突的人因评估测量、交互设计、主动干预与工具系统。研究成果面向军事训练、医疗健康、数字文旅和遥操作机器人等应用场景,致力于突破沉浸式系统中的关键人因瓶颈,推动人因驱动的虚拟现实与智能交互技术创新及工程化应用。 近年来在ACM CHI、ACM UIST、IEEE TVCG、IEEE VR等人机交互与虚拟现实领域CCF-A类国际顶级会议和期刊发表/录用论文17篇。相关成果获ACM UIST 2024 Best Paper Honorable Mention(大陆机构第二次)、CCF人机交互专委会博士学位论文激励计划等8项学术荣誉,并获中国科学院院长奖、中国科学院大学朱李月华优秀博士奖等学校荣誉。作为骨干参与科技部重大专项、国家重点研发计划、国家自然科学基金重点项目等多项国家级科研任务。 在学术服务方面,担任潘云鹤院士主编期刊DAAI的客座编辑组建特刊,长期担任ACM CHI、ACM UIST、IEEE VR、IJHCI、TPCI、VIRE等人机交互与虚拟现实领域高水平国际会议和期刊审稿人,连续三年获得ACM CHI和ACM UIST优秀审稿特别表彰。

丁玎

丁玎

副主席

东南大学

简介:

丁玎,东南大学计算机科学与工程学院副教授、院长助理,江苏省“双创博士”、苏州科教创新区科教骨干人才、东南大学“至善青年学者特设岗位—应用基础和基础研究人才专项”资助获得者。先后获东南大学计算机科学与工程学院学士、硕士学位和荷兰代尔夫特理工大学博士学位,博士毕业后在代尔夫特理工大学交互智能组担任Research Fellow;曾参与欧盟第七框架“玛丽居里”人才计划赴法国格勒诺布尔国立综合理工大学开展合作研究,并赴加拿大魁北克大学短期访问。 现依托江苏省网络与信息安全重点实验室开展教学科研工作,主要研究方向包括人机交互与交互智能、虚拟现实与边缘计算、数字健康与智慧医疗等。主持国家自然科学基金青年项目、高等教育科学研究规划重点项目、江苏省高等教育教学改革研究课题等,相关教改成果入选教育部数字化美育资源与智能化美育应用案例;作为主要参与人承担国家重点研发计划、欧盟“玛丽居里”行动计划、江苏省前沿技术研发计划等项目。累计以第一作者或通讯作者在IJHCS、TOSN、IJHCI、TOMM等领域权威期刊和会议发表论文30余篇,其中CCF A/B类及IEEE/ACM Transactions论文10余篇。现任中国计算机学会人机交互专委会执行委员,并长期担任多个国际会议和期刊审稿人。

论坛嘉宾
周明全

周明全

嘉宾1

北京师范大学

简介:

周明全,北京师范大学首批二级教授、博士生导师。原北京师范大学人工智能学院(原信息科学与技术学院)院长,获全国优秀科技工作者,国务院特殊津贴专家;现担任中国虚拟现实技术与产业创新平台名誉理事长,教育部虚拟现实应用工程研究中心荣誉主任;曾任中国图像图形学学会副理事长,中国计算机学会理事、专委会主任、教育部信息技术新工科联盟虚拟现实工作委员会主任、中国虚拟现实产学研战略联盟理事长、北京市图象图形学学会副理事长。主持完成国家科技攻关、863重点、国科金重点等20余项, SCI、EI收录论文200余篇,专著5部;主持获得国家科技进步二等奖、省部级科技奖13项、中国专利优秀奖2项。 研究立足计算机虚拟现实和可视化技术,坚持文理工交叉融合,研究服务于文化领域的计算机新技术,发展文化遗产数字化和虚拟修复新技术,有效地服务于文化创意与数字教育。

报告题目:面向公共文化的虚拟现实技术研究

报告摘要:

虚拟现实是人机交互的一种高级方式,目前流行的虚拟现实技术受器件和装备影响,只是在个人使用中,私域文化传播取得了成功。而典型的教育,博物馆、剧场等公共文化的虚拟现实技术还有较大困难。研制面向公共文化的VR新技术,是时代社会发展的重大需求。本报告介绍本人在这方面的研究探讨。

王冠云

王冠云

嘉宾2

浙江大学

简介:

王冠云,浙江大学人工智能学院、浙江大学国际设计研究院研究员,博士生导师,工业设计系副主任,国家优青获得者,浙江省杰青获得者。主要研究领域为实体交互技术、仿生设计、4D打印等。研究成果以封面论文在Nature、Science Advances等顶尖期刊上发表,并在CHI、UIST、UbiComp等人机交互领域顶级会议上发表,多项研究工作荣获最佳论文、最佳论文提名等奖励。设计作品荣获红点、iF、Ars Electronica等国际设计大奖,并受邀参加中国设计大展、迪拜国际设计周、威尼斯国际艺术双年展等国内外展览。

报告题目:自然启发下的材料智能与交互

报告摘要:

在人工智能快速发展的背景下,如何构建更加高效、低能耗且具有物理真实感的感知与交互系统,已成为人机交互领域的重要研究方向。不同于依赖复杂电子系统与主动驱动的工程路径,自然界中的生物体往往通过材料与结构本身实现对环境的高灵敏感知与响应,体现出一种内嵌于物质之中的“材料智能”。本报告以自然启发为切入点,探讨材料与结构驱动的感知与交互机制,并进一步提出基于材料智能的人机交互研究视角,为构建更加自然、连续且可扩展的人机交互方式提供新的思路。

王琦

王琦

嘉宾3

同济大学

简介:

王琦,同济大学设计创意学院博士生导师、副教授,交互设计方向负责人、院长协理,中国工程前沿杰出青年学者,上海扬帆青年英才,中国计算机学会人机交互专委会执行委员。研究方向包括人机交互、可穿戴系统、智慧健康等,在跨学科领域的国际高水平期刊和会议发表论文40 余篇,包括人机交互领域顶会CHI、IMWUT、UIST 以及康复医学领域权威期刊 JNER等,累计被引数 1800。主持国家自然科学基金、重点研发计划子课题等项目。研究成果也作为前沿设计案例参加迪拜设计周、荷兰设计周等国际展览。

报告题目:面向康复体验提升的多模态交互设计

报告摘要:

康复成效不仅取决于治疗方案,也与患者在训练中的感受、动机和持续参与密切相关。本报告围绕“面向康复体验提升的多模态交互设计”,分享团队在运动功能康复、神经康复与身心健康干预中的系列探索:介绍数据驱动的织物传感器布局设计及其在肩关节运动监测中的应用;面向脑卒中患者,展示增强现实镜像训练与融合言语、手部功能的混合现实双任务康复;结合癌症术后人群的双人呼吸生物反馈系统,探讨沉浸环境中的社会协同与情感支持。报告将结合临床合作与验证,讨论多模态交互提升康复体验的设计机会

卞玉龙

卞玉龙

嘉宾4

山东大学

简介:

卞玉龙,山东大学低空科学与工程学院副研究员,扩展现实与智能交互实验室负责人,山东大学未来学者。主要研究方向为智能人机交互、生理计算、智能心理评估等。承担国家自然科学基金项目1项,国家重点研发计划项目1项,省部级项目4项,在ACM CHI、UIST、IJHCS、TVCG、Ubicomp、JBHI、IEEE TAFFC等计算机CCF A类会议或中科院一区TOP期刊上发表论文四十余篇,参与编写著作 2 部,获省部级科技奖励 4 项,多项成果成功落地。

报告题目:虚实融合环境下的感知和认知沉浸增强技术

报告摘要:

虚实融合环境中的人工制品成分、感官呈现模态和人机交互技术日益丰富,用户沉浸感的提升不仅在与感官体验的直接增强,更在于人工制品、用户认知和技能、以及任务要求等多方面因素之间的高度耦合,而期背后的一些关键问题往往被忽略。本次报告将从认知耦合的视角,剖析虚实融合环境中的若干感知和认知脱节问题,分享团队在虚实融合环境中感知和认知沉浸增强技术方面的一些探索,并讨论这些工作如何提升未来虚实融合环境设计。

王宇阳

王宇阳

嘉宾5

香港科技大学(广州)

简介:

王宇阳,现任香港科技大学(广州)助理教授、博士生导师,兼任 CCF 虚拟现实专委会执行委员及中国图学学会网络图形学专委会委员。此前在校开展博士后研究工作,系统深化了沉浸式环境下认知人机交互机理的探索,相关成果已在远程协作与沉浸式教育课堂等场景中落地应用。博士毕业于法国巴黎高科国立高等工艺学院,并曾赴德国卡尔斯鲁厄理工学院国家工业 4.0 实验室访学,具备深厚的国际化科研视野与工业落地经验。长期致力于沉浸式交互中基于多模态的 VR 晕动症的机理建模、因果分析及闭环干预研究,同时利用生成式智能算法解决沉浸式人机交互中的感官冲突问题。目前作为负责人带领沉浸人机智能实验室,主持纵横向课题 10 余项,发表学术论文约 50 篇,核心成果多发表于 IEEE TVCG、IJHCS、IEEE VR、ACM MM 等顶级期刊与会议,持续推进前沿 XR 技术的产研结合与场景转化。个人主页: https://yywangvr.github.io/

报告题目:虚拟空间漫游中的光流智能干预与体验重塑

报告摘要:

在空间计算领域,打造舒适且兼顾个体差异的个性化用户体验,是当前人机交互领域亟待解决的核心技术瓶颈。由于VR晕动症具有极强的个体易感性差异,传统的“一刀切”式设计难以为继。本报告首先将系统性地梳理个性化虚拟现实的研究数据与演进策略,探讨沉浸式系统如何从早期的机械式自适应,进化为当下以人为本的智能交互范式。为了应对这些挑战,本报告将介绍两种用于缓解晕动症的实用技术解决方案。其一,面向广阔的消费级应用,提出一种基于多模态对齐的实时预测框架。该框架仅依赖纯视觉信息即可完成状态推理,彻底摆脱了传统方案对侵入性生理传感器的依赖;其二,提出一种基于光流感知的实时视频流扩散恢复算法,通过定量增强画面的时空相干性,主动纠正导致感官冲突的误导性光流,在完美兼顾视觉画质的同时,实现了晕动症的显著缓解,为下一代、无眩晕的虚拟现实(VR)应用走向规模化落地提供了可行路径。

田阳

田阳

嘉宾6

广西大学

简介:

田阳,广西大学副教授,广西大学虚拟现实实验创新中心负责人。入选广西八桂青年拔尖人才,获2025年ACM SIGCHI China新星奖。2020年于香港中文大学获博士学位。研究方向为空间界面交互,在TVCG、CHI、Ubicomp等CCF-A类期刊/会议发表论文十余篇。主持国家级项目1项、省部级项目3项。现任CCF人机交互专委会、计算机辅助设计与图形学专委会及ACM SIGCHI China执行委员,并担任HMCC&HHME 2025 & 2026宣传主席。个人主页: https://prof.gxu.edu.cn/teacherDetails/cd72227c-5b61-4bbf-8a58-c661e4db41e6

报告题目:空间界面交互中的可及性问题

报告摘要:

近年来,扩展现实(XR)眼镜的重量与成本显著下降,XR技术的普及进程不断加快。然而,当前XR用户界面仍普遍存在位姿感知不准、触觉反馈缺失、过度依赖手臂操作等可及性问题,严重制约了其在实际场景中的可用性与可接受性。针对上述问题,本报告将介绍一套覆盖感知、反馈与操作的系统性交互增强方案:针对位姿感知不准,利用物理平面的空间恒常性与人体本体感知的内在一致性,实现XR界面的高精度定位与全场景适配;针对触觉反馈缺失,通过虚拟几何体接触时的物理合规形变,在视动一致前提下诱发动觉错觉,有效规避传统伪触觉精度差与易致晕的缺陷;针对手臂过度依赖,转而利用头部、躯干与步态等非手部运动通道,在坐姿、行走及上肢残障等场景下实现无需手臂参与的界面交互,从根本上消除疲劳与操作障碍。

← 返回主题论坛总览