王以俨

王以俨

博士生 | 眼动交互研究者
东南大学 PhD Student | Eye Tracking Researcher
Southeast University

南京

东南大学

Connect

Sitemap

A list of all the posts and pages found on the site. For you robots out there is an XML version available for digesting as well.

Pages

王以俨

东南大学机械工程博士生，研究眼动交互与 AR/VR。Gaze interaction and AR/VR research at Southeast University.

Posts

portfolio

可编程人工眼台架

固件与仿真原型代码暂未公开

为眼动设备研发提供可编程测试对象，减少调试时对真人眼部运动的依赖。机构基于 Will Cogley 的 EyeMech 项目扩展。

主要功能

  • 控制眼球水平、垂直转动与眼睑动作，切换不同调试模式。
  • 通过固件、仿真和网页控制界面检查控制链路与状态。
  • 面向后续可编程轨迹与重复测试流程预留扩展。

我的贡献

  • 结合眼动设备测试需求设计台架路线、控制方案与硬件选型。
  • 在既有机构基础上开发控制固件、状态反馈、仿真与网页调试工具。

当前进展

  • 已有控制固件与仿真原型，并建立网页控制界面。
  • 实物集成、可重复性评估和外部反馈测量仍需推进。
  • 现阶段定位为工程调试原型；舵机指令角不作为眼球角度真值。

返回研究系统与原型

眼动校准方法复现

复现 8 种已发表眼动校准监督方案及 1 个变体，附合成数据示例、测试与实现偏差说明。

Re-implementations of eight published gaze-calibration supervision schemes and one variant, with synthetic examples, tests, and documented deviations.

头戴式眼动追踪系统

算法与系统研发代码暂未公开

构建可调整的眼动研究平台，连接硬件、视觉算法与数据分析流程，为后续交互研究提供基础。

主要功能

  • 采集近红外眼部图像，支撑瞳孔检测与追踪算法开发。
  • 组织模型训练、推理、误差分析与结果可视化流程。
  • 开展注视校准及数据采集工具的开发与集成。

我的贡献

  • 负责硬件与算法研发，将采集需求转化为实验和系统实现。
  • 构建瞳孔检测基线、训练评估脚本与结果分析工具。

当前进展

  • 已积累训练、推理与评估脚本，以及多轮算法可视化和失败案例分析。
  • 持续改进不同成像条件下的检测稳定性，并推进采集与校准流程集成。
  • 目前为研发中的研究系统，尚不作为完成性能验证的通用眼动产品。

返回研究系统与原型

04:30 · 雨夜铁馆

Published:

凌晨 4:30，雨还在下，铁馆里刚有人练完离开。整个场景在浏览器里实时渲染：没有一张贴图来自下载，没有一段声音来自音频文件。

Tobii 眼动接入与校准工作台

基于 Aetherall/tobiifree 的个人扩展，围绕眼动设备接入、校准质量检查和误差校正构建研究工具。上游提供设备协议与基础接入能力；本项目重点展示以下扩展。

A personal extension of Aetherall/tobiifree, focused on device access, calibration validation, and error correction for gaze research. The upstream project provides the protocol and base connectivity; the contributions below extend that foundation.

自然语言驱动的眼控界面生成

交互原型迭代代码暂未公开

探索如何把眼控交互知识转化为可组合的界面组件，服务于交互演示、教学和原型试用。

关联专利

眼控交互范式生成方法、系统、交互设备及存储介质

状态
已受理 · 待公开
申请号
202611594821.1
申请日
2026-10-15
本人位次
第二发明人
申请人
东南大学

主要功能

  • 自然语言生成界面，选择并配置眼控交互方式。
  • 接入眼动设备数据，也支持鼠标模拟与轨迹回放。
  • 记录交互过程，辅助调试、试用反馈和后续分析。

我的贡献

  • 设计眼控交互组件、参数表达及界面生成流程。
  • 实现原型界面、输入接入、轨迹录制与回放工具。

当前进展

  • 已建立界面生成原型、交互示例及会话记录模块。
  • 当前继续改进组件表达、生成界面质量和眼控使用体验。
  • 教学部署与系统性用户评估仍属于后续工作。
  • 相关发明专利申请于 2026 年 10 月获受理，当前待公开。

返回研究系统与原型

zotero-canvas-batch

批量梳理论文的研究背景、方法、实验与结论，生成可视化知识图谱；点击内容可跳转到原文对应页面。

Organizes papers into visual knowledge maps of background, methods, experiments, and findings, with links to the relevant source pages.

publications

Survey Design in Supporting of Product Design and Development: A Case Study

这篇论文研究了调查设计在投资者早期识别适当市场机会以及推动产品设计与开发（PD&D）过程中的重要作用。通过介绍产品设计与开发的流程和调查方法学，该研究以一个案例研究项目为例，旨在开发用于检测风力发电机叶片缺陷的非破坏性测试机器人。研究设计了一项调查问卷，并由中国农业大学工学院34名大二本科生在暑期社会调查项目中进行了调查，调查范围覆盖了中国南北部12个省份的28个风电场。研究结果表明，高质量的调查设计对产品设计与开发过程中的商业计划的早期阶段具有显著支持作用。

Recommended citation: Yin, C., Wang, Y., & Wang, H. (2019). Survey Design in Supporting of Product Design and Development: A Case Study. In _2019 ASABE Annual International Meeting_ (p. 1). American Society of Agricultural and Biological Engineers. http://george-wyy.github.io/files/paper1.pdf

整杆式甘蔗打捆收获机

Recommended citation: 柳沙, 鞠雨欣, 李钰冰, 龙杨, 王以俨, 杨凤, 彭文博. (2019). 整杆式甘蔗打捆收获机. 中国实用新型专利, 申请号 CN201920095424.9, 授权公告号 CN209861624U, 公告日 2019-12-31. 申请人：中国农业大学.

立式芦苇笋剥笋装置

Recommended citation: 柳沙, 龙杨, 李钰冰, 鞠雨欣, 薄佳乐, 杨凤, 王以俨. (2020). 立式芦苇笋剥笋装置. 中国发明专利, 申请号 CN201811180636.3, 授权公告号 CN109222129B, 授权公告日 2020-07-14. 申请人：中国农业大学.

基于Python的工程信息交互仿真软件

Recommended citation: Yin, C., Wang, Y. (2020). Python-Based Engineering Information Communication Simulation Software (Version 1.0) [Computer software]. Beijing, China Agricultural University.

一种自动化芦苇笋剥笋装置

Recommended citation: 柳沙, 王以俨, 李琳, 李鸿盛, 谭宇. (2021). 一种自动化芦苇笋剥笋装置. 中国实用新型专利, 申请号 CN202021067017.6, 授权公告号 CN212520711U, 公告日 2021-02-12. 申请人：中国农业大学.

Enhancement Characteristics of Visual Stimulus Elements in SSVEP-BCI System

该论文研究了SSVEP-BCI系统在脑机接口领域的应用。该系统具有少量记录电极、短训练时间和强大的抗干扰能力等优点。然而，该系统的缺点是识别效率较低，并且刺激界面容易引起用户的视觉疲劳。因此，本文针对SSVEP-BCI界面中刺激元素的优化进行了研究，探讨了在相同刺激区域下不同数量辅助刺激颗粒对系统识别效率和用户体验的影响。进行了相关的人体工效学实验和主观评价。人体工效学实验结果表明，辅助刺激颗粒的数量对系统识别效率有显著影响，当辅助刺激颗粒数量趋近于无穷大时，识别效率最高。主观评价结果显示，辅助刺激颗粒数量的变化对系统界面可用性指标得分有显著影响，数量无限时得分较高。从设计人体工效学的角度出发，本研究探讨了辅助刺激颗粒数量对脑机接口系统效率和用户满意度的影响，研究结论对优化和规范脑机接口设计具有重要的指导意义。

Recommended citation: Li, Z., Zhou, Z., Wang, Y., Tian, J., Yang, W., Niu, Y. (2023). Enhancement Characteristics of Visual Stimulus Elements in SSVEP-BCI System. In: Tareq Ahram, Waldemar Karwowski, Pepetto Di Bucchianico, Redha Taiar, Luca Casarotto and Pietro Costa (eds) Intelligent Human Systems Integration (IHSI 2023): Integrating People and Intelligent Systems. AHFE (2023) International Conference. AHFE Open Access, vol 69. AHFE International, USA. http://doi.org/10.54941/ahfe1002921 https://doi.org/10.54941/ahfe1002921

眼动密码输入方法、系统及设备

Recommended citation: 田景泽, 牛亚峰, 王以俨, 何家新, 黄炜驰, 杨文骏. (2023). 眼动密码输入方法、系统及设备. 中国发明专利, 申请号 CN202310365466.0, 公开号 CN116755544A, 公开日 2023-09-15. 申请人：东南大学、中国航空工业集团公司西安飞行自动控制研究所.

The Effectiveness of Audible Alarm Types and Presentation Rates on Pilot Performance in Beyond Visual Range Combat Scenarios

Recommended citation: Wu, M.-L., Li, Y.-N., Wang, Y.-Y., Tian, J.-Z., Yang, W.-J., & Niu, Y.-F. (2023). The effectiveness of audible alarm types and presentation rates on pilot performance in beyond visual range combat scenarios. In 2023 IEEE International Conference on Systems, Man, and Cybernetics (SMC) (pp. 433–438). https://doi.org/10.1109/SMC53992.2023.10393950 https://www.researchgate.net/publication/377208142_The_Effectiveness_of_Audible_Alarm_Types_and_Presentation_Rates_on_Pilot_Performance_in_Beyond_Visual_Range_Combat_Scenarios

The Effects of Spatially-Informed Alarm Types and Presentation Rates on Pilot Performance

Recommended citation: Zhu, K., Li, Y.-N., Wang, Y.-Y., Tian, J.-Z., Huang, J.-W., Yang, W.-J., & Niu, Y.-F. (2023). The effects of spatially-informed alarm types and presentation rates on pilot performance. In 2023 29th International Conference on Mechatronics and Machine Vision in Practice (M2VIP) (pp. 1–5). https://doi.org/10.1109/M2VIP58386.2023.10413403 https://www.researchgate.net/publication/377208258_The_Effects_of_Spatially-Informed_Alarm_Types_and_Presentation_Rates_on_Pilot_Performance

Research on the Effect of Visual Warming Information Presentation on Attention in Fighter Tracking Task

Recommended citation: Zhu, J.-X., Qu, M.-Y., Tian, J.-Z., Wang, Y.-Y., Huang, J.-W., Yang, W.-J., & Niu, Y.-F. (2023). Research on the effect of visual warming information presentation on attention in fighter tracking task. In 2023 IEEE International Conference on Industrial Engineering and Engineering Management (IEEM) (pp. 1174–1178). https://doi.org/10.1109/IEEM58616.2023.10406506 https://www.researchgate.net/publication/377208259_Research_on_the_Effect_of_Visual_Warming_Information_Presentation_on_Attention_in_Fighter_Tracking_Task

Design recommendations of target size and tracking speed under circular and square trajectories for smooth pursuit with Euclidean algorithm in eye-control system

Recommended citation: Wang, Y.-Y., Cheng, W., Tian, J.-Z., Huang, W.-C., Niu, Y.-F., Yang, W.-J., & Xue, C.-Q. (2024). Design recommendations of target size and tracking speed under circular and square trajectories for smooth pursuit with Euclidean algorithm in eye-control system. Displays, 81, 102608. https://doi.org/10.1016/j.displa.2023.102608 https://doi.org/10.1016/j.displa.2023.102608

Research on a spatial-temporal characterisation of blink-triggered eye control interactions

该研究关注眨眼触发眼控交互中的时空特征，通过工效学实验分析不同参数对任务表现与用户体验的影响。

Recommended citation: Wang, Y.-Y., Tian, J.-Z., Xiao, L., He, J.-X., & Niu, Y.-F. (2024). Research on a spatial–temporal characterisation of blink-triggered eye control interactions. Advanced Engineering Informatics, 59, 102297. https://doi.org/10.1016/j.aei.2023.102297 https://doi.org/10.1016/j.aei.2023.102297

Research on click enhancement strategy of hand-eye dual-channel human-computer interaction system: Trade-off between sensing area and area cursor

该研究探索手眼双通道眼动交互系统中的点击增强策略，以提升复杂任务中的交互稳定性和效率。

Recommended citation: Niu, Y.-F., Chen, R., Wang, Y.-Y., Yao, X.-Y., & Feng, Y. (2024). Research on click enhancement strategy of hand-eye dual-channel human-computer interaction system: Trade-off between sensing area and area cursor. Advanced Engineering Informatics, 62, 102880. https://doi.org/10.1016/j.aei.2024.102880 https://doi.org/10.1016/j.aei.2024.102880

The design and experimental study of eye-hand integrated dual-channel interaction strategies

该研究设计并实验验证了眼手融合的双通道交互策略。

Recommended citation: Chen, H.-B., Huang, W.-C., Wang, Y.-Y., Liu, J., & Niu, Y.-F. (2024). The design and experimental study of eye-hand integrated dual-channel interaction strategies. In 2024 IEEE International Conference on Industrial Engineering and Engineering Management (IEEM) (pp. 623–627). https://doi.org/10.1109/IEEM62345.2024.10857126 https://doi.org/10.1109/IEEM62345.2024.10857126

Does increasing takeover time budget improve driver takeover performance in different hazard visibility scenarios?

该研究考察在不同危险可见性场景下，延长接管时间预算是否能改善驾驶员的接管绩效。

Recommended citation: Li, M.-J., Huang, W.-C., Wang, Y.-Y., Han, Z.-J., & Niu, Y.-F. (2024). Does increasing takeover time budget improve driver takeover performance in different hazard visibility scenarios? In 2024 IEEE International Conference on Industrial Engineering and Engineering Management (IEEM) (pp. 1049–1053). https://doi.org/10.1109/IEEM62345.2024.10857099 https://doi.org/10.1109/IEEM62345.2024.10857099

基于设计工效学的眼控交互范式设计研究现状与进展

该综述系统梳理了基于设计工效学视角的眼控交互范式设计研究现状与发展趋势。

Recommended citation: 牛亚峰, 王以俨*, 黄炜驰, 范林涵. (2025). 基于设计工效学的眼控交互范式设计研究现状与进展. 包装工程, 46(4), 20-35.（北大核心、AMI 收录；*为通信作者）

Enhancing gaze interaction performance: Design and optimization of perspective-driven fisheye view

该研究提出透视驱动的鱼眼视图设计与优化方法，以提升凝视交互在复杂界面中的选择效率与准确率。

Recommended citation: Huang, W.-C., Wang, Y.-Y., Fan, L.-H., Yang, S.-T., & Niu, Y.-F. (2025). Enhancing gaze interaction performance: Design and optimization of perspective-driven fisheye view. Advanced Engineering Informatics, 65, 103365. https://doi.org/10.1016/j.aei.2025.103365 https://doi.org/10.1016/j.aei.2025.103365

Study on the effectiveness of auditory alert information processing in fighter jet tracking tasks

该研究考察战斗机跟踪任务中听觉告警信息的处理效能。

Recommended citation: Cai, J.-L., Wu, M.-L., Wang, Y.-Y., & Niu, Y.-F. (2025). Study on the effectiveness of auditory alert information processing in fighter jet tracking tasks. In 2025 17th International Conference on Intelligent Human-Machine Systems and Cybernetics (IHMSC) (pp. 114–117). https://doi.org/10.1109/IHMSC66529.2025.00032 https://doi.org/10.1109/IHMSC66529.2025.00032

An Ergonomic Study on Long-Press Performance of Foot Pedals in Human-Machine Interaction Applications

该研究以工效学方法考察人机交互中脚踏板长按操作的绩效表现。

Recommended citation: Zhang, H.-Y., Yang, S.-T., Wang, Y.-Y., & Niu, Y.-F. (2025). An ergonomic study on long-press performance of foot pedals in human-machine interaction applications. In 2025 17th International Conference on Intelligent Human-Machine Systems and Cybernetics (IHMSC) (pp. 88–91). https://doi.org/10.1109/IHMSC66529.2025.00026 https://doi.org/10.1109/IHMSC66529.2025.00026

The Impact of Hand Controller Design Parameters on Operational Performance

该研究考察手控器设计参数对操作绩效的影响。（注：第一作者 Yanyan Wang 与本人 Yiyan Wang 为不同作者）

Recommended citation: Wang, Yanyan, Feng, Yun, Wang, Yiyan, & Niu, Yafeng. (2025). The impact of hand controller design parameters on operational performance. In 2025 17th International Conference on Intelligent Human-Machine Systems and Cybernetics (IHMSC). https://doi.org/10.1109/IHMSC66529.2025.00037 https://doi.org/10.1109/IHMSC66529.2025.00037

Efficacy of Visual Alarm Information Processing in Fighter Tracking Tasks: Effects of Alarm Quantity and Time Pressure

该研究考察告警数量与时间压力对战斗机跟踪任务中视觉告警信息处理效能的影响。

Recommended citation: Lv, J.-S., Wu, M.-L., Wang, Y.-Y., & Niu, Y.-F. (2025). Efficacy of visual alarm information processing in fighter tracking tasks: Effects of alarm quantity and time pressure. In 2025 17th International Conference on Intelligent Human-Machine Systems and Cybernetics (IHMSC). https://doi.org/10.1109/IHMSC66529.2025.00034 https://doi.org/10.1109/IHMSC66529.2025.00034

Visual perception and user experience optimization: Exploring interaction design through static-triggered smooth pursuit systems

该研究探索静态触发平滑追踪系统的交互设计，从视知觉与用户体验角度提出优化策略。

Recommended citation: Niu, Y.-F., Feng, Y., Li, X., Huang, W.-C., Wang, Y.-Y., & Fan, L.-H. (2025). Visual perception and user experience optimization: Exploring interaction design through static-triggered smooth pursuit systems. Displays, 90, 103121. https://doi.org/10.1016/j.displa.2025.103121 https://doi.org/10.1016/j.displa.2025.103121

《眼控交互范式设计》（专著，参编第一章）

“智能人机交互前沿技术丛书”之一，科学出版社出版，全书约 30 万字。本人主笔第一章“绪论”（约 3 万字），系统建立眼控交互的知识体系。

Recommended citation: 牛亚峰. (2025). 眼控交互范式设计. 北京：科学出版社. ISBN 978-7-03-083699-1.（“智能人机交互前沿技术丛书”，全书约 30 万字；王以俨主笔第一章“绪论”，约 3 万字，并参与全书技术统稿）

基于误差反向引导的眼动交互方法及交互系统

Recommended citation: 牛亚峰, 黄炜驰, 王以俨, 范林涵, 王铸涛. (2026). 基于误差反向引导的眼动交互方法及交互系统. 中国发明专利, 申请号 CN202511546035.X, 公开号 CN121349306A, 公开日 2026-01-16. 申请人：东南大学.

一种基于DMA的多通道超声换能器相控阵驱动方法

Recommended citation: 牛亚峰, 范林涵, 黄炜驰, 王以俨, 王铸涛, 何花. (2026). 一种基于DMA的多通道超声换能器相控阵驱动方法. 中国发明专利, 申请号 CN202610009022.7, 公开号 CN121763911A, 公开日 2026-03-31. 申请人：东南大学.

基于触觉运动幻觉的跨模态感知确认交互方法及系统

Recommended citation: 牛亚峰, 王以俨, 张鸿阳, 黄炜驰, 范林涵, 王铸涛. (2026). 基于触觉运动幻觉的跨模态感知确认交互方法及系统. 中国发明专利, 申请号 CN202610695594.5, 公开号 CN122526419A, 公开日 2026-08-07. 申请人：东南大学.

Take-A-Look: Enabling intuitive distant target interactions in industrial virtual reality applications via natural gestures

该研究提出 Take-A-Look 自然手势交互方法，解决工业虚拟现实场景中远距离目标的选择与操作问题。

Recommended citation: Huang, W.-C., Song, Z.-H., Wang, Y.-Y., Fan, L.-H., & Niu, Y.-F. (2026). Take-A-Look: Enabling intuitive distant target interactions in industrial virtual reality applications via natural gestures. Computers in Industry, 181, 104545. https://doi.org/10.1016/j.compind.2026.104545 https://doi.org/10.1016/j.compind.2026.104545

Exploring coordination in Gaze-Hand cascaded Interaction: Designing robust solutions for Low-Precision eye tracking

该研究探索眼-手级联交互中的协调机制，面向低精度眼动追踪设计鲁棒的交互方案。

Recommended citation: Tian, J.-Z., Wang, Y.-Y., Wu, J.-C., Liu, C., & Niu, Y.-F. (2026). Exploring coordination in Gaze-Hand cascaded Interaction: Designing robust solutions for Low-Precision eye tracking. Advanced Engineering Informatics, 74, 104766. https://doi.org/10.1016/j.aei.2026.104766 https://doi.org/10.1016/j.aei.2026.104766

眼控交互范式生成方法、系统、交互设备及存储介质

中国发明专利申请，已受理、待公开；关联自然语言驱动的眼控界面生成项目。

Recommended citation: 牛亚峰, 王以俨, 黄炜驰, 范林涵, 王铸涛, 杨紫馨. (2026). 眼控交互范式生成方法、系统、交互设备及存储介质. 中国发明专利申请, 申请号 202611594821.1, 申请日 2026-10-15, 已受理、待公开. 申请人：东南大学.

talks

templates

RP 空白骨架

下面是可直接复制或下载的 RP 空白骨架。把【】里的内容替换成你的信息即可。配套的方法论见 RP 写作指南。

Below is a copy-ready and downloadable RP blank skeleton. Replace the bracketed placeholders with your own content. The companion methodology guide is at Research Proposal Guide.

RP 写作指南

这份指南整理自研究计划（Research Proposal, RP）的写作经验，用于帮助刚开始做研究的同学把想法整理成一份可讨论、可执行的 RP。配套的空白骨架见 RP 空白骨架。

This guide distills practical experience in writing research proposals (RP). It helps students turn a rough idea into a discussable and executable proposal. The companion blank skeleton is available at RP Blank Template.