VR/AR and Imitation Learning Team

Extended reality interfaces for intuitive robot control and human-robot collaboration

VR/AR・模倣学習チーム

直感的なロボット制御と人間とロボットの協働のための拡張現実インターフェース

← Back to Teams
← チームに戻る
VR/AR and Imitation Learning Team

Overview

The VR/AR and Imitation Learning Team develops cutting-edge extended reality (XR) solutions that bridge the gap between humans and robotic systems. Through immersive interfaces, we enable intuitive robot teleoperation, training, and collaboration in both virtual and mixed reality environments, transforming how humans interact with and control intelligent machines.

Research Focus

Our research encompasses virtual reality (VR) for robot teleoperation, augmented reality (AR) for real-time robot status visualization, mixed reality training environments, haptic feedback systems, and immersive simulation platforms. We focus on creating seamless XR experiences that enhance situational awareness, reduce cognitive load, and enable natural, intuitive control of complex robotic systems.

🥽

VR Teleoperation

Immersive interfaces for intuitive remote robot control

👓

AR Visualization

Real-time overlay of robot data and environmental information

🎮

Haptic Feedback

Touch-based interfaces for enhanced robot interaction

🌐

Digital Twins

Virtual replicas for simulation, training, and testing

Team Members

Haoran Xie

Haoran Xie

Associate Professor

JAIST

Dr. Haoran Xie received his Ph.D. in Computer Graphics from JAIST in 2015, and M.S. in 2012. He is currently an Associate Professor at JAIST and a Researcher (Associate Professor) at Waseda University through JST BOOST program. He directs the Human-Centered AI Laboratory, focusing on generative AI applications and human-AI interaction.

His research encompasses 2D/3D image generation, physical intelligence, and human-AI interaction, with notable achievements including the AniFaceDrawing project featured across major international outlets. He is a member of ACM, IEEE, IPSJ, and the Society for Art and Science.

Syuhei Sato

Syuhei Sato

Associate Professor

Hosei University

Chao Zhang

Chao Zhang

Specially Appointed Professor

University of Toyama

Ran Dong

Ran Dong

Lecturer

Chukyo University

Tsukasa Fukusato

Tsukasa Fukusato

Lecturer

Waseda University

Bofei Huang

Bofei Huang

PhD Student

JAIST

Hao Jin

Hao Jin

PhD Student

JAIST

Mikiya Kusunoki

Mikiya Kusunoki

PhD Student

JAIST

Xiaoxuan Xie

Xiaoxuan Xie

PhD Student

JAIST

Xusheng Du

Xusheng Du

PhD Student

JAIST

← Back to Teams

概要

VR/AR・没入型技術チームは、人間とロボットシステムの間のギャップを埋める最先端の拡張現実(XR)ソリューションを開発しています。没入型インターフェースを通じて、仮想現実と複合現実環境の両方で、直感的なロボット遠隔操作、トレーニング、協働を可能にし、人間がインテリジェントマシンと相互作用し制御する方法を変革しています。

研究重点

私たちの研究は、ロボット遠隔操作のための仮想現実(VR)、リアルタイムロボットステータス可視化のための拡張現実(AR)、複合現実トレーニング環境、ハプティックフィードバックシステム、没入型シミュレーションプラットフォームを網羅しています。状況認識を向上させ、認知負荷を軽減し、複雑なロボットシステムの自然で直感的な制御を可能にするシームレスなXR体験の創造に焦点を当てています。

🥽

VR遠隔操作

直感的な遠隔ロボット制御のための没入型インターフェース

👓

AR可視化

ロボットデータと環境情報のリアルタイムオーバーレイ

🎮

ハプティックフィードバック

強化されたロボット相互作用のためのタッチベースインターフェース

🌐

デジタルツイン

シミュレーション、トレーニング、テストのための仮想レプリカ

チームメンバー

Haoran Xie

Haoran Xie

准教授

JAIST

Haoran Xie博士は、2015年にJAISTでコンピュータグラフィックスの博士号を取得し、2012年に修士号を取得しました。現在、JAISTの准教授およびJST BOOSTプログラムを通じて早稲田大学の研究員(准教授)を務めています。人間中心AIラボを指揮し、生成AIアプリケーションと人間とAIの相互作用に焦点を当てています。

研究分野は、2D/3D画像生成、物理的知能、人間とAIの相互作用を網羅し、主要な国際メディアで紹介されたAniFaceDrawingプロジェクトなど、顕著な業績を上げています。ACM、IEEE、IPSJ、芸術科学会の会員です。

Syuhei Sato

Syuhei Sato

准教授

法政大学

Chao Zhang

Chao Zhang

特命教授

富山大学

Ran Dong

Ran Dong

講師

中京大学

Tsukasa Fukusato

Tsukasa Fukusato

講師

早稲田大学

Bofei Huang

Bofei Huang

博士課程学生

JAIST

Hao Jin

Hao Jin

博士課程学生

JAIST

Mikiya Kusunoki

Mikiya Kusunoki

博士課程学生

JAIST

Xiaoxuan Xie

Xiaoxuan Xie

博士課程学生

JAIST

Xusheng Du

Xusheng Du

博士課程学生

JAIST

← チームに戻る