Akihiko SHIRAI, Ph.D
Creator and Researcher of Entertainment VR and UXDev in Metaverse
AKIHIKO SHIRAI, Ph.D. (Engineering), is a researcher in metaverse and entertainment virtual reality. He is currently the director of the GREE VR Studio Laboratory at REALITY, Inc. and the Digital Hollywood University Graduate School.
He studied photo engineering and image processing. Developed “Fantastic Phantom Slipper”, using dynamic phantom sensation with vibro-tactile, as his first masterpiece in 1997. Until 2001, he worked for Canon and Criterion as a game development consultant to market RenderWare, a multi-platform graphics middleware for the game industry. He returned to academia and received his PhD from the Tokyo Institute of Technology in Japan in 2004 with research on the “Tangible Playroom”, an entertainment system for young children using haptics, a floor screen and a real-time physics engine. He was an R&D researcher at NHK-ES in Japan, focusing on the next-generation TV production environment, before moving to ENSAM Presence & Innovation Laboratory in France from 2004 to 2007 to work on R&D for a virtual reality theme park development project with some significant research projects. Rapid computer vision on GPU “GPUVision”, robotic game player “RoboGamer” and “WiiMedia” projects were accepted by ACM SIGGRAPH and IEEE VR.
He worked for National Museum of Emerging Science and Innovation (Miraikan), Tokyo, Japan, as a science communicator and exhibition planner from 2008 to 2010. He worked in Information Media, Kanagawa Institute of Technology (KAIT) as an associate professor from 2010 to 2018. Simultaneous multiplex image systems “Scritter”, “ExPixel” and “ExField”, manga immersive system “Manga Generator”, nursery VR entertainment “Real Baby - Real Family” have been awarded by ministry, academia and game industry. Since 2018, he has been a visiting professor at Digital Hollywood University Graduate School. In June 2018, he returned to the entertainment industry again as a research director to launch “GREE VR Studio Laboratory” in REALITY, Inc..A family of GREE, Inc. that promotes a new XR metaverse industry. Conducting research to improve vTuber (Virtual YouTuber, Virtual Persona, Virtual Artist) and exploring XR live entertainment. Contributing to the development of new user experiences in XR entertainment and solutions such as “VibeShare”, a suite of virtual live enchanting technologies for sharing non-verbal interaction in XR live entertainment.
In REALITY, Inc, representative of the metaverse industry in Japan, he produces some visualisations of near-future user experiences using REALITY.app in UXDev projects on YouTube, and contributes to some PoC for B2B metaverse using Mozilla Hubs with Japanese translation and community developments. Visiting professor at the Digital Hollywood University Graduate School. Vice President of the Society for Art and Science. Ambassador and board member of Laval Virtual. Latest book written “Collaborating with AI to become a Godhand Illustrator - How to comprehend Stable Diffusion”. His motto is “Creating people who create” (from his written book in The Future of Game Design - Science in Entertainment Systems).
Research
Works
GREE VR Studio Laboratory (2018-)
- VR Game Products
- Laboratory
- YouTube Channel
- 「転生こえうらない」Voice Fortune Teller
- VibeShare
- Let’s go travel around the world virtually
- REALITY
- UXDev Project
- “Metaverse Christmas”
- “Back to Metaver-School” - a blooming future of Metaverse in REALITY
GitHub Calendar
KAIT Shirai Lab (2010-2018)
Legacy Projects
Lecture
Lecuture and Talks (part)
2022
- 「メタバース時代の人間の界面:アバター技術とUXの探求~REALITY と GREE VR Studio LaboratoryのR&D活動紹介」, 画像電子学会 Advanced Image Seminar 2022, (2022/6/14) Web
Past Talks
- “REALITY: We can be whoever we want - Avatar driven metaverse service and UX R&D #SIGGRAPHAsia2021”, SIGGRAPH ASIA 2021 CG In Japan, 2021/Dec/14
- “Since VR Entertainment, dawn of XR Metaverse - Development and Deployment for next generation of human being”, ICAT-EGVE 2021 Keynote, 2021/Sep/08
- “What is happening in Japanese CG research and industry now? WFLE: Beyond VTuber to Live Entertainment”, SIGGRAPH 2020 IRC
- Virtual Beings World “New Play Together”, SIGGRAPH 2020 BoF
- Game.Impulse, University of Applied Sciences Bonn-Rhein-Sieg, 2021/6/9 Web
- “Research and Development for Avatar-Driven Virtual Society in VR4.0 Era” #EMTECH #DesiredIdentities Published on June 27,2020
Slide portal
Digital Hollywood University
Misc
- “WFLE: Beyond VTuber to Live Entertainment”, What is happening in Japanese CG research and industry now?, In SIGGRAPH 2020 Birds of a Feather, 2020/Aug/25, Announce
- Mozilla Hubs が拓く新世代 WebVR のススメ #HubsScrum Published on May 13, 2020
- 聚逸虚拟现实工作室总监 白井晓彦:研究创新是为了更好地娱乐 DIC2019 10 月 22 日 23 日, China.
- SIGGRAPH Asia 日本語完全ガイド~初めての参加者ために SIGGRAPH ASIA 2018 Tokyo (2018 年 12 月 4 日)
- WiiRemote Programming Workshop - 革新的インタラクションを構成する“部品としての”ゲームコントローラー, JAIST, 2009/11/20
- Virtual Realty for Entertainment - 文化・言語背景を 文化・言語背景を超えた環境における国際的エンタテイメントシステムデザイン JAIST, 2006/11
- ゲーム開発業の未来を支える産学連携-日本式 Ludology 事始- IGDA 日本 ゲームテクノロジー研究会 第 1 回 研究会(2004 年 1 月 10 日)(Detail in SlideShare)
IVRC community events
Articles
- 卒論が 1 ミリも進まない 4 年生におくる,卒論サンプル
- コンピューターゲームの興奮度定量化(1)主観評価を使用したゲームジャンルの分類
- “おもしろい研究”への挑戦 - Challenges for “Omoshiroi” research
- 【博士論文】「床面提示型触覚エンタテイメントシステムの提案と開発 白井暁彦」
- フランスを研究 -rechercher la france-
Books
Online Publications
- 「これまでの 5 年、これからの 5 年――「VR 元年」の終焉から世界同時参加の XR ライブエンタメへ」(メディア芸術カレントコンテンツ:文化庁)2020 年 10 月 29 日 https://mediag.bunka.go.jp/article/article-16853/
技術書典
- 白井暁彦他,「AIとコラボして人気絵師になる」,グリー技術書典部誌 2022 年秋号,Web
-
白井暁彦他,「Mozilla Hubs を用いたオンラインイベント WebVR 化テクニック」,グリー技術書典部誌 2020 年秋号, Web
- 白井暁彦他,「Virtual Cast と Hapbeat を使った国際双方向アバター触覚ライブの開発」,グリー技術書典部誌 2020 年春号, Web
Academic Papers
2021
-
白井暁彦, 中野友介, 堀部貴紀, ボイスチェンジャーサービスの研究開発を通したインターンによる次世代人材育成(Developing next-generation creators through research and development in voice changer services), デジタルハリウッド大学 研究紀要第 8 号, (2021/11/25), PDF, SlideShare
-
山崎勇祐(REALITY 株式会社/東京工業大学大学院), 白井暁彦「VibeShare::Performer — Emoji・触覚・音効によるオンライン音楽ライブの双方向化」, 第 26 回日本バーチャルリアリティ学会大会 (2021/9/21). Web PDF
-
堀部貴紀(REALITY/明治大),橋本順之(グリー),白井暁彦(REALITY),森勢将雅(明治大), 「FFT ライブラリを対象とした実時間 Vocoder の速度比較」, 日本音響学会 2021 年秋季研究発表会(2021/9/7)
-
Yusuke Yamazaki, Akihiko SHIRAI, “Pseudo Real-Time Live Event: Virtualization for Nonverbal Live Entertainment and Sharing”, Laval Virtual 2021 ConVRgence, 2021/7/7. Web Abstract Poster
-
堀部貴紀(REALITY/明治大),白井暁彦(REALITY),森勢将雅(明治大),「『転声こえうらない』を通したボイスチェンジャー品質改善のための定性分析と考察」, 日本音響学会 2021 年春季研究発表会, Web, Slides, SlideShare (2021/3/11)
-
山崎勇祐, 白井暁彦, 「VibeShare:Vote ~オンラインでの出演者と観客の非言語コミュニケーションの実現~」, 映像表現・芸術科学フォーラム 2021(Expressive Japan 2021), Abstract, Slides, SlideShare (2021/3/8)
2020
-
白井暁彦, 「賛助会員紹介 グリー株式会社/ REALITY 株式会社 GREE VR Studio Laboratory」, 日本バーチャルリアリティ学会誌第 25 巻 4 号 (2020/12/31) Web
-
白井 暁彦, ブレディキーナ リュドミラ, 坂口 塔也, 栢之間 諒汰, 堀部 貴紀, 山崎 勇祐, 中村 清人, 「Mozilla Hubs を用いたオンラインイベントの WebVR 化」, DHU JOURNAL, Vol.07, 電子版)(Nov 2020)
-
Liudmila Bredikhina, Toya Sakaguchi, Akihiko Shirai, “Web3D Live Distance Workshop for Children in Mozilla Hubs”, Web3D ’20: The 25th International Conference on 3D Web Technology, 9th, November 2020, Article No. 27, Pages 1–2. Web Best Poster Awards 2nd Prize
-
坂口塔也, 山崎勇祐, Bredikhina Liudmila, 白井暁彦, 「交流型 WebVR における空間音響のオンライン評価手法」, 第 25 回日本バーチャルリアリティ学会大会論文集, 2020-9-16 PDF
-
堀部 貴紀, 石原 達馬, 白井 暁彦, 森勢 将雅; 『転声こえうらない』利用者の基本周波数分析, 情報処理学会研究報告, 2020-05-30 Web SlideShare Awarded
2019
-
VR4.0 -リアルタイムバーチャルキャラクターが牽引する VR 産業における基盤研究 DHU JOURNAL Vol.06 (2019/11/29)
-
Yusuke Yamazaki, Hironori Mitake, Akihiko Shirai, Shoichi Hasegawa, “Widespread Hapbeat: Tension Based Necklace Type Haptic Display”, Proceedings of the International Display Workshops Volume 26 (IDW ‘19), 2019/11/27, DOI PDF
-
Akihiko Shirai, “REALITY: broadcast your virtual beings from everywhere”, In ACM SIGGRAPH 2019 Appy Hour (SIGGRAPH ’19). Association for Computing Machinery, New York, NY, USA, Article 5, 1–2. DOI
-
Yusuke Yamazaki, Shoichi Hasegawa, Hironori Mitake, and Akihiko Shirai. 2019. “Neck strap haptics: an algorithm for non-visible VR information using haptic perception on the neck”, In ACM SIGGRAPH 2019 Posters (SIGGRAPH ’19). Association for Computing Machinery, New York, NY, USA, Article 60, 1–2. DOI
-
Rex Hsieh, Akihiko Shirai, and Hisashi Sato. 2019. “Effectiveness of facial animated avatar and voice transformer in elearning programming course”, In ACM SIGGRAPH 2019 Posters (SIGGRAPH ’19). Association for Computing Machinery, New York, NY, USA, Article 82, 1–2. DOI
-
Rex Hsieh, Akihiko Shirai, Hisashi Sato, “Evaluation of Avatar and Voice Transform in Programming E-Learning Lectures”, In Proceedings of the 19th ACM International Conference on Intelligent Virtual Agents (IVA ’19). Association for Computing Machinery, New York, NY, USA, 197–199. DOI
-
舘暲, 岩田洋夫, 安藤英由樹, 小泉直也, 中村拓人, 吉元俊輔, 白井暁彦, 長谷川晶一, IVRC2019(第 27 回 国際学生対抗バーチャルリアリティコンテスト)開催報告, 日本バーチャルリアリティ学会誌, 2019, 24 巻, 4 号, p. 39-43, 公開日 2021/04/08 Web
Before 2018
Refer my paper indexed in Research Gate…
- Rex Hsieh, Marika Higashida, Yuya Mochizuki, Takaya Asano, Akihiko Shirai, Hisashi Sato, “MasQueRade: Onsite QR Code based VR Experience Evaluation System using Sanitary Mask”, Conference Paper, the Virtual Reality International Conference - Laval Virtual (April 2018)
- Akihiko Shirai, Rex Hsieh, Yuya Mochizuki, Takaya Asano, Marika Higashida, “Real Baby - Real Family”- Multi-Sensory Feedback Tangible Baby VR, International Journal of Virtual Reality (November 2017)
- Rex Hsieh, Yuya Mochizuki, Takaya Asano, Marika Higashida, Akihiko Shirai, “Real baby - real family”: VR entertainment baby interaction system, ACM SIGGRAPH 2017 Emerging Technologies (July 2017)
- “Real Baby - Real Family: Holdable tangible baby VR”, the Virtual Reality International Conference - Laval Virtual 2017 (March 2017)
- 白井 暁彦, 佐藤 勝, 草原 真知子, 久米 祐一郎,「足インターフェイスによる複合現実感アミューズメントシステム : ファンタスティックファントムスリッパ (Mixed Reality Amusement System with Foot Interface : Fantastic Phantom Slipper)」, 日本バーチャルリアリティ学会論文誌, 4 巻 4 号 p. 691-697, 1999 年. https://doi.org/10.18974/tvrsj.4.4_691, PDF
- Yuichiro Kume, Akihiko Shirai, Motoshisa Tsuda, Toyohiko Hatada, “Information Transmission through Soles by Vibro-tactile Stimulation” (October 1998)
CEDEC History (GDC in Japan)
CEDEC2000
「RenderWare3」と「RenderVision」による次世代ゲーム開発の高速化 http://cedec.cesa.or.jp/2000/detail_categori.html
CEDEC2012
3D ディスプレイと互換の多重化・隠蔽映像技術「Scritter」が拓く 3D コンテンツの未来 https://cedec.cesa.or.jp/2012/program/INT/C12_P0205.html インタラクティブセッション会場投票賞 1 位受賞 https://cedec.cesa.or.jp/2012/program/INT/result.html
CEDEC2013
姿勢評価によるリアルタイム感情推定を特徴とする動的マンガ生成システム「Manga Generator」 http://cedec.cesa.or.jp/2013/program/GD/7225.html https://cedil.cesa.or.jp/cedil_sessions/view/1083
CEDEC2014
ゲームの次元を拡張する次世代多重化映像技術「ExPixel」 https://cedec.cesa.or.jp/2014/session/AC/5423.html インタラクティブセッション 3 位受賞 https://cedec.cesa.or.jp/2014/session/INT/result.html
CEDEC2016
多重化多視点 VR アーケードゲームシステム -DUAL DUEL- https://cedec.cesa.or.jp/2016/session/AC/8656.html 「インタラクティブセッション オーディエンス賞 2 位受賞 https://cedec.cesa.or.jp/2016/session/INT/result.html
CEDEC2017
家族愛をテーマにした子育て VR エンタテイメント ”Real Baby - Real Family” http://cedec.cesa.or.jp/2017/session/AC/s58e0597c6eab2/ https://cedil.cesa.or.jp/cedil_sessions/view/1758
次世代 VR/AR エンタテイメントのための多重化映像生成ミドルウェア https://cedil.cesa.or.jp/cedil_sessions/view/1607 https://www.slideshare.net/aquihiko/cedec2017-vrar
CEDEC2019
REALITY「なりたい自分で、生きていく」リアルタイムライブで VTuber が活躍する舞台を作る現場の 1 年 https://cedec.cesa.or.jp/2019/session/detail/s5c9df84045dd1 https://www.wantedly.com/companies/reality/post_articles/184950
「宇宙 x 教育 xVR =ちゃんと学べる体感サイエンスツアー「ありえな LAB」の挑戦 [https://cedec.cesa.or.jp/2019/session/detail/s5c9c660d3c16c.html] [https://www.slideshare.net/harukasakami/xxvr-lab]
CEDEC2021
白井暁彦,山崎勇祐「VibeShare: コロナ禍の音楽ライブを「触覚」で双方向化する」, (Blog)
Archived Projects in Github pages
Contact
Blog
- aki’s left brain
- aki’s right brain
- 王様の耳はロバの耳
- Future Entertainment Laboratory
- Github pages Since 19th Dec 2013