扇情的な鏡 / Incendiary reflection

Three-fold mirror


Do all of your emotions really come from inside ?
Incendiary reflection aims to create computer-generated emotion by letting people recognize pseudo-generated facial expressions as changes to their own facial expressions. This artwork influences your emotional state by reflecting your facial expression as a slightly different one. Although you are not changing your facial expression, your face in the mirror looks like happy or sad. What someone sees in the mirror is her/himself. However, if one could see his/her face smiling in the mirror, then one unconsciously recognize the changing in mirror as one's actual body changing, one might also become happier.

Incendiary reflection consists of a camera, and a display. The camera is used to capture and track a user's face. This system gives feedback of a deformed facial expression by using a mirror-like display. We developed a method for deforming a user’s face and transforming a user’s facial expression in real time, using an image-processing technique [Schaefer et al. 2006]. Using this method, we easily and naturally deformed the appearance of a user’s face. We generated two facial expressions—Smiley Face” and Sad Face”—which represent the positive-negative affect dimension. Furthermore, we conducted a user study to evaluate the effectiveness of deformed facial feedback. Our results showed that this type of feedback could change emotional states; not only positive affect and negative affect but also preference decision [Yoshida et al. 2013]. This suggested that we could artificially manipulate emotional states.


Planning and Development: Shigeo Yoshida

Planning Support: Hiroshi Ishiguro, Michitaka Hirose, Takuji Narumi and Sho Sakurai

Development Support: Toki Katsumura, Yuki Ban and Naoto Nakazato

Support: IPA Exploratory IT Human Resources Project (The MITOH Program)

Publications & Awards

吉田成朗、鳴海拓志、櫻井翔、谷川智洋、廣瀬通孝:リアルタイムな表情変形フィードバックによる感情体験の操作、ヒューマンインタフェース学会論文誌、Vol.17 No.1、2015年2月https://doi.org/10.11184/his.17.1_15 ヒューマンインタフェース学会論文賞

Good Design Award, 2013年10月1日 [link]

Innovative Technologies, 2013年9月10日 [link]

Shigeo Yoshida, Sho Sakurai, Takuji Narumi, Tomohiro Tanikawa, and Michitaka Hirose. 2013. Incendiary reflection: evoking emotion through deformed facial feedback. In ACM SIGGRAPH 2013 Emerging Technologies (SIGGRAPH ’13). Association for Computing Machinery, New York, NY, USA, Article 8, 1. https://doi.org/10.1145/2503368.2503376 (ACM Author-Izer)

Shigeo Yoshida, Sho Sakurai, Takuji Narumi, Tomohiro Tanikawa, and Michitaka Hirose. 2013. Incendiary reflection: evoking emotion through deformed facial feedback. In ACM SIGGRAPH 2013 Talks (SIGGRAPH ’13). Association for Computing Machinery, New York, NY, USA, Article 35, 1. https://doi.org/10.1145/2504459.2504503 (ACM Author-Izer)

IPA(独立行政法人 情報処理推進機構) 未踏 2012年度採択プロジェクト スーパークリエータ認定, 2013年4月30日 [link] [link]

Shigeo Yoshida, Tomohiro Tanikawa, Sho Sakurai, Michitaka Hirose, and Takuji Narumi. 2013. Manipulation of an emotional experience by real-time deformed facial feedback. In Proceedings of the 4th Augmented Human International Conference (AH ’13). Association for Computing Machinery, New York, NY, USA, 35–42. https://doi.org/10.1145/2459236.2459243 (ACM Author-Izer)


Incendiary reflection, Ars Electronica 2015, Linz, Sep. 3-7, 2015. [link]

Incendiary reflection, MOST CONTAGIOUS 2014 in London, Dec 10, 2014. [link]

扇情的な鏡, Media Ambition Tokyo 2014, 六本木ヒルズ, 2014年2月7日-3月30日 [link]

扇情的な鏡, ナレッジキャピタル The Lab., 2013年11月8日- [link]

扇情的な鏡, GOOD DESIGN EXHIBITION 2013, 東京ミッドタウン, 2013年10月30日-11月4日[link]

扇情的な鏡, デジタルコンテンツ EXPO2013, 日本科学未来館, 2013年10月24日-10月26日[link]

Incendiary reflection: evoking emotion through deformed facial feedback, SIGGRAPH 2013 Emerging Technologies, Jul 21-25, 2013. [link]

扇情的な鏡, バーチャル世界体験 夏祭り, ナレッジキャピタル The Lab. みんなで世界一研究所, 2013年7月14日-7月15日 [link(pdf)]

扇情的な鏡, 東京大学制作展 extra 2013, 東京大学, 2013年7月5日-7月8日 [link]

表情フィードバックを利用した感情喚起システムの開発, 第19回未踏IT人材発掘・育成事業 スーパークリエータ認定証授与式, ホテルサンルートプラザ新宿, 2013年5月29日 [link]

扇情的な鏡:表情変形フィードバックを利用した感情喚起システム, URCF定期総会, 日本科学未来館, 2013年5月27日

表情フィードバックを利用した感情喚起システムの開発, 第19回未踏事業 成果報告会, 秋葉原 UDX GALLERY NEXT-1, 2013年1月26日-1月27日 [link]

心映し, 第14回東京大学制作展, 東京大学, 2012年12月6日-12月10日 [link]

Media Coverage


脳を操るだましの術 バーチャルリアリティーの可能性(扇情的な鏡,拡張満腹感,Magic Pot),朝日新聞朝刊 23面,2013年7月29日 [link]


REUTERS,  'Incendiary reflection' mirror turns a frown upside down , 12/17/2013

DigInfo TV,  Incendiary reflection mirror arouses emotions by subtly varying facial expressions , 2013年12月3日

GIZMODE,  扇情的な鏡 , 2013年11月14日

DigInfo TV (Japanese),  表情を微妙に変化させて、感情を喚起するシステム「扇情的な鏡」 , 2013年11月8日

産経アプリスタ,  泣いているのは私…?見る人の感情を操るフシギな鏡 , 2013年11月5日

the psychologist,  The happy mirror , 9/25/2013

Humintell,  Fake Smile, Real Emotions , 9/14/2013

7SUR7,  Le miroir qui rend heureux et pousse à consommer , 8/12/2013

daily geek show,  Boudez tant que vous voulez, ce miroir vous tirera de la dépression en illuminant votre visage , 8/11/2013

International Society for Presence Research,  Incendiary Reflection: Tech changes facial expression in your mirror, changes your emotions and preferences , 8/8/2013

Slate,  Fake Mirrors May Soon Ensnare Shoppers in Web of Lies , 8/7/2013

Co.EXIST | ideas + impact,  A Portrait Of Your Face As A Happier Person , 8/6/2013

4Gamer.net,  [SIGGRAPH]次世代のディスプレイ技術が垣間見えた,先端技術展示会場「Emerging Technologies」レポート(前編) , 2013年8月5日

Trend Hunter,  Mood-Altering Mirrors , 7/30/2013

PSFK,  Mirror Manipulates Reflections to Display Different Emotions , 7/29/2013

NewScientist,  Fake smile in a mirror makes you buy what you try on , 7/24/2013

TurboSquid 3D Blog,  Day One of Siggraph 2013 with TurboSquid , 7/23/2013