Transcript 「あくび検出」を利用した インタラクティブ・メディアアート作品『Yawn』の制作

「あくび検出」を利用した
インタラクティブ・メディアアート作品『Yawn』の制作
Interactive Media Art Work “Yawn ” using "The Yawn Detection"
九州大学 芸術工学部 芸術情報設計学科 富松研究室
1DS04185K 高田将平
まずはこちらをご覧ください
制作動機
• あくびの無意識下で自然にうつる現象は、人間同士の間に限らず、ディ
スプレイを介する過程においても起こりえるということを、実体験してもら
いたいと考え、制作に至った。
• あくびは誰でも一度はしたことがあるという点から、共感を得ることができ
るのではないかと考えた。
実演風景
顔認識
• 様々な技術背景の中で、いかにして顔認識を行うのかが問題となった。
自身の当初からのメディアアートを制作したいという思いより、メディア
アートのコミュニティのために作られた「プログラミング言語と環境」である
「Processing（プロセッシング）」というオープンソースソフトウェアを使用す
ることに決めた。
•
あくび検出は、JMyronという外部ライブラリを使用して行った。
あくび検出
• 作品閲覧の際に、顔が一定の楕円内に収まるようにあらかじめ状況設定
をし、その楕円内に赤いオブジェクトがある一定の大きさで、二つ以上検
出され、かつ二点間の距離が離れているという条件のときに、あくびと判
定するように設定した。
•
一連の流れの中で、単純に口を開けただけのときと、あくびのときとの区
別がつかないという問題点があったが、MovieMakerクラスを使用して保
存されるフレームを３0フレーム以上のときのみ、あくびと判定するように
差別化することで解決した。
まとめ
• 顔認識の技術は本来、口の動作だけではなく、口や目の周りのカーブや
皺などの形や方向がそれぞれ違うという特徴をもとに判断しているため、
あくびの動作を単純に口の動作だけで判断するのは難しい。
• 本研究では、ユーザーとメディアとのインタラクティブな関係を作る部分に
焦点を当て制作した。
• あくびは、あくび映像を見たからといって必ずしも伝染するものではない
ということを考慮していなかった点で課題も残った。
• 実演を通して、「普段自分があくびをしている顔なんて見たことがなかっ
たから面白い。」「こんなにしわくちゃになるんだなぁ。」という感想を聞くこ
とができ、無意識を形にするというテーマに沿う作品が出来たと思う。