<松田ゼミ-17 前へ>

報告者: 植田智恵美(松田ゼミ)

卒業研究として行った「ARを用いた「見て操作する」システムの試作と評価」を、3月15日、早稲田大学で開催された第80回情報処理学会全国大会で発表し、学生奨励賞を頂きましたので報告します。受賞理由は以下です。

  • 家電機器を操作する研究は今後重要である。
  • 実装から評価までをしっかり行っている。
    15210993921760gazeAward

論文はこちらをクリックしてください。

1.情報処理学会に関して

情報処理全般にわたる分野の調査・研究を目的とした学会で、全国大会は情報処理学会が年1回(春季)開催する学会最大のイベントです。大会では最新の学術・技術動向や情報に関する新しい研究成果やアイディア発表を通し意見交換・交流が行われます。

gazePresen

2.発表内容

今日、電化製品を含む様々な機器がIoT化されつつありますが、機器の操作方法は機能・設置場所に応じ様々です。例えば、天井の蛍光灯の照明はスイッチが操作対象(照明)と離れた場所にあり、どのスイッチがどの照明を制御するか分かりにくい、また、操作対象にスイッチがついている電気スタンドなどでは、手の届く範囲にない場合、スイッチを消しに行く必要があります。

このような不便さを解決する方法として、リモコンがありますが、リモコンは置いた場所を忘れたり、複数個使用していた場合は、電化製品ごとにリモコンを判断して使い分けるという使用上の負荷が生じます。今後、ARの発達に伴いHoloLensのようなカメラ付きのシースルー型の眼鏡の普及が予想される中、本研究では、これまで提案してきた「見て操作する」方式を、ARを用いて開発したシステムを使用して実験を行い、評価しました。

gazeAndControl

本システムは、Processingで開発し、AR用ライブラリとしてNyAR4psgを使用、電化製品の操作にはArduinoに赤外線LEDを搭載して用いました。本システムを起動し、電化製品に付けたマーカを認識するとタブレットの画面にカメラに映った電化製品とその操作ボタンが表示され、それをタッチすることで機器のON・OFF操作ができます。様々な機能の付いた機器では、各機能に対応するコントロールを表示し、制御する機能を持ちます。

gazeSystem

本システムの評価は、20名の本学の学生を対象に、本システムと複数のリモコン、学習リモコンを用い3つの照明器具を制御する実験を行いました。実験では、それぞれの試行における操作時間を計測し、最後に使い易さや操作に関するアンケートを行いました。

実験の結果、3つの器具の操作にかかった平均時間は、本システム(15.2秒)が最も短く、次いでリモコン(16.5秒)、学習リモコン(71.65秒)となりました。

gazeResult1

この結果から、本システムとリモコン、本システムと学習リモコンの操作時間に関してt検定を行ったところ、本システムとリモコンとでは有意差は認められませんでしたが、学習リモコンとでは有意差が認められました。一方、本システムとリモコンとでは有意差が認められなかった原因は、今回の実験ではリモコンを手元に並べた状態でON・OFF操作だけを行ったためと考えられ、様々な種類のリモコンが散在していたり、他の機能を操作する実環境では差が出るものと考えられます。

また、アンケートの結果から、3つの操作方法(本システム、複数のリモコン、学習リモコン)の中で本システムが最も使い易かったと80%が感じており、ユーザー体験としては良好なものであることが分かりました。

gazeResult2

以上より、「見て操作する」方式を使用した本システムは、他の方法と比べ最も早く操作出来た人が多く、アンケートからも被験者に受け入れられる可能性が高いということが分かりました。今後の予定としては、本実験では簡易評価のため視覚的なマーカと赤外線による機器操作を用いましたが、マーカは、赤外線マーカなど目に見えないものに変更、機器の操作もIoT化を前提にネットワーク経由で行えるようにすることなどがあげられます。また、ネットワーク上に機器の状態管理サーバを置くことで、複数の人が同一機器を操作したしたときに機器の状態をUIに反映することが可能となります。

gazeStateServer
3.
発表に関して

全国大会当日は、午前の部で発表を行いました。初めての学会発表で、私が参加したセッションの中でもトップバッターだったということもあり、とても緊張しましたが、無事に発表を終えることができました。発表後3人の方から質問、コメントをいただきました。

  • 複数の電化製品のマーカが画面の中にあった場合はどうなるのか?
  • 最終的にはHoloLensのようなHMDで研究をするのか?HoloLensにはこのような研究を行うのに適したライブラリがある。
  • 被験者は学習リモコンを使ったことがあるのか?無い場合は、練習はしたのか?
  • Sonyが出しているタッチパネル型の学習リモコンで評価するとよい

等の質問以外にも、新たなアイディアや知識も得ることができ、とても充実した15分間となりました。

4.終わりに

3年次の後期から本研究を始め、システムの制作で思い通りにいかないこともありましたが、ご指導をいただきました松田晃一教授、非常勤講師の永田雅人先生、実験やアンケートに協力して下さった松田ゼミのメンバーをはじめ多くの方々の協力によって、今回の発表を成功させることができました。発表後、他の大学の方々から面白い研究だったというお言葉をいただき、評価していただけたことを非常に嬉しく思います。また、他の大学の方の研究も聞くことができ、視野を広げることができました。このような素晴らしい経験をさせていただきありがとうございました。この経験は今後の生活の中でも活かしていきたいと思います。

LINEで送る
Share on Facebook

<松田ゼミ-16 前へ>

報告者: 平野愛里(松田ゼミ)

卒業研究として行った「 ヒューマノイド型ロボット“Pepper”を用いた学習支援システムの 試作と評価 」を、3月13日に早稲田大学で開催され第80回情報処理学会全国大会で発表してきましたので報告します。論文はここをクリックしてください。

1.情報処理学会に関して

情報処理全般にわたる分野の調査・研究を目的とした学会で、全国大会は情報処理学会が年1回(春季)開催する学会最大のイベントです。大会では最新の学術・技術動向や情報に関する新しい研究成果やアイディア発表を通し意見交換・交流が行われます。

pepperPresen

2.発表内容

近年のヒューマノイド型ロボットの性能は人工知能の発達に伴い著しく向上し、近い将来、このようなロボットが家庭内に家事以外にも勉強を支援するようになると考えられます。従来の勉強法には暗記やリビング学習、スマホ勉強法などがありますが、これらは基本的に、進捗を管理したり、解答の正否が分かるだけのものが多く、単調な学習の繰り返しになりやすかったり、飽きやすく継続しにくいという問題があります。本研究では、学習を褒めるという行為に注目し、家庭内にヒューマノイド型ロボットが居る環境での学習支援に関し、Pepperを用いて開発した学習支援システムを用いた実験・評価をしました。

pepperSystem

本システム開発は、ChoregrapheでPepperのアプリケーションとして開発し、テストと採点システムの開発はHTML5とJavaScriptで行いました。

システムを起動すると、Pepperが挨拶と説明を発話し、テストを胸タブレットに表示します。ユーザは胸部タブレットに表示された問題を解き、解答作業が終了すると結果を表示、Pepperが得点に応じて三次元的な「褒める」動作を行い、応援メッセージを発話します。動作と応援メッセージは得点ごとに異なります。

pepperTabletpepperMotion

本システムの評価は、24名の大学生を対象に12名ずつ2グループに分けてテスト問題を解く実験を行いました。グループAは紙の問題用紙と本システムでPepper、グループBはタブレット端末上のテストシステムとPepperで解いてもらいました。タブレット端末にはPepperで動いているテストシステムと同じものが動いており、音声で褒めるだけな点が異なります。テストは2017年のITパスポートから10問を選び被験者ごとに異なるものを使用しました。どちらのグループもテストの解答から答え合わせまでの時間の計測を行い、テスト終了後、被験者にアンケート(4項目)を実施しました。

テストの解答時間の平均は、タブレットと本システムとでは差があまりなく、紙テストは1分ほど長く、これは答え合わせの時間と考えられます。

pepperResult1

学習の継続性本システムと紙のテストでは75%が本システムの方が継続できそう、本システムとタブレット端末では、88%が本システムの方が継続できそうと回答しました。これは、Pepperが発話を交えて褒める動作が学習者に影響したためと考えられます。

pepperResult2

学習の達成感本システムと紙テストでは、58%が本システム、本システムとタブレット端末では、83%が本システムの方が達成感を感じていたことが分かりました。本システムと紙との差が大きくないのは、従来の解答を紙に書き込むという作業に伴う達成感に起因するものと考えられます。

pepperResult3

問題の解きやすさ本システムと紙テストでは67%が本システムの方が解きやすいと感じ、本システムとタブレット端末では問題の解きやすさは同じでした。これは、紙との比較では、本システムの解答作業がPepperのタブレットをタップするだけで済む簡易さに起因するものと考えられます。

pepperResult4

褒められた感テスト後の声掛けで褒められたと感じたのは70%の人がタブレット端末よりも本システムと回答しました。音声だけのタブレット端末に比べ、人型をしたPepperの褒める動作が、学習者により褒められているという印象を与えたものと考えられます。

pepperResult5

また、自由記述欄からは、「Pepperが出来によって声をかけてくれるので継続しても飽きないと感じた」、「Pepperの動作が人間のように感じ、人に見られている気がして集中できるような気がした」などの意見が得られ、Pepperの身体性が影響していることが分かりました。

3. 発表に関して

全国大会当日は、大会初日の午前の部で発表を行いました。当日までの練習の甲斐あって、とても緊張したものの練習通りに発表することができました。発表後には3人の方から質問、コメントをいただきました。

  • Pepperの行動を分岐させるのは点数で行っているのか?
  • タブレットで動いているシステムはPepperのとどこが異なるのか?
  • 実験には、男子も入れた実験をやってみるとよい。高齢者でやっても面白いかもしれない

4.終わりに

発表では想定していなかった質問もあり、緊張しましたが、何とか回答して無事に発表を終えることが出来ました。今回の学会発表では、他の学生の発表を聞けたり、研究を褒めていただいたり、自分にとってとても良い経験になりました。今回の経験を、これからに生かしていきたいと思います。

LINEで送る
Share on Facebook

<松田ゼミ-15 前へ>

報告者: 狩野麗羅(松田ゼミ)

卒業研究として行った「心拍の可視化システムの試作とコミュニケーションに与える影響の評価—図形、光、振動を用いて」を3月13日に早稲田大学で開催され第80回情報処理学会全国大会で発表してきましたので報告します。論文はここをクリックしてください。

1.情報処理学会に関して

情報処理全般にわたる分野の調査・研究を目的とした学会で、全国大会は情報処理学会が年1回(春季)開催する学会最大のイベントです。大会では最新の学術・技術動向や情報に関する新しい研究成果やアイディア発表を通し意見交換・交流が行われます。

heartPresen

2.発表内容

今日行われている遠隔コミュニケーションは、電話以外にも、SNS、チャット、LINE等を用いたものなど多彩になってきています。また、インターネットの発達により様々な情報を伝えられるようになってきていますが、これらのツールが伝える情報は音声や文字、画像などが主であり、それ以外の対話者の情報はプロフィールや写真等の静的な情報が多いままです。一方で、対話者そのものの動的な情報を伝える遠隔コミュニケーション方法にTV電話がありますが、これは必要以上に情報を伝え過ぎる点で上記のツールに比べて普及していません。

本研究では簡易に対話者の動的な情報を伝える手段として対話者の心拍に注目しました。心拍は人の精神や体の状態がよく現われ、心拍数は気分と関係することが分かっています。本稿では、遠隔コミュニケーションに心拍を、図形のアニメーション、光、振動の3方法で可視化するシステムを導入・評価しました。

heartSys

本システムの評価方法は20名の女子大学生を対象に行いました。2 名 1 組で、部屋A、部屋Bに分かれ行い、電話を用い会話内容は指定せずに5分間会話、実験中に会話が心拍と連動していると感じた際にマウスのクリックをお願いしました。最後にアンケートを行いました。

実験の結果、心拍の可視化方法として、分かりやすかった可視化方法は、振動65%、アニメーション30%、光5%となりました。この結果から視覚情報だけでなく振動を聴覚でも感じる事が出来たため振動が一番となったことが分かりました。

result1

アニメ・光・振動の3つの可視化方法として、どれがコミュニケーションに影響したかの問いに関しては、アニメ、振動が80%と同数となり光が55%となりました。この結果から、アニメ、振動が同じなのは、可視化表示が話題の盛り上がりと連動していると感じられたためという事が分かりました。

result2

心拍と連動したと感じたクリック回数の総数では、振動>光>アニメの順となりました。振動や光の方がアニメーションよりも会話と連動している印象を与え易いことが分かり。

result3

理由として、振動や光の方がアニメーションよりも会話を妨げずに情報を取得し易いと考えられます。

本システムを体験し、コミュニケーションに違いが出たかの問いに対して、違いが出たと感じた、少し感じたのは100%となりました。結果から、可視化表示を利用し、積極的にコミュニケーションをとることが分かりました。

result4

また、自由記述欄からは、「日常生活で会話しているときには相手の心拍は分からないので、それらが可視化されて見ることができ、とても面白かった」、「話の流れによって心拍の変動を見ることが出来て楽しかった」、「話し相手の心拍が可視化されることによって相手の状況が読めるのは単純に面白いと感じた」などの意見が得られ、本体験が「楽しい・面白い」ものと感じていたことが分かりました。

3.発表に関して

全国大会当日は、午後の部で発表を行いました。とても緊張しましたが、当日までに何度も練習を行ってきたので何とか練習通りに発表することができました。発表後3人の方から質問、コメントをいただきました。

  • 人によっては心拍を相手に伝えることを不快に感じるのではないか?
  • 円による可視化は直感的なのか?グラフの方が直感的では?
  • 振動モーターを使ってどのよう遠隔コミュニケーションを考えているのか?

想定していた質問もありましたが、緊張してしまいうまく答えることができず、もっと自分の研究に対して何でも答えられるようにしないといけないということを実感しました。

4.終わりに

3年の秋ごろから研究を本格化し、システムの制作や実験で大変な時期もありましたが無事に発表を終えることができました。発表後、他大の教授から面白い研究だったと仰っていただき、自分の研究を他の学生などに知ってもらうとても良い経験をさせていただきました。この経験を社会でも活かしていきたいと思います。

 

 

 

 

LINEで送る
Share on Facebook

上映直前s
上映に先立ち制作意図などを説明する学生たち

 

2017年12月16日(土)に東京ビッグサイトで行われた「有明・冬フェス2017 東京国際プロジェクションマッピングアワードvol.2」。昨年に引き続き堤ゼミではゼミ活動の一環として3年生11人のチーム「アントルメ」が作品を応募。第1次選考(予選)を通過して、同アワードに唯一の女子大学チームとして出場しました。このアワードには全11チームが参加し、6,300人を超す来場者を得て大いに盛り上がりました!

「Come on ―四季の世界―」と題した作品は、季節感に富む家紋のデザインを日本の四季の情景に溶け込ませるというコンセプトで、休日返上でおよそ4カ月間かけて制作しました。日本の家紋には草花や器物などのモノ、そして生活や自然に関係があるコトなどが図案化されていて、形状や配置に関していくつかの共通特徴があります。また、ときに立体的であったりだまし絵のようであったりもします。この古のデザイナーたちが家紋にあらわした意図をくみつつ、変化に富んだ日本の四季の情景を表現できたらと考えました。色や動きでエンターテイメント性を持たせ、見ている人に分かりやすい作品を目指しました。

授業で学んできた3DCGや映像編集などのスキルを駆使しましたが、最終映像の計算に、時には実習室のPC72台を一気に使って何時間も計算することもありました。

シーンをチームで議論する
シーンをチームで議論する

レンダリング風景1s
実習室のPCすべてを使って最終映像の計算

 

start_s
①家紋の砂時計が動き始める

アイソメs
②アイソメ的だまし絵と家紋

家紋とびちり_s
③はじける和柄の家紋

唐草2s
④伸び始める蔦(春への序章)

春s
⑤春の息吹

梅鶴s
⑥梅とウグイス

夏1s
⑦初夏の光のフレア

夏2s
⑧夕暮れのまわり燈篭と花火

秋1_2s
⑨散りゆく紅葉

秋2s
⑩月とウサギとススキ

冬s
⑪降りしきる雪

last_s
⑫フィナーレ

 

上映後の懇親会で、作品の講評を審査員の方がたに伺いました。皆さんに家紋と四季という企画テーマは良かったと言っていただけました。ただ、作品に軸あるいはストーリーがなかった、盛り上げに欠けたという意見もいただきました。学生作品では、もともと技術は期待されていなく、企画力やアイデアや表現力が大切であるとも伺いました。今回も制作前にアイデアを練る時間が少なかったことは確かで、また、デザイン力なども含め学ばなければならないことは多々あると実感しました。

なお、TBSの情報番組からは事前および当日取材を受け、12月17日に放送されたTBSテレビの情報番組「『日曜Nスタ』Sunトピ」の中で、“季節感と家紋をテーマに、これをあわせる仕掛けが随所に見られた作品”として取り上げていただきました。

インタビューs
当日取材を受けるゼミ生たち

 

ともあれ、経験したからこそ得られた様々な気づきや教えを今後に生かすべく卒業研究に向かってほしいものです。長期間にわたってご苦労様でした。

最後に参加した学生の感想を記します。

パソコンの画面で動画を観るのと東京ビッグサイトの大きな壁に投影された動画を観るのとでは見え方が大きく異なる、ということを自分達で制作した動画を通じて知ることができてよかったです。(N.N.)

知識も技術もほぼゼロからのスタートで不安もありましたがメンバー達と制作している時間はそれ以上に楽しいものでした。当日、投影された自分達の作品を見て心から参加してよかったと思える良い経験になりました。(M.I.)

日々、より良い作品になっていくのを肌で感じ、お互い意見を言いながらも満足のいくものができました。なによりもチームのみんなと協力し、本気で取り組めたことは、大学生活の中で良い経験となりました。(A.M.)

今回、参加して感じたことは、チームの大切さでした。このプロジェクトには多くの技術が必要とされているのにもかかわらず最後まで乗り切ることができたのは、一重に役割を分担して協力したチームのおかげでした。(M.I.)

私にとって今回の出場は大きな挑戦でした。最初は何も分からず苦労も多々ありましたが、チームで一つの作品を作り上げる楽しさを知りました。この経験を今後就職活動や社会人生活に活かしていけたらと思います。(A.K.)

夏頃から一生懸命作ってきた作品が東京ビッグサイトという大きな建物に投影されたのが単純にとても嬉しかった。何度も何度も繰り返し見てきたはずの映像がその日はとても綺麗でかっこよく見えた。(N.T.)

去年の夏ごろからゼミのみんなで力を合わせて作ったプロジェクションマッピングが、東京ビックサイトに映し出された時は、本当に感動しました。大変なこともあるけれどやってよかったと思いました。(S.T.)

何もわからない状態で始まった制作でしたが、お互いに支え合いながら全員で一つのものを作るという大変ながらやりがいのある作業でした。ビッグサイトに映し出される自分たちの作品を見たときはとても感動しました。(H.M.)

プロジェクションマッピングの作成にあたって、知識もあまりないまま始めましたが周りの助けを借りながら作り上げることができました。作り上げた瞬間の達成感はもちろん、上映会で投影された時の感動は、言葉に表せないほどのもので、みんなで一つのものを作り上げるということは、私の中で大きな経験となりました。(M.N.)

TPMAは堤ゼミに入る前から参加したくて、参加すると決まったときはとても嬉しったです。実際に取り掛かってみるととても大変でしたが、東京ビックサイトの壁面に投影されたときに得た達成感は計り知れなかったです。(M.S.)

様々な苦労もありましたが、終わった後は今までにないほどの達成感を感じました。めったにできない体験ができたので参加できてよかったと思います。(Y.S.)

集合写真s
チーム「アントルメ」

 

詳細は大学のお知らせサイトをご覧ください。
〇大妻女子大学・お知らせ―2017年12月21日「家紋で日本の四季を表現したプロジェクションマッピングが投映 社情・堤ゼミ」
http://www.otsuma.ac.jp/news/2017/20171221161937
〇TBS web『日曜Nスタ』Sunトピ・バックナンバー
http://www.tbs.co.jp/tenki/suntopi20171217.html
〇電通報
https://dentsu-ho.com/articles/5719

LINEで送る
Share on Facebook

社会情報学部情報デザイン専攻の松田ゼミでは、地域連携プロジェクト「ヒューマノイドロボットPepperによる地域児童の参加・コミュニケーション体験型イベント」の活動の一環として2016年11月15日に唐木田児童館で子供達を集めPepperの体験イベントを開催しました。

1. 唐木田児童館との連携イベント

近年の機械学習やAI(人工知能)の進展により、近い将来ますますロボットやAIが地域社会の日常生活に欠かせない身近な存在になっていくことが考えられます。本プロジェクトでは、多摩市立唐木田児童館と連携し、たくさんの児童にロボットとの共生のあり方を考える場を提供する体験型イベントを開催しました(11月15日)。唐木田児童館では、平成27年にも地域連携イベントとしてPepperによる「ようかい体操」を開催し大変好評でした。

今回も、児童館の三枝館長にアドバイスとご協力をいただきながらイベントの設定を進めてきました。児童館には、イベントのポスターと告知用の広報誌を作成していただき(図1)、事前の申し込み受付や参加者の把握などを行っていただきました。

パンフレットs
図1 児童館ポスター

イベントは準備段階からPepper 2台を設置し、自然な動作をしたり、音声・人物認識で人の方向を向くように設定しておいたので、Pepperの周りに子供たちが集まり、Pepperに「こっちを向いて!」や「ペッパー!」と話しかけたりするなど興味津々でした(図2)。最初のうちは子供たちがイベント中に集まってくれるか少し心配していましたが、学校を終えた子供たちが徐々に駆けつけてくれました。

ペッパー_171212_0024
図2 イベント開始前の様子

2. ゼミ紹介・ロボット講演・Pepperクイズ大会

イベントでは最初に、松田ゼミの研究紹介や横浜国大の永田氏によるロボットについての講演を行いました(図3)。年少さんや低学年児童らにとっては、用語などが少し難しいところもあったかもしれませんが、みな熱心に聞いてくれました。

ペッパー_171212_0066ペッパー_171212_0068

図3 松田ゼミの研究紹介とロボットについての講演

その後、Pepperが中心となってクイズ大会を実施しました(図4)。今回もゼミ生11人が中心になって、児童らにロボットに対する親近感や興味を持ってもらい、多学年(年少~小6)の児童が楽しめる参加型のクイズ大会を企画しました。イベントの流れは、絵コンテやリハーサルなどを繰り返すことで確認し、できるだけ違和感がなくなるようにPepperのイベント用のプログラムを開発しました。

クイズの形式は、Pepperが音声で出題した後にジェスチャでカウントダウンし、児童らがその間に正解のエリアに移動、その後、Pepperが正解を発話するものです。移動時やPepperによる正解発表時には児童らは大変盛り上がっていました。

ペッパー_171212_0088ペッパー_171212_0076

図4 Pepperクイズ大会

クイズ大会の後は、質問タイムを設けました。子供たちは次々に手を挙げて、「ペッパーは歌を歌えるの?」、「ペッパーはどうやって動いているの?」といった質問をし、ロボットに対する興味の高さが伺えました(図5左)。最後に、子供たちに今回のイベントに関するアンケートを記入してもらいました(図5右)。アンケートを提出するときには、ゼミ生らが作成した「Pepper認定証カード」を渡しました。

ペッパー_171212_0093ペッパー_171212_0108

図5 質問タイムとアンケート

3. アンケートの結果

イベント後のアンケート結果より、小学1・2年生が59%を占め、88%がイベントを楽しみ、92%がまた来たいと答えていました(図6)。

グラフaグラフb

グラフcグラフd

図6 アンケート結果1

図7左に、全5問のクイズの正解数のグラフを示します。クイズは、低学年児童でも答えられるような内容(例えば「パンダのしっぽは黒いか白いか?」)を、ゼミ生らが相談して決めました。難易度のバランス的にはちょうど良かったのではないかと思います。

グラフgグラフh

図7 アンケート結果2

図7右は、Pepperが自宅にあるとどう思うかについてのアンケート結果です。大半の子供たちが「Pepperが自宅にあると楽しそう」と答え、「楽しくなさそう」と答えている児童は一人もいなかったことから、Pepperなどのロボットに対して親近感を持っているのではないかと考えられます。

4. 最後に

今回のようなイベントでは、自由奔放な児童らの対応や、その場の「空気を読んだ」指示出し、どのタイミングで次のアクションに移行するかなどが重要ですが、Pepperやその他のロボットAIにとっては現状では難しいため、今回はサポートのゼミ生らが行いました。 今後は、そのようなイベント構成要素をどれだけロボットに組み込んで自動化できるかが課題であると考えています。

ご協力頂いた唐木田児童館の館長の話によると、子供たちはイベントの次の日から早くも「ペッパーは次いつ来るの?」といった質問があったそうで、期待の高さと興味がうかがえます。次世代を担う地域児童にテクノロジーを自然な形で紹介し、興味を持った児童らが将来的に地域社会の活性化につなげてくれることを期待したいと思います。

●司会: 新保楓
●ビデオ、カメラ撮影係: 竹畑柚希・藤田夏海・藤川瑞生
●パネル提示係: 大滝美幸・藤吉綾乃
●児童の対応、誘導係: 伊藤有紀・今田歩実・大滝美幸・藤巻佳純・松下彩

LINEで送る
Share on Facebook

社会情報学部情報デザイン専攻の堤ゼミでは、ゼミ活動の一環として東京ビッグサイトで開催された東京国際プロジェクションマッピングアワードVol.1に出場。2016年12月17日に4,000人以上の来場者の前で、ノミネート作品「Starting over」を上映しました。当アワードは世界で通用する若手映像クリエイターの登竜門を作ることにより、将来のコンテンツ産業の中核となる人材の育成を実現すると同時に、プロジェクションマッピングというCG映像コンテンツ技術の高度化と普及を促進し、その取り組みを世界に発信することにより、日本発のコンテンツに対する興味・関心を高める機会を創出すること、また、東京オリンピックに向けて、日本のコンテンツ制作力を引き上げ、海外でのCOOL JAPANブランドの向上に貢献することを目的としています。

東京ビッグサイト会場写真 会場となった東京ビッグサイト会議棟側面壁

 

1.参加決定

2016年6月末、申し込み締め切り直前に当アワードに参加することをゼミ(3年)で決め、チーム名を「Cotton Candy」、担当教員を堤としました。7月に入って企画案、イメージビジュアル、絵コンテなどを作成しましたが、絵コンテ制作は初めての経験で苦労しました。それでもゼミ単位で目的に立ち向かうことの意義はしっかり感じていたようです。

 

2.作品制作に向けた学習

8月、夏休みに入ると第一次審査の結果発表前から、連日集中講義を行ってコンテンツ制作のための勉強を始めました。内容はプロジェクションマッピング、モジュロール、3DCG制作、人体アニメーション、幾何学パターン、だまし絵、錯視、フラクタルなどについてでした。堤ゼミでは3D-CGの授業を必修としていますが、本格的な3D-CGソフトの使用は後期からですので、授業に先んじて夏休みに一気にそのスキルを手中に収める必要があったのです。

 

3.第1次審査通過

8月10日、第一次審査発表の日、全員で集まって審査結果を待ちました。19時頃に事務局から第一次審査通過の知らせを受け、さらに頑張ろうと、チームの気持ちを一つにすることができました。

 

4.作品テーマと制作

審査発表の日以降、完パケ(最終作品)提出日である11月30日までゼミ生は各自の担当を全うすべく、時には休日や日曜日も返上で努力を続けました。今回は以下に示すように人間と建物との調和・秩序がテーマでした。

人間と建物との調和・秩序が埋もれつつあると感じたもじゅろう(Modulor)は地球に乗り込みます。しかし、一見無秩序に見える建物を象徴する咲き乱れる花たちの中で、自分と花にはフィボナッチ数列や黄金比など、根の部分では共有しているものがあることに気がつき、もじゅろうは楽しく優しい気持ちになって花と融和していきます。

今回の作品において、もじゅろうは、建物を設計する際に用いられてきた基準寸法であるモデュールを発想の原点とする、人間と建物との調和・秩序を守る生き物という設定です。

冒頭写真 作品の冒頭部分(以下、写真はいずれもアワード事務局による記録映像より:https://www.youtube.com/watch?v=w9UJb2zNCr8&t=46m40s

モデュールの中でもよく知られているのが、ル・コルビジェによってモデュールと黄金比、フィボナッチ数列を組み合わせて再構成されたModulor(モデュロール)です。世界文化遺産に登録が決まった国立西洋美術館にも、その窓枠や外壁パネルの寸法にモデュロールの寸法が採用されています。

さて、例えば東京の街並みは、俯瞰写真などをみると一見思い思い調和も考えずにそれぞれの建築がデザインされているように見えます。今回、これを自由に咲き乱れる花たちで象徴的に扱いましたが、いろいろ考えるうちに、現代建築も何らかの寸法システムを持っているはずで、実は花もフィボナッチ数列などの規則性を持っているのでモデュロールと無関係ではないことに気がつきました。

中盤写真 作品の中盤、集団行動など規律に基づくもじゅろうの動きと気ままな花が触れ合う

そこで、もじゅろうと花たち(つまり現代建築)とは相反するものではなく最後は融和するという形にしました。また、テーマが空間寸法を対象としているので、強調された透視図やだまし絵風のシーンを作成し、プロジェクションマッピングらしい立体感と空間表現も試みました。

毘沙門亀甲写真 東京ビッグサイト会議棟壁面の形状に合わせた立体図形表現(毘沙門亀甲)のアニメーションシーン

なお、作品はもじゅろうと現代建築の新たな旅立ちを示唆するものとして「Starting over」と名付けました。作品の最後はもじゅろうと花たちとの融和を表現しています。

終盤部分写真 作品の終盤、花と融和するもじゅろう

 

5.感想と今後

作品には印象に残るカラフルなシーンを中心に、メービウスの輪とか、ペンローズの三角形、コルビジェのモジュロール・トゥーレット修道院の一室、フラクタル図形(踊るもじゅろうの足下や育つ植物の柄に配置)、毘沙門亀甲など、ゼミで取り上げるような内容を組み込みました。当日、実習室のスクリーンやPCモニターでしか見ることがなかった作品が幅90mほどの大きな外壁に投影された時は、さすがに感動しました。

作業が次々に増えて余裕があまりなくなってきた9月上旬に敢行したゼミ合宿では、PCを持ち込んでそれまでの作業を振りかえり、今後の指針を決定するために夜遅くまで話し合ったことが思い出されます。このようにチームメンバー全員がそれぞれ責任を持って担当部分をよりよく仕上げるために努力した点は、十分に評価できます。このような努力は今後、卒業研究の中でも十分に生かしていくことができるでしょう。

チーム_Cotton_Candy写真 チーム「Cotton Candy」と指導教員

その一方で、作品上映後に審査委員の先生方から直接伺った講評からは、映像や作品構成の基本を十分に身につけていないことの問題点が浮き彫りになりました。今回の挑戦では、まだ学生の内側に職業としての登竜門的な発想はなかったので、作品への向き合い方が不十分だったとも感じています。

また、先にも書きましたように、3D-CGの学習を始めたばかりの段階だったので、モデルやアニメーションの制作では頭の中にイメージは浮かぶものの、やりたいことに対して技術が追いつかず悔しい思いもしたようです。さらに、メンバー間で報告・連絡・相談がうまくできなかった時には、作業に余計な時間がかかったり、やり直しが重なったり、特定のメンバーの負荷が大きくなってしまったりして辛い経験もしたようです。

それでも、なんとか一つの作品として仕上げることができたことは、達成感という高揚を伴って、今後、卒業研究の中でも、あるいはその後の人生の中でも十分に生かしていける自信になったと思います。7月から11月末まで、非常に長い時間を要する活動ではありましたが、チームで議論し、自分を振り返り、仲間を知る、得難い5か月間だったと思います。

(記: 2017.01.07 堤研究室)

LINEで送る
Share on Facebook

webtop_0913

 

明治神宮外苑にて開催されているクリエイティブの祭典、東京デザインウィーク2016の「学校作品展」に藤村ゼミ、中野ゼミが出展しています。大妻女子大学からは初出展となります。

今回の学校作品展のテーマは「Pairs」です。

藤村ゼミの3年生による「かがみらくる」は、鏡を使って「対(つい)」を表現した巨大な万華鏡(カレイドスコープ)のメディアアートです。プログラミングで生み出された寄木をモチーフにした映像が、手の動きを認識するLeapmotionによって刻一刻と変化し、美しい模様を作り出します。

かがみらくる
http://web.fujimura.com/blog/archives/1025

 

中野ゼミの3年生による「はなちゃんの恋の部屋’s」は、センサと映像を使って「モノ」とそこに込められた「想い」のペアを表現しました。架空の少女マンガに登場する主人公の部屋には、いくつか大切なモノが設置されています。そのモノを見つけたり、触れたりすると、主人公の「想い」が映像となって壁面に映し出され、ストーリーが見えてくるという作品です。

はなちゃんの恋の部屋's
http://hanakoi.kidaishintaro.com/hanakoi/

 

展示会場はとても広く、企業展示やプロクリエイター展示、イベントやフードも充実しています。最先端のデザインに触れに、ぜひ、会場まで足を運んでみてください。

 

【開催期間】
前期:2016年10月26日 〜 10月31日
後期:2016年11月2日 〜 11月7日 ※11月1日は終日閉場
※11月7日はイベント中止となりました

【開場時間】
11:00〜21:00 ※最終日は20:00まで

【会場】
明治神宮外苑 絵画館前
〒160-0013 東京都新宿区霞ヶ丘町2-3

【入場チケット】
2,500円(一般当日券)
大学生 1,500円 高校生 1,000円 中学生500円(学生証提示)

【公式ホームページ】
http://tokyodesignweek.jp/

 

 

LINEで送る
Share on Facebook

私たち宮崎ゼミ3年生は堂ヶ島というところに1泊2日のゼミ合宿に行ってきました。

海沿いに線路が通る伊豆急行線の下田駅で待ち合わせをして、そこから田んぼが広がる道をバスで1時間かけて堂ヶ島へ向かいました。

バスからの風景
バスからの風景

堂ヶ島は青の洞窟という、洞窟の天井が一部開いていて、そこから入る陽の光によって水面が青く輝いて見える洞窟があるところです。福山雅治さん主演のガリレオシリーズの、映画真夏の方程式の舞台にもなったところです。しかし当日行ってみると天気は晴れていましたが、沖の波が高いためにクルージングは運航していませんでした…。残念でしたが、せっかく来たので近くでB級グルメの鰹うどんを食べて、クルージングの代わりに堂ヶ島の岩の近くに行ける散歩道や、青の洞窟の天井部分を上から観ることができるところへ行きました。上から観てもあまり凄さはわかりませんでした笑。

地元名物 B級グルメの鰹うどん
地元名物 B級グルメの鰹うどん

堂ヶ島の眺め
堂ヶ島の眺め

天蓋
天蓋(上からみたところです)

その後タクシーを呼ぼうとしたら距離がありすぎて行けないと断られたりしましたが、泊まるところの近くまで行ける堂ヶ島のバス停から出ているバスを見つけ、無事に到着しました。海に面していたので、ちょうど夕陽が沈みとても綺麗でした。

夜ご飯はBBQをしました。BBQに慣れているゼミ生(もちろん女の子)がとてもかっこよく見えました笑

バーベキュー
バーベキュー

Nさん大活躍
Nさん大活躍

自然に溢れていて、たくさん虫がいたりもしましたが、お肉や野菜、焼きそばからマシュマロまで、みんなで美味しくいただくことができました。そのあとは屋外風呂(露天風呂とはまた違う)に浸かったり、みんなで人狼ゲームをしたり、布団にもぐりながらいろんな話して、就寝しました。

そして次の日同じルートで帰り道を進んで、堂ヶ島のところでお昼ご飯にしました。お寿司屋さんの海鮮丼はとても美味しかったです。

海鮮丼
海鮮丼。美味でした

食べ終わってお土産を見ていると、昨日は運休していたクルージングが、なんと今日は運航しているとのことだったので、乗ることにしました。船が苦手なわたしは少し不安でしたが、海の風を感じると心地よくなりました。堂ヶ島というのは1つの島の名前ではなく、この地帯一帯のことを言います、というアナウンス流れる中、各島々をまわりながら、最後に青の洞窟に入っていきました。奥まで進んでいくと、昨日上から見た天井の真下に着き、その水面は青くきらきらとしていました。この感嘆は写真や言葉ではうまく伝えられないほどでした。

青の洞窟
青の洞窟

そしてまた田んぼの見える田舎道を進み、伊豆急下田駅で解散をして私たちのゼミ合宿は終わりました。

いつも週に一度しか顔を合わせないゼミの人たちと1泊2日を過ごして、親睦が深められたのではないかなぁと思いました。宮崎先生ありがとうございました。

全員で写真を撮りました

LINEで送る
Share on Facebook

田丸ゼミでは、平成28年8月8日(月)法政大学理工学部の平野研究室との 合同ゼミを法大市ヶ谷キャンパスのボアソナードタワーのゼミ室で開催しました。

参加者は当ゼミから卒論生が5名、法大が卒論生9名、M1生2名などでした。 お互いに4年生の卒論と、修士1年生の修論の中間発表を実施しました。

まず、当方のゼミ5名のプレゼンに続き、法大生11名の学生が、 質疑応答を含め各人7分間程度の発表を行いました。

その後、会場を最上階に近い25階の部屋に移し、 軽食を食べながら懇談。本学千代田キャンパスが足元に見られ、眺めは最高でした。

この合同ゼミでは、学生達はお互いに刺激し合い、研究成果の向上につながればと思い、 今後も継続する予定。次回は来年1月頃の実施予定です。

当ゼミのプレゼン題目

R.I. ARアプリの画像認識
T.O. 二輪ロボットの走行
A.J. 複数エレベータの最適スケジューリング
A.T. 応答時間テストによる評価
M.Y. POS端末インタフェース

 

LINEで送る
Share on Facebook

報告者(松田ゼミ:池田彩子)

松田ゼミに所属するゼミ生(池田)は、卒業研究として「料理のレシピ提示支援システムの開発と評価」を行い、卒業論文として提出しました。今回はその締めくくりとして、3月10日から12日にかけて、慶應義塾大学(矢上キャンパス)で開催された一般社団法人情報処理学会が主催する情報処理学会 第78回全国大会で発表してきましたので報告します。学会に提出した論文はここをクリックしてください。

図8

1.発表内容

今回の発表は、従来の料理サイトの問題を明らかにし、新しい料理レシピ提示支援システムの提案するものです。

これまでに作ったことのない料理を作る時は、そのレシピを見ながら、料理をすることが多いと思います。今日、公開されているほとんどの料理サイト(クックパッド、シェフごはん、レシピブログ等)は、文章と画像だけで構成されており、インターネットで簡単に検索できるので、スマートフォンやタブレットで、レシピを参照しながら、料理をすることができます。しかし、料理中には手が汚れることが多く、汚れた手のままでは操作がしにくいという問題があります。

また、既存のサイトは文章と写真だけで料理の工程が分かりにくく、動画による説明があるサイトもありますが、全工程に動画がなかったり、短く編集されていたり、逆に全工程が1つにまとめられてしまっています。まとめられている場合には、巻き戻し、早送りなどの操作が増えるという問題があります。

このような問題を元に、本研究ではレシピ提示支援システムCookingを試作しました。本システムは、ジェスチャ認識を行う小型の装置(Leap Motion)をパソコンに接続することで、手の動き(ジェスチャ)で表示したレシピの操作を可能にします。

Cookingで表示するレシピは、後で述べる実験の評価条件をそろえるために、クックパッドに掲載されているレシピ(http://cookpad.com/recipe/390716、2854122)を再構成したものを用い、各工程に動画を付加しました。マカロンは12工程10動画、肉じゃがは8工程7動画の構成としました。

図9

 

本システムの評価は、料理に苦手意識を持つ学生20人にクックパッドと本システムを使用して、マカロンと肉じゃがを作ってもらうことで行いました。実験は唐木田市民センターの調理室をお借りして行いました。

実験の結果、実験後のアンケートから、本システムの使用感、成功率の項目に関しては、20人中18人が本システムを選び、使いやすい、という評価結果が得られました。また、料理の成功率は、マカロンの場合、本システムで70%、クックパッドで0%となり、肉じゃがは全員が両方のシステムで成功しました。

図10

図11

このような料理の成功・不成功の結果を分析してみると、アンケート結果より、レシピで分かりにくい作業が結果に影響していることが分かりました。肉じゃがの分かりにくい作業は野菜の切り方(くし切り)で一方、マカロンは、生地作りが分かりにくい工程でした。肉じゃかのは、料理の成否にあまり影響しませんが、マカロンの生地作りは成否に大きく影響します。この作業はクックパッドの画像だけでは分からなく、Cooking の動画が功を奏していました。なお、このようなクックパッドのレシピの情報不足は肉じゃがを作成する際にも生じていましたが、被験者が実験中に他サイトを調べることで問題が顕在化しなかったようです。

また、マカロンでは、このような情報不足を他サイトで補う行動は両システムともに観察されませんでした。これは、お菓子作りでは特有の速めの作業が求められるため時間的余裕がないのに加え、料理による手の汚れが原因だと考えられ、アンケート結果にも現れていました。

以上より、各工程に付加した動画がレシピの情報不足を補い、操作性も向上することができるこおとが分かりました。また、Cookingで提供したジェスチャ機能と動画機能は、マカロンでは動画機能が評価され、肉じゃがではジェスチャ機能が評価されるなど、料理により評価が異なることも分かりました。

今後の課題としては、動画が必要な工程と不要な工程などの条件を明らかにし、一般の人が動画を付加されたCookingのレシピを作成しやすくすることがあげられます。

図12

図13

2.Leap Motionとは

Leap Motion(リープモーション)は、2012年にLeap Motion社から販売された手のジェスチャによって、コンピュータの操作ができるデバイスです。マウスや画面タッチを用いずに操作ができる体感型のシステムで、ジェスチャによって直観的に操作することが可能とします(ウィキペディア引用/https://ja.wikipedia.org/wiki/Leap_Motion)。

図15

3.発表に関して

発表会は、午後から開始だったので、お昼休憩の間にパソコンの接続、資料の最終確認をし、発表までの時間を過ごしました。私の発表したセクションは、院生を含めた全員学生で、8名の発表がありました。発表時間は12分、質問時間が3分でした。

初めての学会発表であり、私自身かなりのあがり症なので、しっかり発表出来るかとても不安でした。ですが、当日までに2回松田先生に練習して頂いて、家でも何度も練習をしたので、自分でも驚くほど落ち着いて発表することができました。発表後、頂いた質問をいくつか載せます。

  • 成功率にかなりの差があるが、クックパッドのレシピ(つくれぽでレシピごとに評価がある)は、高い評価のものを使用したのか。
  • 料理の難易度によって実験の結果に影響はないのか。

今回公共の場での発表は2度目でしたが、少しずつ自分が成長していることを、今回の発表で実感することができ、とても嬉しかったです。今回の経験を、これからに活かしていこうと思います。

 

 

 

LINEで送る
Share on Facebook