Yanai KEIJI (柳井 啓司)

Offer Organization: Japan Society for the Promotion of Science, System Name: Grants-in-Aid for Scientific Research, Category: Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area), Fund Type: -, Overall Grant Amount: - (direct: 5500000, indirect: 1650000)
本研究では，小型デバイス上での深層学習によるリアルタイム生物行動認識の実現のために，(1)動物一人称映像の認識の研究，(2)タスクとデバイスに適応した小型ネットワークの探索，(3)センサ情報と画像認識を併用したリアルタイム行動認識の実現, (4) (1)～(3)の手法を統合的に用いた小型IoT デバイス上での実装，を実施する．
特に2019年度は１年目は基礎的研究として(1) 動物一人称映像の認識の研究，(2)タスクとデバイスに適応した小型ネットワークの探索を行った．これらは独立して研究できるので，並行して実施した．
(1)では，レスキュー犬の一人称映像に対して，映像，音声に加えて，レスキュー犬が着用しているサイバースーツに搭載されている各種センサーの情報も統合して，動作認識を行う手法について研究を行った．静止画の情報，映像の動き，音声，センサーの４つの情報を統合し，従来を上回る認識精度を達成した．
(2)では，ネットワーク圧縮技術であるpruningによってネットワークパラメータを減らす実験，自動的に最適なネットワーク構成を探索する技術であるNeural Architecture Search(NAS)技術によって最適なネットワークを探索する実験を実施した．また，複数タスクを同時に１つのネットワークで学習するマルチドメイン学習に関する基礎的な研究，またIoTデバイス上で，実行のみならず簡単な学習を行うことによって，環境変化に応じて動的にネットワークを更新する実験も実施した．

Offer Organization: 日本学術振興会, System Name: 科学研究費助成事業, Category: 基盤研究(A), Fund Type: -, Overall Grant Amount: - (direct: 34800000, indirect: 10440000)
「文字」は我々の文化的活動やコミュニケーションを支える最重要メディアである．本課題では，「言語であり画像でもある」という文字の二面性に注目しながら，文字の持つ多様な機能の本質を総合的に解析する新分野「文字科学」を推進する予定であった．特にこれまで注目されることのなかった文字の4 機能（周囲の明確化，知識・意味伝達，雰囲気伝達，可読性維持）について，広汎で挑戦的かつ世界にも類例のない基礎的研究群を実施する予定であった．
こうした予定であったところ，本課題での実施内容を含んだ基盤S課題「機械可読時代における文字科学の創成と応用展開（17H06100）」が平成29年5月末日に採択されるに至った．その結果，重複制約により，本課題に係る事業は開始後2か月で廃止される運びとなった．なお，基盤S課題の実施担当者も，本課題と同じ3名であり，本課題で実施予定だった内容は，基盤S課題においても問題なく実施可能である．
本2か月間においては，代表者ならびに2名の分担者での議論により，上記の文字の4機能解明に係る課題の具体化を行った．特に，フォント自動生成，デザインとフォント形状の解明，情景内文字とその意味の関係解明，情景の画像情報が与える情報と情景内文字が与える情報の関係解明，アルファベット生成プロセスの工学的解明，等の課題について具体的な方法論を設定し，担当者を決定するとともに，データ収集・実装をスタートした．上述の通り，これらはいずれも前記基盤S課題に引き継がれることになっている．