「その機能って本当に使うの？」落合陽一の弟子、高専出身の未踏エンジニアが見せるプロダクトへのこだわり。

もしかして…オフィスで試されましたか？

telorainの音声処理のポイントは雑音の処理なんです。 うるさい場所でどれだけテロップが正確に出るかを試してもらえると、一発で違いがわかると思います。

今回想定しているテロップをつけたいユーザって、よく動画を撮ってSNSにアップする層、具体的には女子高生や大学生なんです。 彼女たちが動画を撮る環境って、お店の中だったり、友達と一緒にいたり、周りも騒がしい場所なんですよね。

そうなると、いかに雑音の中から話者の声を正確に抽出するのかが大事になります。 telorainでは、雑音のせいで音声認識できないところを補完してくれるモジュールを別で動かしています。

「テロップの文章をどう表示するか」にはすごく力を入れました。 telorainでは、よほどのことがない限りテロップが変なところで改行・改ページされたりしないんです。

これって人間の感覚的には当たり前なんですけど、実装するのは大変で。 既存のAPIやライブラリでは実装できないですし、先行論文なども見当たらなかったので、0から研究開発をして作った部分になります。 この実装については今後論文にして発表したいと考えていますね。

telorainの開発チームでは、どんな機能やUIを追加するときにも、必ず「それって女子高生が本当に使うの？」というディスカッションをしています。 しっかりディスカッションするので、ボタン一つ追加するのにも1ヶ月かかることもあります。

他の動画編集アプリだと当たり前にあるような機能がなかったりします。 例えばテロップの縁取りの大きさや細かい装飾ってほとんどのアプリで編集可能ですが、telorainでは編集できません。 これは、ターゲットである女子高生は面倒に感じて使わないだろう、と判断してあえて実装しなかった部分です。

一方で、テロップの色やフォントの調整といった編集を楽しんでいることが分かりました。 なのでこの部分の編集は直感的で分かりやすく操作できるようにしています。

所属していた研究室の落合陽一先生の影響はありますね。 研究して成果を報告すれば終わりではなく、その研究がどんなインパクトを与えるかを社会に問いかけ、伝え、実際に活用されることを目指すべき、「研究の社会実装」ができないと意味がない、とよくおっしゃっています。

telorainの開発でも、この「社会実装」を意識できたからこそ、最新の技術や論文の技術を使うことだけにとらわれませんでした。 一部のギークな人が面白がって終わりのものではなく、ターゲットユーザが使えるもの・使ってくれるものは何か、そのために何が必要かを考えて開発することができています。

僕、いわゆる5教科の勉強が嫌いで。 好きでもない勉強に3年間を費やすのは嫌だなと思っていて、そんな時に高専を知り選択肢に入りました。

人並にパソコンに触れてはいました。オンラインゲームをやったりとか…。 自分でコードを書く、ということはあまりなかったです。 でも5教科の勉強よりは興味があるし、手に職がつくならいいなと思って高専に入りました。

当時は自分よりも両親の方が抵抗がありましたね。 「高専を出た後に大学に編入できるよ」と説得したのを覚えています。 高専から大学に編入することで、普通のルートに戻れることが後ろ盾になっていました。

情報系の学科だったこともあり、１年生のときに3Ⅾモデルのファイル管理フリーソフトを作ってみたところ、それを2000人が利用してくれました。 僕のソフトの規格に合わせて3Dモデルを作ってくれる人まで現れて。当時はすごく嬉しくて、開発の楽しさに目覚めました。

一つの成功体験でしたね。 ただ、１年生の頃は複数人でプログラミングができるって知らなかったんですよ(笑)。 開発って大変だなって思ってました(笑)。

２年生になって、どうやら開発は複数人でチームで出来るらしいぞと知って、それでチームでの開発に取り組み始めました。 それからの高専生活は、学祭での展示や、高専のプログラミングコンテンストへの出場など、半年から１年規模の長期間のプロジェクトを常に二本抱える形で、プロジェクトを軸にして過ごしました。

もちろん高専の全員が全員こういった生活をしているわけではないですよ(笑)。 僕たちの高専だと、クラスに40人いたら5人いるかいないかでした。

今でも一貫しているスタンスなんですが、プロジェクトのたびに新しい挑戦をするようにしているんですよ。 それまでの知識や手癖で開発できるテーマにはせず、新しい知識や触れたことのない技術を活用しないと成し遂げられないプロジェクトをやるようにしていましたね。

特に学生だと開発に対して強制力が働くわけじゃないので、開発に向き合うにはモチベーションが必要です。 自分にとってはそれが新しい挑戦で、道が拓けたときにアドレナリンが出る感覚が好きなんですよね。

４年生のときに、学園祭で、Re:inkというプロジェクションマッピングの作品の展示をやったんです。 プロジェクションマッピング自体はすでにあったんですが、Re:inkは3Dかつインタラクション性のある企画で、当時はやっている企業や団体もまだなかったと思います。

ただのプロジェクションマッピングだけだと、企業がやってることを高専生がやってすごいね、で終わっちゃうじゃないですか。 だから、どこもやったことのないものをつくりたかったんです。

映像を3Dにするのも大変で、これは情報科の知識・技術だけでは作れないので、機械科・建築科のメンバーと一緒に取り組むことで初めて実現できました。 これは隣のクラスで別分野の研究をやっている人がいる環境の高専だからこそできたことかもしれません。

常に新しいチャレンジをし続け、他分野の人ともプロジェクトをやり遂げた経験は自分の成長にもつながりました。 高専生活は間違いなく自分のベースになっていますし、通って本当によかったですね。

いや、そういうわけではないです。 実は高専卒業後は就職するつもりで、有名な企業からも内定をいただけていました。 大学に進むよりも、就職してずっとソフトウェアを開発している方が楽しそうだなと思ってたんです。

これからの人生の60年間について一度考えてみたんです。 いま就職して60年間コードを書くのと、２年間※大学に行って研究などに取り組んだ自分が残りの58年間コード書くとしたら、どっちがいいだろうかと。 そうすると、大学に行って２年間学びそのあと58年間働くほうが豊かな人生に思えたんですよ。

今後働くうえでのリスクもあまりないと思いました。 それまでに培ったソフトウェア技術には自信があり、この道で飯を食っていくに十分な力はついているし、２年間くらいの寄り道をしても大丈夫だろうと（笑）。 むしろ大学で研究をした経験は役立つだろうと思いました。

落合研では、ソフトウェア開発から離れてコンピューテーショナルディスプレイという分野の研究をしていました。 思い切った分野の転換ではあるのですが、常に新しいことに挑戦したい性分が出ちゃいましたね。

それはもう……。私生活をすべて犠牲にして研究していました。

さまざまなことを学ばせてもらいましたが、あえてひとつ挙げるとしたら分かりやすく伝える技術ですね。 先ほど話した「社会実装」の話とつながることでもあります。 他の研究室でも、研究する力は身に着くと思うんですよ。でも、伝える技術は落合研だからこそと言えます。

落合研は、研究室単位での個展や、研究室内外のメディア対応の場がたくさんあって、その中でどうすれば研究成果を一般の人に伝えることができるかを考える機会がいただけます。 これは落合先生だからこそという面もあると思います。 このような機会を通して社会に分かりやすく伝える技術を学ぶことができました。

そうです。 大学に入学してから２年間研究に向き合っていたので、次はまたがっつりと開発をする期間を取りたいと考えていたんです。 その折に高専のころからの憧れだった未踏にも採択されたので、これはもうやるしかない、と腹を括りました。 未踏には、telorainのベースとなる技術検証のみが終わった時点で、プロトタイプもないままに企画書を書いて応募しました。

iOSのジェイルブレイク手法を発見した高校生とか、VR系のトップカンファレンスに論文を通している大学院生とか、同世代の情報系のエキスパートと刺激を受けあえる点がよかったですね。 それに卒業生やPMとして関わってくださる方の中にも著名な方が多くて。 直接ああでもない、こうでもないってフィードバックがもらえる点もよかったです。

よくそこまで調べてますね(笑)。

一つのプロジェクトとして、チームで戦ったからだと思います（笑）。 具体的には、僕の場合は裏でサポートしてくれる方々がいて、女性も何名か入ってもらっていました。SNSや各種ミスコン活動において、僕が発信する情報について前には女性視点でレビューしてもらうんです。

それで、男性と女性が思い描く「ウケがいい男性」像には大きな差があることがわかりました。 僕がイケてると思った写真や投稿文は大体ボツにされました(笑)。

そうですね。きちんと検証・評価のプロセスを回さず、自分の思い込みだけで活動していたらグランプリの受賞はできなかったはずです(笑)。 これまでのプロジェクトの経験や、落合研で学んだ伝える技術が活きている気がしますね。

まずtelorainを頑張ります。 夏には法人を作ってグロースさせていきたいと思います。 今後は、開発に限らずできることを広げたいですし、様々な領域で勉強し続けていきたいですね。

落合さんがあるときの講演で「君の魂は何色だい？」と問いかけていたんですよ。 「一つのことをやり続けると、魂の色ができる。」という、プロジェクトにしっかりと取り組む意義についてのメッセージで、とてもいい言葉だと思いました。 僕も自分の魂の色が出るような生き方ができればいいと思います。