4-7月の記録

4-7月の技術系界隈での出来事を振り返り.

■4月
東京大学大学院情報理工学系修士課程に無事,入学しました.

同じ時期に画像処理系のバイトを始め,社内にデスクはなく,月2回程度の打ち合わせで案件を進めていく業務委託形式で働き,強めの稼ぎを得るようになりました.

また同じ時期に研究室で新たなプロジェクションマッピングの技法のパブリッシュをするお手伝いのバイトも始めました.
先生から直々に研究の諸作法を教わりながら実際に形にしていけるものでもあるので,ヒヨッコ学生には本当にありがたいバイトです.
この件でNHKにちょっと映ることにもなり,初めてスタジオに出入りするなど.
こじるりも生で見ました,わーい
www4.nhk.or.jp



■5月
前の年の秋ごろに立ち上げた団体「UTaTane」での活動で,五月祭に向けてひっきりなしに活動していました.
AviUtlで動画を作ったり,HololensでDLLによりC++OpenCVのコードを走らせた画像処理のARアプリを作ったり,
その他会計や雑務,手伝いで空間デザイン等も手掛け,副代表だったこともあり,非常に忙しかったです・・・

これまでは完全にトップダウン的に"作る"だけだったので,"何を作ったら面白いか?""お客さんに伝えられるか?"ベースで進めることがすごくいい経験になったと思います.テーマ選択もセンスが要るなぁと思ったりなど.
メンバーの一人に最近言われたことですが,職務放棄などで足を引っ張る人が一人もおらず,それぞれの仕事を専念して一直線でやれている若い団体なんて早々ないと.
組織内で動くことが苦手な私でも,かなりやりやすく感じたので,これは事実だと思います.
今新歓をやってるみたいなので興味あるかたはぜひに参加してみてください笑
www.facebook.com

あとは,卒論の内容で1本論文誌に出したり,3月に出したIEEEに落ちたりなど.

バイトではテンプレートマッチングやKLTトラッカーを利用したサブピクセル推定の実装などを行いました.
テンプレートマッチングは時間はかかるけど広い範囲でのピクセル推定に有利です.サブピクセル推定もできますが,精度は低いと分かりました.
一方,KLT(Kanade-Lucas-Tomasi)トラッカーは狭い範囲での高精度な推定にすごく有利です.
「ディジタル画像処理」ではアフィン変換で実装されてますがホモグラフィ変換でもできて,今回はそれをやったかな.
Amazon CAPTCHA

2カ月の間で多くのことを検証しました.
テンプレートマッチングは,合わせた位置毎にスコアがでます,そのスコアから近似的にサブピクセル推定を行う方法があります.
一般に相性がいいと言われているのは,
2乗誤差の和(SSD)→パラボラフィッティング(二次関数的にサブピク推定)
絶対値の和(SAD)→等角直線フィッティング(直線を引きその交点をサブピク推定値)
news.mynavi.jp
ただ,これは精度がそんなによくないです.その高精度化を目指したEEC法,近似EEC法もあるみたいで,後者を試しましたがそんなに変わりませんでした笑
https://vision.kuee.kyoto-u.ac.jp/japanese/happyou/pdf/Sumioka_2005_P_195.pdf
ミーンシフト法も試しましたが,画像内に映る対象が高画素であるor画像内で広めの領域を占めるor色的特徴がはっきりしていると良い推定が出るような気がしました.
KLTトラッカーの実装は一筋縄ではいきませんでしたが,狭い範囲内での移動体追跡であればすごく推定精度が良いみたいなのでおすすめです.
などなど,楽しい画像処理ライフも送っていました.


■6月
主に夏の企業インターン面接対策にいそしんでいたと思います.

趣味でHololensのアプリを作っていたのですが,面接で見せようと追い込んで作っていたので非常に忙しかったです.
こんなものを作りました↓Hololensで変幻灯の技術変幻灯 / Deformation Lampsを実装できないかな,からの,画風変換Neural Style Transfer (画風変換) — ReNom ドキュメントを試せないかな,という感じで,
複合現実の世界での新たな表現手法を構築する目的で実装しました.
github.com

こいつ,ちゃんと綿密に作ってあると思いますが,結果的に色んな人からの反応はウーンです.笑
まず変幻灯は位置合わせが困難だということ.SpatialMappingを利用しましたが精度が悪くて・・・
また,Hololens毎に透視型ディスプレイの配置に個体差があるようで,等しくアプリを置いても最適な位置で動かないのです.
ある先生には「これは光の動き画像の投影ではなくそのもの自体の動き画像を投影したらええやん」と突っ込まれました.いやーおっしゃる通りです.笑

その意味では,画風変換の方が見栄えしました.

しかし,どちらとも画像が固定サイズでしか投影してないので,対象だけ選択的に切り取ってそこだけ変換して投影したり,
立体的なものにも適用できるように,Shaderで記述する必要があるなと思ったりもしました.
これらの課題も一人で実装するにはそろそろしんどいです・・・笑

話は逸れましたが,第一志望のところは落っこちて,かなりへこみましたが,自分が受けたい部門でまだ力だ足りませんと良いメッセージを受けられたと思うことにして元気になりました.
結局夏はメルカリのR4DのXRエンジニアインターンに行きます.またHololensのアプリ実装を行う予定です.

また,S〇〇〇..ASIAに出すために慣れない動画作成をして投稿したり,修士研究の内容をFixさせたりしました.
デモのためにGLSLに着手して,いろいろわかるようになったのがいい収穫です.


■7月
研究室でのパブリッシュのお手伝いと,修士研究というところでしょうか,
実装したり,サーベイしたりして過ごしておりました.
自分の修士研究は冬の学会に出したいとの話になっていて,秋に予稿提出ですが,その提出期限前にどうしても海外旅行に行きたいので,早めに仕上げねばなりません.
今は,今月末までに実装を終えようと思っているところです.
まだまだ頑張ります.



とまあ長くなってしまいましたが,非常にいろんなことに着手できた後悔のない夏学期でした.

友達のスタートアップの話を聞きにいってみた

今晩は遅めスタートで,3年くらい仲良くしている経済の修士の友達がやっているスタートアップの話を聞きにいきました.

今後は視覚的にも訴えるため,載せる写真を用意してきます!笑


集合場所は大江戸線の果てこと光が丘駅

そこのドトールに入店し,社長さんと社員であるその友人の2人,仲良しの友人と私の2人の2対2でお話を聞く会でした.

詳しくは話せませんが,彼がスタートアップするにあたって
部門はなんでもいい(つまりブルーオーシャンな領域を選択できる)けどUXに本当にこだわりがある!と熱心に話すのを聞いて,
私もそうです!強く共感!ふぉぉ
と心の中で叫んでおりました.笑

突飛なアイディアで勝つ,のではなく,我々が根詰めて追究しまくったものを世に提供する,という思考のベースの部分が
私も経たいと大いに同意するもので,いいなぁと思いました.


学部生のような暇な時だったら,絶対ここ参加してたなぁ.
今はそれをやるにはさすがに専門の軸が固くなってしまって,応援するくらいしかやることはありません.(資産家だったらすぐに投資してたな~)

また,今は(特に私の専門は)アイディアベースだと謳われることが多いような気がしますが,
まずブルーオーシャン領域を発掘して,練りに練って本当にいいサービスを提供するという手法を久々に聞いて,そっちの方が向いていると常々思っていたのでちょっと安心しました.
こういう考案の仕方をやりたいという潜在意識を強く刺激された気がします.


余談ですが,幽霊みたいな変な人が,こちらの会話中首を振りながらこっちをずーっと見てるという惨劇があって,,,笑
店員の目配せがあり,相談しに行こうとしたら,彼が一瞬こっちにちょっとだけ近づいて
ぶるぶる身を震わせながら逃げていき,ようやっと安心…みたいなシーンがありました泣
その間は凶器持ってたらとかめっちゃポケットのあたり見てましたw ほんと怖かったー

多分なんでも書いてもいいんだろうと思います

初めまして~の方もいればもう知ってますという方にも,等しく自己紹介を.

 

・東大大学院修士1年

・高速ビジョン(これ言うと研究室即バレだな~笑),拡張現実感,プロジェクションマッピング,3次元計測の研究に従事.

・都内在住

C++,C#,Unityがメイン言語.その他Python,PHP,HTML,JavaScript,OpenGL,OpenMP,CSS,HTML,Caffeなど色々触ってきたかな

複合現実感に大いに興味があります.Hololensに出会ったときは本当に稲妻が走った.この話は追い追い

 

・「「女子」」です一応.笑

・性格→元気,うるさい,非 安定志向で常にチャレンジングだと思います.

・結構マジです(やめなきゃなぁと思っているのだが)

・お酒すきです.しっぽり呑むのも多人数でワイワイ呑むのも好き!ワインとビールがすき

・おしゃれが好きです.綺麗なお洋服着るとそれだけでかなり心が洗われます.吉祥寺か新宿でよく買います.

 

ブログをはじめようと思ったきっかけは,仲いい友人のはてなブログを見て,ああ面白そうなど悶々と考えて眠れなくなったため.笑

ほんとにちょっとの刺激ですぐ始めちゃいます,フットワークの軽さ?笑(物理的にはちょっと重めですけど!痩せたい)

自分の感情や実経験の発信とか苦手なので結局技術ブログになるかもしれませんがよろしくお願いします~.

技術系以外は個人の思想が入っていても日記程度に捉えて,深いツッコミは避けていただけると嬉しいです(本当にニガテなので)