SONYのNeural network consoleを使ってみた

GUIでディープラーニングできちゃう話題のやつ。とりあえず遊んだ備忘録。

バイナリでなく，カテゴリカルなデータを学習させるときには，レイヤ（Affineなど）からの出力をsoftmaxに入力して，softmaxからの出力をカテゴリの数に設定する。

なので，標準で用意されている0～9の画像データセットの場合，10とすればよい。

最後に，Softmaxからの出力をCategoricalCrossEntropyに入力すればよい。

ちなみに，SoftmaxとCategoricalCrossEntropyを足したものである，SoftmaxCrossEntropyを使うと，ちょっと早いらしいんだけど，Evaluation後のクロス表が出力されないので注意です。

MATLAB モニターのサイズをcmとピクセルで取得

実験などで，物理的なサイズで指定したいときにはこれを使って修正。
出力された値の比をとってあげればよいです。

------------------------------------------------
function out = getMonitorSize
% モニターのサイズをcmとピクセルで取得
% 一行目，cm
% 二行目，ピクセル
%
a = groot;
% 単位をcmにする
set(a,'Units','centimeters')
centiM = get(a,'MonitorPositions');
% 単位をpixelに戻す
set(a,'Units','pixel')
pixelM = get(a,'MonitorPositions');
out = [centiM(3:4); pixelM(3:4)];
------------------------------------------------

 昔のバージョンだとgrootだとエラーでるので，0とかにするとよいかも。

Psychtoolbox 動作確認

新しいPCでのPsychtoolbox Screen関数の動作確認。

Mouseコンピュータの小さいやつ，mouse デスクトップパソコン Lm-mini。


メモリはとりあえずささやかに増やして買いました。


CPU Core i3-6100U ＠ 2.30GHｚ
メモリ 8GB
ディスプレイアダプタ Intel HD Graphics 520

Psychtoolbox（古いバージョン）インストールして，即Screen関数起動成功。
このサイズのPCで実験ができるとなると，いろいろ結構便利になりますね。

SSDは120GBあるので，プログラム関係は問題なく収まります。
余計なものは，外付けHDDを一台用意すればOK。

USBポートも，全部で6基あり，十分。
ディスプレイ裏マウントが標準で付属されているのも，よい。

Raspberry pi 3bを触る ラズパイさん。

とりあえず覚書です。

Raspberry Pi 3bを買ったよ。

一通りセッティングしたら，センサーのデータだらだら表示などに使う予定。

ディスプレイ小さいのがいいので，3.5インチのタッチモニタを購入。
HDMIでタッチでこの価格とか，すごいね。



到着したディスプレイは「KeDei」と書いてある。ブログをチョコチョコ見ると，あんまりお勧めされていないようだけど，とりあえず無視。最終的には問題ありませんでしたよ。

[ Prepare Raspbian OS]

まず，OSを準備します。

1.　Micro SDカードに， imgファイルを書き込もう。

本家サイトからダウンロードしようと思ったら4時間くらいかかりそうだったので
以下のミラーサイト（日本） からダウンロード。

http://ftp.jaist.ac.jp/pub/raspberrypi/raspbian/images/

みんなLiteをインストールしてるけど，機能は多い方がいいじゃないか。ということでフルの方をダウンロード。

2.　zipファイルを解凍すると，imgファイルが出てくる。

これを，「DD for Windows」というソフトでSDカードに書き込む。

http://www.si-linux.co.jp/techinfo/index.php?DD%20for%20Windows

3.　SDカードは事前に「FAT32」でフォーマット。

対象ディスクを選び，ファイル選択で「.img」ファイルを選び，「書き込み」を押す。
すると，なんかわかんないこと言われるので，「はい」を押し続け，書き込む。
4GBを書き込むのは結構時間がかかるなあ。。


待っている間に，KeDeiのディスプレイについて調べます。

【Osoyooの説明】
なかなか面白い日本語で解説してくれている。

http://osoyoo.com/ja/2016/11/20/raspberry-pi-3-5inch-hdmi-touchscreen/

ここから ドライバをダウンロード可能って書いてある

https://drive.google.com/drive/folders/0B0yi2A0LygMPM3dlOEY3Sml0am8

でも，よくわかんないので， 英語を読む。

http://osoyoo.com/2016/11/20/raspberry-pi-3-5inch-hdmi-touchscreen/

全然説明が違ってびっくりだ。英語の説明を読みましょう。
ドライバをダウンロードをするだけみたいだけど，わからない人にはわからない。

わかりやすいのを見つけたので，こっちに従うことにする。 親切じゃないかOSOYOO

http://osoyoo.com/2017/01/18/install-3-5-hdmi-touch-screen-linux-driver-on-raspberry-pi/ 

ちなみに，「OSOYOO customized image for raspberry pi 3.5" touch screen」というのがあって，これは既にドライバがインストールされているOSらしい。OSをまだ用意していない，というヒトはこっちをSDカードに書き込めば，最初からKeDeiのディスプレイが使えるということらしい。


[ Install Raspbian to Raspberry Pi 3 ] 

さて，話をもとに戻しましょう。

1.　SDカードに書き込みが完了したら， SDカードをラズパイに入れて，HDMIを普通のディスプレイに繋いで，電源をつなぐ。

そしたら，起動！Settingも何もなくて起動してびっくり。


[ Connect WiFi in a proxy environment ]

Proxy環境なので，ネットにはつなげないらしい...面倒。とりあえずWiFiでプロキシ使うSSIDに繋いでください。そこから以下の設定。

1.　ターミナルで

sudo leafpad /etc/apt/apt.conf

でエディタ開いて（もともとないので新規作成になるけど），

Acquire::http::proxy ""http://*****:8080";
Acquire::https::proxy ""http://*****:8080";
Acquire::ftp::proxy ""http://*****:8080";

と書いたファイルを作成します。 nanoという，ターミナル上のエディタでも編集できるみたいだけど，ムヅカシイので，初心者はleafpad推奨。

2.　もうひとつ，ファイルを編集。

sudo leafpad .bashrc

と打つと，既存のファイル (.bashrc) を編集できます。

3.　このファイルの最後に以下を追加します。

export http_proxy=http://*****:8080/
export https_proxy=http://*****:8080/
export ftp_proxy=http://*****:8080/

4．注意点として，GUI環境では，ブラウザをターミナルから立ち上げないとProxy通らないのです。ブラウザを立ち上げるためには，

chromium-browser &

を実行しましょう。


[ Install a 3.5 inch touch display driver ]

さて，ネット環境が整ったら，タッチディスプレイを接続しましょう。

1.　まず，Chromiumブラウザから，HDMI ドライバのダウンロード。

以下からもらいましょう。

http://osoyoo.com/driver/LCD_show_35hdmi.tar.gz

 【ちなみにKeDeiのサイト】

http://kedei.net/raspberry/raspberry.html

2.　圧縮ファイルを，「pi」フォルダに移動させます。

3.　次に，ターミナルを起動。ブラウザ見ながらだと，そのターミナルはいじれないので，もう1つ追加で立ち上げましょう。

4.　余計な設定を全部飛ばすと，以下のコマンドだけ，打てば終わり！

・ファイルを解凍して，そこにカレントディレクトリを移す

sudo chmod 777 LCD_show_35hdmi.tar.gz
tar -xzvf LCD_show_35hdmi.tar.gz
cd LCD_show_35hdmi

・好きな解像度を選んでインストール。

sudo ./LCD35_480*320

480*320の部分は，好みに応じて 720*480 か 810*540 に変えてね。

このままちょっと待つと，解像度が切り替わります。


[ Connect the 3.5 inch touch display ]

1.　さて，その次は，OSOYOOをガチャっとくっつける。
　ピンにささないといけないのですが，向きは「これしかないだろ」的にくっつければOKです。

2.　ピンが接続できたら，付属の HDMIケーブル（とは言わないけど，接続部品）を使って，ラズパイとディスプレイを接続します。

3.　ディスプレイのスイッチを入れます。右左に動くのが地味についています。

終了！

もしもタッチが反応しなかったら，再起動するといいと思います。

Unity 5.5 0f3 with Leap Motion Hands Module 2.0

is not working! It says there is a compile error (s?).

Use Unity 5.4.3 if you import Leapmotion handsmodule.
Be careful!

Leap motionのhandsmoduleはUnity 5.5 では動かないようです。
時間無駄しました。5.4.3使ったらエラーなく動きました。
現時点では誰も報告していないようなので，とりいそぎ。

Show hands captured by Leap motion in Oculus DK2 with Windows 7, Unity 5.4.3, and Leap Orion 1.3.3 (core asset + Hands module assets)

Pupil Labs

I bought Pupil labs eye tracking camera system. The hardware looks very cheap, but the software is not bad. It run on My macbook air, though it is unstable and sometimes crashes.

The accuracy of gaze points is better than I expected. The above movie shows an example.

Oculus and VR player setting notes

ヘッドマウントディスプレイを買ったはいいけれど，なにかコンテンツがない場合には宝の持ち腐れですよね。私も，実験に使おうと勝手は見たものの，全く使わずに放置でした。とりあえずヘッドマウントディスプレイ（Oculus DK2）を使用して動画を見る方法は確立したので，メモします。他のヘッドマウントでも簡単に見られると思います。

360度動画（画像），およびヘッドマウントに対応しているMovie playerは色々あるようですが，一番使い勝手が良かったのは，VR Playerです。

同様の機能を持つものに，GoPro VR Playerがあります。これは，昔Koler Eyesっていう名前でしたが，いつのまにか変わっていました。ちなみにこっちは，私の環境ではすぐに設定できなかったのでポイっとしました。

[ How to use VR Player ]
インストールしたら，ドラッグ＆ドロップで動画を再生できます。
Install a VR player into your computer and drag&drop a movie file onto it.

設定項目は，上のツールバーにあります。細かいものは，「Tools→Settings」へ。
基本的な 「Media」「Device」のみをいじります。

RICHO Thetaなどで撮影した360度動画をHMDで見たい場合 
If you want to watch 360° movie using a head mounted display.

Media　
-- Format: Mono
-- Projection: Sphere
-- Effects: None

Device　
-- Layout: Side by side
-- Distortion: Barrel (None)
-- Tracker: Oculus Rift DK2 (Choose own device's name)

Mediaが入力側，Deviceが出力側の設定だと考えれば簡単です。
Media and Device are for input and output settings respectively.

もし動画が既に両眼用（左右に動画が二つ並んでいる）になっている場合には，
If your movie file is dual one,

Media　
-- Format: Side by side
としてください。

HMDを使わずにPCでみたい場合には，
If using PC display,

Media　
-- Format: Mono
-- Projection: Sphere
-- Effects: None

Device　
-- Layout: Mono
-- Distortion: None
-- Tracker: Mouse (None)

とするといいでしょう。
マウスは一回クリックすると，操作モードになり，もう一度クリックすると戻ります。


【Amazon リンク】



　　　Oculus Rift 製品版       Galaxy Gear VR（スマホ入れるタイプ。安い）

とりあえず安く体験してみたい方は1000円でハコスコが売っているので，買ったらいいと思います。

動画を撮影する方も，RICHO Thetaを皮切りに，どんどん出ています（ｉＰｈｏｎｅに付けるのも売ってますね）ので，自分でコンテンツ作るのも非常に楽になってきています。





RICHOTHETAです。新しいモデルは綺麗だし，使いやすくなっていいですね。