普通のWebCamで3Dキャラクター(Unityちゃん)を動かすよ！

Unity 2017.1.0f3
RealSenseSDK 2016R3 core & face

カメラに映った顔から、キャラクターの位置、頭の向き、表情を反映できます。
起動時に選択した録音デバイスの音量に合わせて口が動きます。
マウスでカメラ操作ができます。

動画制作や配信等でクロマキー合成してお使いください。
調整や拡張はご自由に行ってください。

カメラの初期化はRealSenseSDK任せなので、認識させたいカメラのみPCに接続してください。
音声入力デバイス選択が上手く動作しない場合は、デバイス名を全て半角にしてみてください。(要再起動)

./CharWebCam/MMD_Sample/RS_Kotonoha.csと
./CharWebCam/MMD_Sample/MM_Kotonoha.csは
以下のMMDモデル向けですが、MMD4Mとモデルは規約に基づき同梱していません。
http://www.nicovideo.jp/watch/sm24368983
別途MMD4Mとモデルを追加した上で、Unityちゃんのシーンを元に作ってもらえればと思います。

参考 http://qiita.com/Hv2RMjHzDyqXVIr/items/7e1aca3506a05aa20644

© Unity Technologies Japan/UCL

ご利用は自己責任で！！
特にMMDモデルのご利用はMMD4Mの注意事項およびモデル付属の文書をよく読みましょう。
そして版権モデルの場合は版権元の規約も読みましょう。

https://1drv.ms/u/s!Ass7Jg1DXnrDlBoBFcokzBZX2Tm9
開発環境のPCと手持ちのノートで動作確認していますが、正直怪しいのでダメだったら教えてください。
※保存先のパスに全角が混ざるとダメらしいので、半角のみで構成される保存先(パス)に置いて実行してください。

https://1drv.ms/u/s!Ass7Jg1DXnrDmR83V47_raOXKTUj
ここで公開しているものを使ってプロ生ちゃん版を作ってみました。