aeroTAP 3D カメラを使ったVTuberアバターの作成!

3DiVi NuiTrack for aeroTAP (スケルトントラッキング SDK)

VTuberアバターなどスケルトン トラッキングを利用したアプリケーションの開発を安価に、簡単に行うためのミドルウェア NuiTrack for aeroTAP を準備しました。
NuiTrack SDK for aeroTAP を使って、スケルトントラッキングを使ったアプリケーションの開発が可能です。
Windows Windows 7, Windows 8, Windows 10で実行可能です。

重要:aeroTAP 3D USB カメラ(3cmベースライン)を使う場合、上半身のトラッキングのみが可能です。また、カメラからの認識可能な範囲が狭いことに注意してください。
左の動画は、aeroTAP 3D USB カメラとaeroTAP 3D GS カメラでの比較になります。

[評価環境の準備]
■ Microsoft Visual Studio 2015 または 2019の開発環境

■ Unity 2019.2.11f1

■ NuiTrack for aeroTAP のダウンロード

■ 3Divi NuiTrack SDK のダウンロード

a) ダウンロードしたexeファイルを実行します。
b) インストーラが開始されます。手順に従ってインストールを進めます。

c) 環境変数 NUITRACK_HOME は、自動的に追加されます。
d) 環境変数設定を反映するために、コンピュータを再起動します。

■ aeroTAP OpenNI2 ドライバの設定

最新版のaeroTAP OpenNI2を利用するには、下記の手順に従ってください。
a) 最新版ドライバ aeroTAP_OpenNI2.zipをダウンロードし、展開します。
b) x86またはx64フォルダーの以下のファイルを C:\Program Files\Nuitrack for aeroTAP\nuitrack\bin ( デフォルトインストール先) フォルダーに上書きコピーします。
aeroTAP_CAM.dll
eSPDI.dll
c) x86またはx64フォルダーのaeroTAP OpenNI2ドライバをC:\Program Files\nuitrack\nuitrack\OpenNI2\Driversフォルダーにコピーします。
aeroTAP.dll
aeroTAP.ini
ヒント: aeroTAP.ini の設定の詳細については、aeroTAP用 OpenNI2ドライバーを参照してください。

以上で準備が完了です。まず、aeroTAP 3D カメラを接続して、nuitrack\binフォルダー内の、サンプルプログラム nuitrack_sample.exe を実行して、設定が正しいことを確認してください。

NuiTrack for aeroTAP 日本語ドキュメントは、こちらのSDKに含まれるものではなく、こちらのサイトを参照してください。
>> NuiTrack for aeroTAP 日本語ドキュメントを開く

>> nuiTrack for aeroTAP x64版 ダウンロード ( 2020.05.05 最新版 )

>> nuiTrack for aeroTAP x86版 ダウンロード ( 2020.05.05 最新版 )

>> 3Divi NuiTrack SDK 1.50ダウンロード

重要: 使用するカメラ毎にライセンスが必要です。ライセンスされていない場合には、無料評価用として3000フレームまで機能しますが、3000フレームを超えると深度画像を取得できなくなります(カラー画像のみ)。

NuiTrack for aeroTAP ライセンス

カメラ1台毎にライセンスが必要になります。カメラ購入時にお申し込みください。
ライセンスの購入は、弊社直営サイト shareEDGEよりお問い合わせください。

対応OS Windows 7, 8, 10 32bit/64bit
Ubuntu 64bit
対応 3Dセンサー aeroTAP 3D USB カメラ (3cm Baseline)
aeroTAP 3D USB GS カメラ ( 6cm Baseline )
特長
Unity サンプル( aeroTAP 3D GS )

  • 全身スケルトンのトラッキング (19 関節)
    (最大 6スケルトン、デフォルト 2スケルトン)
  • ジェスチャ認識
  • フェイストラッキング ( 性別、年齢、感情 )
  • Unity プラグイン
無料評価版 実行フレーム制限付き
NuiTrack for aeroTAP での無料評価が可能です。
NUITRACK PRO 12,000円
*aeroTAP 3D カメラ毎のライセンス 10台を超える、ボリューム割引に関しては別途お問い合わせください。

>> NuiTrack for aeroTAP ライセンスの購入

>> NuiTrack for aeroTAP に関するお問い合わせ

NuiTrack for aeroTAP VTuber 無料デモ

だれでも簡単VTuber デモソフトウェアを提供しています。
NuiTrack for aeroTAP ライセンスをお持ちの方に配布しています。 非商用目的で自由にご利用ください。

    •  - 上半身アバター
    •  - いくつかのアバターを切り替え
    •   - 顔の表情

Unity ソースコードで自分のアバターを利用する方法などお問い合わせください。


>> VTuber アバター に関するお問い合わせ

NuiTrack for aeroTAP 日本語ドキュメント

NuiTrack for aeroTAP 日本語ドキュメントを準備しました。
英語版を元にしたもので、デバイスや利用環境の制限などに関して一部違いがありますのて注意してください。

>> NuiTrack for aeroTAP 日本語ドキュメントを開く

カメラとの距離 aeroTAP 3D USB (3cm ベースライン)の場合、80cmから1.5m程度、上半身でのスケルトントラッキングとなります。
服装の色など制限はありません。
暗い部屋での利用には適していません。
Android 版対応 Android 版については、追って準備を進めています。
ライセンス形態 フル版ライセンスは、aeroTAP 3D USB カメラ毎に必要になります。別途ライセンスをお申し込みください。