22 Oct 2012, 07:30

KinectとMMDを組み合わせて落語をしてみた(その2)

前回の記事に引き続き、Kinect for WindowsとMMDを組み合わせて、落語をしてみたので、アップロードします。

KinectとMMDを使って落語をしてみた。

MMD古典落語3品

寿限無

[http://www.youtube.com/embed/5JpCXKQzJsg]

 

がまの油

[http://www.youtube.com/embed/sVJ5OpWfb8k]

 

あたま山

[http://www.youtube.com/embed/MFW_eOixg_Q]

 

Kinect落語の課題

技術的なところは前回となにもかわっていないけれども、いくつか課題に気づいた。

Kinect で記録できる時間が7分くらいしかない

MikuMikuMovingでモーションを記録していると、7分くらいモーションを記録したところで、記録が止まっていることに気づく。(そのせいで、何度撮り直したことか・・・)

解決策が是非欲しいところ。Youtubeへのアップロード時間も考えると、長い話の場合は、分割したほうがいいのかな?

リップシンクは手動での記録しかみつからない

自分のリップシンクの理想では、音声に合わせて口パクしてくれるソフトが欲しかったが、そのようなソフトは見つからなかった。

手動で、タイミングを教えてあげる必要がある。

それだと、ちょっと時間がかかりすぎるので、挫折。

手動でのリップシンク補助ソフトには以下のようなものがあった。

21 Oct 2012, 11:46

KinectとMMDを使って落語をしてみた。

前回は、Kinect for Windowsと MikuMikuMovingを組み合わせて、3DのキャラクターをKinect で操作する方法を知らべた。

Kinect for Windows によるMMDの使い方

今回は、それをちょっと応用してみて、Kinect で 落語をしてみた。

(実はこれがやりたくて、Kinectを購入した)

味噌豆 on MMD

[http://www.youtube.com/embed/eb3YkpOUrNQ]

演じてみたのは、古典落語の小噺『味噌豆』。

出囃子は志ん生師匠の一丁入りを拝借しています。

(http://www.youtube.com/watch?v=RK0UUX-K31s)

ステージは、MMD演芸場(http://www.nicovideo.jp/watch/sm12172730)

モデルは、双音レンジ(http://mmd.dip.jp/files/320)

を利用させていただきました。

もう少し改善したい点は、

  • 手の仕草(パーしかできない)
  • 表情
  • リップシンク
  • 自分の部屋の狭さ(えっ?(・0・)?)

まあ、鑑賞に堪える(耐える?)ようなので、よしとしよう。