プログラマーに聞きたいんだがVtuberの仕組みってどうなってんの?センサーみたいのつけてんの?

1 名前:ひみつの名無しさん 投稿日時:2020/01/25(土) 23:39:31.343 ID:E+KTuV5I0
複数のカメラと何箇所かセンサーつけてるのか、

それとも、

もう人工知能でやってるからセンサーなんかなくても指先までしっかり動くのか

でも複数の人が同時に動くには、この人はこのキャラクターっていう認識というか何かしらのセンサーが必要だよな?

2 名前:ひみつの名無しさん 投稿日時:2020/01/25(土) 23:40:31.738 ID:KjDONHQNr
そうだよ
3 名前:ひみつの名無しさん 投稿日時:2020/01/25(土) 23:40:51.582 ID:E+KTuV5I0
あと、スマホアプリなんかのしょぼいやつだとガタガタするけど最近のVtuberはそれがないよな
4 名前:ひみつの名無しさん 投稿日時:2020/01/25(土) 23:42:27.629 ID:RnzucAuF0
ヒント 無地の壁紙 画像認識
5 名前:ひみつの名無しさん 投稿日時:2020/01/25(土) 23:44:09.106 ID:E+KTuV5I0
Live2Dなんかは簡単な画像認識でいけるだろうけど
体全体の3Dになると違うよな指先まで動いてるし
8 名前:ひみつの名無しさん 投稿日時:2020/01/25(土) 23:56:58.444 ID:lJD43AmA0
指先含む体中にピンポン玉みたいなトラッカー着けてカメラで位置と表情追って反映させてる
ホロは200万くらいのカメラ入れたらしい
これはかなりの負荷だから今の技術じゃ大人数を同時にはできない
10 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:00:06.004 ID:zhFA0ad20
>>8
ホロライブは本格的なモーションキャプチャーやってんのな
俺も大学で触ったことあるわ
あれ結構技術としては昔からあるのにな
14 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:07:17.797 ID:RQBSX8+Z0
>>8
なるほどな
この前のライブで全メンバー出てきたときは
個別に撮ったものを合成してた感だったわ
それでも泣きながら見てたけどな俺
9 名前:ひみつの名無しさん 投稿日時:2020/01/25(土) 23:57:48.930 ID:Pv2eU0z20
院で入った研究室がVRやってたけどkinectとか使うんじゃないの
表情については画像認識で3Dモデルと同期させてんでしょ
11 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:00:33.960 ID:IJwzEM79d
にじさんじ系は単眼カメラ使って表情、位置を認識してそれにあわせてlive2dで画像を動かしたり歪ませたりしてる
12 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:03:52.373 ID:zhFA0ad20
VtuberにVRをやたら求める人いるけど
そんならVRの学会にでも行ったほうが
よっぽど求めてるもの見れると思うんだけどな
13 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:06:25.478 ID:KZgn+TRv0
>>12
VRの学会って何学会の何分科会のこと言ってる?
15 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:08:26.354 ID:zhFA0ad20
>>13
知るか。そんなもの自分で調べろ
研究の領域にあるものに興味があるなら
学会を覗きに行けば済む話だと言いたいだけだ
24 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:18:30.532 ID:KZgn+TRv0
>>15
VRが研究の領域…?
きみ高卒じゃないとしたら20年前の世界から書き込んでるの?
26 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:30:31.729 ID:zhFA0ad20
>>24
文脈読み取れない馬鹿ほど人を馬鹿にしたがる典型だなw

ホロのページ漁ってたけどVIVE Xってやつね

16 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:09:15.156 ID:RQBSX8+Z0
ホロライブで今のところ4人同時が最大かな
単純にカメラが8台あるんかね
17 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:09:19.151 ID:k/9U0rRX0
たった産業で高卒丸出しにできるのすごい
18 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:10:57.774 ID:zhFA0ad20
>>17
お前は内容のない煽り使って底辺ニート臭出すのがうまいな
19 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:11:47.033 ID:RQBSX8+Z0
でも今回のライブで数億は利益上げただろうから完全に全メンバー同時キャプチャーを成し遂げる環境を作って欲しいかも
20 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:12:49.319 ID:lpg7anUU0
>>19
売上は数億でも利益はどの程度だろうね…
21 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:15:03.326 ID:RQBSX8+Z0
>>20
違う、利益が数億
売り上げは数十億は余裕
ニコニコ配信だけでも8000円が5万人だとしても4億だからな
22 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:15:05.483 ID:zhFA0ad20
>>19
んなもんほいとできたら苦労せんだろ
23 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:16:33.207 ID:RQBSX8+Z0
いやできるだろうけど突然壊れたときのリカバリーが難しいだろうな
25 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:22:33.308 ID:RQBSX8+Z0
ホロライブのライブの話ばかりになるけど今回の物販の部分は残念だったらしいな
人がスムーズに流れなかったのとペンライトも売り切れになったとか反省点は多いらしい

頭の良い人がいろいろ想定して計算してただろうけどそれをはるかに上回ったのかな

27 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:39:56.602
OpenCV使ってリアルタイム顔認識させてアバターとシンクロさせてんだろ
28 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:47:56.604 ID:zhFA0ad20
VIVE Xは支援プログラムなだけだったわ

>>27
へー教えてくれてありがとう

29 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 00:50:05.837 ID:VXoerJk0r
有名どこの3DのVの顔は全部スイッチ式だぞおそらく
30 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 01:00:58.587 ID:OCLTnTl+0
>>29
少なくともホロライブ は違うよ
例えば笑った顔になるにはホロライブはガチで笑う必要がある
作り笑いじゃ笑った顔にならない
31 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 01:12:08.854 ID:zhFA0ad20
結局原理としてはカメラの画像からOpenCVとかで地道に認識してるだけなのね
全身のためにはそれなりのカメラ設備が必要になると

あと、ホロライブって指先はデータグローブ使ってるらしいじゃん

33 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 01:29:39.848 ID:zhFA0ad20
論文読んでたらやっぱ東大のkinect使ってるじゃねぇか
35 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 01:56:05.300 ID:OCLTnTl+0
でも複数人同時はどうやってキャラ認識してるんだろう
36 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 02:00:32.809 ID:zhFA0ad20
>>35
それはOpenPoseの方読んでくれ
てかそろそろ詰まらん仕事に戻ろうかな
やっぱ腐っても院生だから論文読むの楽しいんだけどな
37 名前:ひみつの名無しさん 投稿日時:2020/01/26(日) 02:09:22.762 ID:OCLTnTl+0
何かしら物理的に個別にセンサーをつけておかないとキャラの識別は不可能だよね

ホロライブのぺこみこがツイスターのゲームをやって体が複雑に絡み合っててもちゃんと表示されてたから技術のすごさはわかった

コメント

タイトルとURLをコピーしました