We live Heartsnative!! の科学力!?の一部解説 #mosaiclive
2/20に行われた We live Heartsnative!! で映像再生やらインタラクティブシステムやらを担当させていただきました。
私の担当する部分のシステム構成は、映像側にMacBook2台(1台はBootCampでWinXP)とMacBookPro1台の合計3台、ステージ側に音関係用にMacBook1台でした。
見に来てくれた友人に「お前が何やってるか分からなかったけど楽しかった」という感想をもらったので実際何をやっていたかを感想を交えて振り返ってみます
基本的には、メインのスクリーンの映像の表示は全てやりました。失敗すると進行にモロ影響がでるので結構ドキドキでした

後は、元々参加型のインタラクティブ作品を作っていたのもあって、何かしら参加型ができたらなーというのもありました。
今回は全てのソフトを、Max/MSP/Jitter かQuartz Composerで作成しています。
開場から開演までと終了後のスクリーン上で Twitter リアルタイム表示
まず、開場するとお客さんが入場し、開演までちょっと時間があるのですが、そこでスクリーンにこんな感じにメッセージを表示してTwitterにポストしてもらいました。
実際には、#mosaiclive というハッシュタグをつけて投稿されたメッセージがほぼリアルタイムに表示されるという状態になるので、それに気づいたお客さんがネタ的投稿をしてそれを見て開場が盛り上がる、、といった面白い状況になりましたw
ほぼ同じ仕組みをライブ終了後にも、スクリーンに表示しました。
やっぱり参加型だと、想像を越えて楽しんでもらえるなーといつも思います
歌って踊る Motion Portrait さんの3Dのようなミクさん
ライブ中にサイドのパネルとは別に歌って踊るミクさんが登場したのですが、これは Motion Portraitさんの技術によって2Dの画像から作成されていたのです
正直これを始めてみたときは、現代の技術ってすげーーと思いましたw
口パクもミクさんの歌声にあわせてやってくれます
後、ねんどろいど版のミクさんもいましたが、こちらも同じ技術で1枚の写真から作られてます。
このミクさん達に、曲によって背景を用意してあげてライブに登場させました
幕間劇や曲中の映像を流すためのソフト
今回はメインスクリーン全部担当ということで、幕間劇から曲中に流す口パクもあるPV的な映像、歌詞の表示される映像を流す必要があったのですが、とある事情で音とシンクさせることができず、タイミング的にシビアなものもあったりと普通の再生プレイヤーでは無理でした。
そこで、自分が使いやすいように機能を追加した再生プレイヤーを作りました。(上記画像は開発中のものです)
遅れた場合に少し再生速度をあげて、また通常に戻して、、といったことができるように工夫しています。
リアルタイムでお話するミクさん
今回の個人的目玉に、リアルタイムでお話をするミクさんを登場させるという試みがありました。
通称ミクタイプと呼んでまして、これはローマ字入力で文字を打つと、若干棒読みだけどミクさんがしゃべるというある意味画期的なソフトです(笑
今回はゲストのデPさんとcosMoさんと会話するということで、2バージョン作りました。実際の会話は楽しい脚本を書いてくれたライターさんにやっていただきました。
モザミクブラザーズに登場!ミクフレーズ
DSやiPhoneなどガジェットで演奏するモザミクブラザーズの演奏の中で、みーこさんが鍵盤のキーボードとPCのキーボードが一体となったものでミクのボーカルを演奏しているのですが、このソフトウェアの部分も作りました。
これは演奏する方がタイミングなどシビアで、みーこさんがすごかったですw
リアルタイムにメンバーと踊るSDキャラのミクさん
みーこさんの発案で小さいみくさんを一緒にライブ映像で登場させるというものがあったので、カメラの映像とGifアニメのイラストをリアルタイムに合成できるアプリを作成しました。
(写真は開発中のものです)
これは、原因がよくわからないバグがあって表示におかしな部分がありましたが、ライブ前日になんとか解消してうまくいきました
Wiiリモコンでしゃべるミクさん
今回はかやもりさんが利用していたのですが、Wiiリモコンでミクさんと(きまったフレーズだけど)会話ができるソフトです。
WiiリモコンでBluetooth接続なので、もっとも心配な部分ではありましたが無事最後まできちんと動いてくれました
リアルタイム映像とTwitterの最新ポストを3D空間上に表示
鶴田さん登場後の曲で使ったのですが、リアルタイムの映像とCDジャケット写真やロゴなどをキューブ上に写し、#mosaiclive のハッシュタグのつぶやきをリアルタイムに表示しました。(ライブ中は携帯禁止なので、開演時やその前に発言していただいたものも表示しました。)
この直前に、ライブに来ることができなかった皆さんにも、今から会場のスクリーンに表示されるからメッセージを!とTwitterで呼びかけて、応援メッセージをいただきました。
若干ライブ会場にいるお客さんの中でもつぶやいている人がいたようですがみなさんのご協力により映像がつくられました
といった感じで個人的にも盛りだくさんで、いろいろあったけどいやーほんと楽しかったです
MOSAIC.WAVのお二人、関係者のみなさん、会場やネット上から参加していただいた皆さん、ありがとうございました
さらに技術的なことは、いずれ自分の忘備録も兼ねて別のブログに書くと思いますので、興味がありましたらチェックしていただければと思います。
I?m not that much of a internet reader to be honest but your blogs
really nice, keep it up! I'll go ahead and bookmark your website to come back in the future.
Cheers
投稿: Business Growth | 2019年12月10日 (火) 03:14
I am really impressed with your writing skills
and also with the layout on your blog. Is this a paid theme
or did you modify it yourself? Either way keep up the excellent quality writing,
it is rare to see a nice blog like this one these days.
投稿: negligee | 2019年12月13日 (金) 04:02
You are a very smart individual!
投稿: online clothing store website builder | 2019年12月13日 (金) 23:54
You are a very capable individual!
投稿: ladder shelf | 2019年12月15日 (日) 02:55
I leave a response when I especially enjoy a post on a site or if
I have something to contribute to the discussion. Usually
it is caused by the sincerness displayed in the article
I read. And after this article hayaseblog :
We live Heartsnative!! の科学力!?の一部解説 #mosaiclive.
I was actually excited enough to write a commenta response
投稿: SEO Company India | 2019年12月16日 (月) 04:25
You can definitely see your enthusiasm in the article you
write. The world hopes for even more passionate writers like you who aren't
afraid to mention how they believe. All the time follow your heart.
投稿: design thinking and agile | 2019年12月17日 (火) 01:28
Some really excellent posts on this internet site,
regards for contribution.
投稿: clever fit Berg am Laim | 2019年12月17日 (火) 06:59
I leave a response each time I like a post on a site or if I have something to add to the conversation. It is triggered by the passion communicated in the article I read.
And on this article hayaseblog : We live Heartsnative!! の科学力!?の一部解説 #mosaiclive.
I was actually excited enough to post a thought :-) I do have some questions for you
if it's okay. Could it be only me or do some of the responses appear as if they are written by brain dead people?
:-P And, if you are writing on other social sites, I
would like to follow you. Could you list all of your communal sites like
your Facebook page, twitter feed, or linkedin profile?
投稿: w88 | 2019年12月17日 (火) 08:19
Hello friends, how is the whole thing, and what you want to say regarding this post, in my
view its truly awesome in support of me.
投稿: gray wigs for black women | 2019年12月19日 (木) 06:25
You are a very clever individual!
投稿: loa kẹo kéo giá rẻ | 2019年12月20日 (金) 07:23
Keep this going please, great job!
投稿: data recovery cape town | 2019年12月20日 (金) 20:05
thank you for this post, I am a big fan of this
website would like to keep updated.
投稿: hard drive data recovery service | 2019年12月20日 (金) 22:30
I comment whenever I especially enjoy a post on a website or I have something to add to the discussion. It is caused by the fire displayed in the
article I looked at. And on this article hayaseblog :
We live Heartsnative!! の科学力!?の一部解説 #mosaiclive.
I was moved enough to drop a thought :-P I do have a few questions for you if you tend not to mind.
Could it be only me or does it look like like some of these responses come across like they are left by brain dead folks?
:-P And, if you are writing on other social sites, I would like to keep up with anything
new you have to post. Could you list every one
of your shared pages like your twitter feed, Facebook page or linkedin profile?
投稿: raquetas pelotas | 2019年12月22日 (日) 04:04
magnificent points altogether, you simply won a
logo new reader. What could you recommend in regards to your submit that you just made a few days in the
past? Any positive?
投稿: 마사지코리아 구인구직 | 2019年12月23日 (月) 03:37
What's up mates, how is all, and what you would
like to say on the topic of this post, in my view its really amazing in support of
me.
投稿: لیست تمام سایت های شرط بندی | 2019年12月24日 (火) 02:42
Some truly wonderful blog posts on this website,
appreciate it for contribution.
投稿: https://wscnaturalhealings.com/collections/pills | 2019年12月24日 (火) 18:09
Very well written information. It will be supportive to anybody who usess it, as well
as myself. Keep up the good work - i will definitely read more posts.
投稿: How Much Should I Feed My Cat | 2019年12月26日 (木) 02:48
If some one needs to be updated with newest technologies then he must
be pay a visit this web site and be up to date daily.
投稿: TKR Surgery in Delhi | 2019年12月27日 (金) 00:16
If some one needs expert view concerning running a blog then i advise him/her to go to
see this webpage, Keep up the fastidious job.
投稿: Autoankauf | 2019年12月28日 (土) 01:39
Wohh just what I was searching for, thanks for posting.
投稿: Benbrook Nondenominational Church | 2020年1月 3日 (金) 01:34
You are a very smart individual!
投稿: nutrisystem vs jenny craig reviews | 2020年1月 4日 (土) 21:21
Oh my goodness! Incredible article dude! Thanks, However
I am encountering troubles with your RSS. I don't know why I can't join it.
Is there anybody else having identical RSS issues?
Anybody who knows the answer will you kindly respond? Thanx!!
投稿: batterie recycling near me | 2020年1月 6日 (月) 01:54
At this time it looks like BlogEngine is the top blogging
platform available right now. (from what I've read) Is that what
you're using on your blog?
投稿: Direct Response Copywriting | 2020年1月 6日 (月) 23:45
I truly appreciate this post. I have been looking all over
for this! Thank goodness I found it on Bing. You've made my day!
Thank you again!
投稿: copywriting services | 2020年1月 7日 (火) 04:50
Howdy would you mind sharing which blog platform you're using?
I'm looking to start my own blog soon but I'm having a hard time deciding between BlogEngine/Wordpress/B2evolution and Drupal.
The reason I ask is because your layout seems different then most blogs and I'm looking for something unique.
P.S Apologies for being off-topic but I had to ask!
投稿: Stop Snoring | 2020年1月 9日 (木) 05:17