We live Heartsnative!! の科学力！？の一部解説 #mosaiclive
2/20に行われた We live Heartsnative!! で映像再生やらインタラクティブシステムやらを担当させていただきました。
私の担当する部分のシステム構成は、映像側にMacBook2台（1台はBootCampでWinXP）とMacBookPro1台の合計3台、ステージ側に音関係用にMacBook1台でした。
見に来てくれた友人に「お前が何やってるか分からなかったけど楽しかった」という感想をもらったので
実際何をやっていたかを感想を交えて振り返ってみます
基本的には、メインのスクリーンの映像の表示は全てやりました。失敗すると進行にモロ影響がでるので結構ドキドキでした
後は、元々参加型のインタラクティブ作品を作っていたのもあって、何かしら参加型ができたらなーというのもありました。
今回は全てのソフトを、Max/MSP/Jitter かQuartz Composerで作成しています。
開場から開演までと終了後のスクリーン上で Twitter リアルタイム表示
まず、開場するとお客さんが入場し、開演までちょっと時間があるのですが、そこでスクリーンにこんな感じにメッセージを表示してTwitterにポストしてもらいました。
実際には、#mosaiclive というハッシュタグをつけて投稿されたメッセージがほぼリアルタイムに表示されるという状態になるので、それに気づいたお客さんがネタ的投稿をしてそれを見て開場が盛り上がる、、といった面白い状況になりましたｗ
ほぼ同じ仕組みをライブ終了後にも、スクリーンに表示しました。
やっぱり参加型だと、想像を越えて楽しんでもらえるなーといつも思います
歌って踊る Motion Portrait さんの3Dのようなミクさん
ライブ中にサイドのパネルとは別に歌って踊るミクさんが登場したのですが、これは Motion Portraitさんの技術によって2Dの画像から作成されていたのです
正直これを始めてみたときは、現代の技術ってすげーーと思いましたｗ
口パクもミクさんの歌声にあわせてやってくれます
後、ねんどろいど版のミクさんもいましたが、こちらも同じ技術で1枚の写真から作られてます。
このミクさん達に、曲によって背景を用意してあげてライブに登場させました
幕間劇や曲中の映像を流すためのソフト
今回はメインスクリーン全部担当ということで、幕間劇から曲中に流す口パクもあるＰＶ的な映像、歌詞の表示される映像を流す必要があったのですが、とある事情で音とシンクさせることができず、タイミング的にシビアなものもあったりと普通の再生プレイヤーでは無理でした。
そこで、自分が使いやすいように機能を追加した再生プレイヤーを作りました。（上記画像は開発中のものです）
遅れた場合に少し再生速度をあげて、また通常に戻して、、といったことができるように工夫しています。
リアルタイムでお話するミクさん
今回の個人的目玉に、リアルタイムでお話をするミクさんを登場させるという試みがありました。
通称ミクタイプと呼んでまして、これはローマ字入力で文字を打つと、若干棒読みだけどミクさんがしゃべる
というある意味画期的なソフトです（笑
今回はゲストのデＰさんとcosMoさんと会話するということで、2バージョン作りました。実際の会話は楽しい脚本を書いてくれたライターさんにやっていただきました。
![[image]](http://hayase.lekumo.biz/photos/uncategorized/2014/03/19/6a0120a85ce28c970b0120a8c3ceed970b.jpeg)
![[image]](http://hayase.lekumo.biz/photos/uncategorized/2014/03/19/6a0120a85ce28c970b0120a8c3ce92970b.jpeg)
モザミクブラザーズに登場！ミクフレーズ
DSやiPhoneなどガジェットで演奏するモザミクブラザーズの演奏の中で、みーこさんが鍵盤のキーボードとＰＣのキーボードが一体となったものでミクのボーカルを演奏しているのですが、このソフトウェアの部分も作りました。
これは演奏する方がタイミングなどシビアで、みーこさんがすごかったですｗ
リアルタイムにメンバーと踊るSDキャラのミクさん
みーこさんの発案で小さいみくさんを一緒にライブ映像で登場させるというものがあったので、カメラの映像とGifアニメのイラストをリアルタイムに合成できるアプリを作成しました。
（写真は開発中のものです）
これは、原因がよくわからないバグがあって表示におかしな部分がありましたが、ライブ前日になんとか解消してうまくいきました
Wiiリモコンでしゃべるミクさん
今回はかやもりさんが利用していたのですが、Wiiリモコンでミクさんと（きまったフレーズだけど）会話ができるソフトです。
WiiリモコンでBluetooth接続なので、もっとも心配な部分ではありましたが無事最後まできちんと動いてくれました
リアルタイム映像とTwitterの最新ポストを3D空間上に表示
鶴田さん登場後の曲で使ったのですが、リアルタイムの映像とＣＤジャケット写真やロゴなどをキューブ上に写し、#mosaiclive のハッシュタグのつぶやきをリアルタイムに表示しました。（ライブ中は携帯禁止なので、開演時やその前に発言していただいたものも表示しました。）
この直前に、ライブに来ることができなかった皆さんにも、今から会場のスクリーンに表示されるからメッセージを！とTwitterで呼びかけて、応援メッセージをいただきました。
若干ライブ会場にいるお客さんの中でもつぶやいている人がいたようですがみなさんのご協力により映像がつくられました
といった感じで個人的にも盛りだくさんで、いろいろあったけどいやーほんと楽しかったです
MOSAIC.WAVのお二人、関係者のみなさん、会場やネット上から参加していただいた皆さん、ありがとうございました
さらに技術的なことは、いずれ自分の忘備録も兼ねて別のブログに書くと思いますので、興味がありましたらチェックしていただければと思います。
| | 
| | 
I visited multiple websites but the audio feature for audio songs
current at this site is truly superb.
投稿： ip country | 2019年10月18日 (金) 04:11
With havin so much content and articles do you
ever run into any problems of plagorism or copyright infringement?
My website has a lot of exclusive content I've either written myself or outsourced but it appears a lot of it is popping it up all over the internet without my permission. Do you know any
methods to help prevent content from being stolen? I'd certainly appreciate it.
投稿： Cheryle | 2019年10月18日 (金) 04:30
magnificent points altogether, you just received a new reader.
What might you recommend in regards to your post that you just made a few days in the past?
Any certain?
投稿： 그래프게임 | 2019年10月18日 (金) 13:16
Just want to say your article is as astonishing.
The clarity to your submit is just excellent and i can assume you're an expert in this subject.
Well along with your permission allow me to grasp your RSS feed to
keep up to date with approaching post. Thanks 1,000,000
and please keep up the enjoyable work.
投稿： 메이저놀이터 | 2019年10月18日 (金) 20:45
What's up to all, how is all, I think every one is getting more from this site, and your views are nice in favor of new
viewers.
投稿： Ramiro | 2019年10月23日 (水) 23:39
Keep on writing, great job!
投稿： auditing management software | 2019年10月24日 (木) 08:37
Hello there, I found your site via Google even as searching for a similar topic, your
site got here up, it seems to be good. I've bookmarked it in my google
bookmarks.
投稿： visit here | 2019年10月24日 (木) 10:38
You are a very smart individual!
投稿： free copy editing online | 2019年10月24日 (木) 23:28
I real glad to find this site on bing, just what I was looking for :D besides saved to fav.
投稿： Tips & | 2019年10月25日 (金) 07:09
Oh my goodness! Amazing article dude! Thanks, However I am encountering
difficulties with your RSS. I don't understand the reason why I can't join it.
Is there anyone else getting the same RSS problems?
Anyone that knows the answer can you kindly respond?
Thanx!!
投稿： dallas public adjuster | 2019年10月25日 (金) 21:06
Heya! I realize this is somewhat off-topic but I had to ask.
Does running a well-established blog such as yours require a
massive amount work? I am brand new to running
a blog but I do write in my journal daily. I'd
like to start a blog so I will be able to share my
personal experience and feelings online. Please let me know if
you have any kind of ideas or tips for new aspiring blog
owners. Thankyou!
投稿： auditing software application | 2019年10月26日 (土) 00:07
You are a very capable person!
投稿： more information | 2019年10月26日 (土) 02:01
Appreciate it for this post, I am a big big fan of this
web site would like to go on updated.
投稿： more information | 2019年10月26日 (土) 04:46
This piece of writing will assist the internet visitors for setting up new weblog or
even a weblog from start to end.
投稿： auditing software | 2019年10月26日 (土) 05:42
Appreciate it for this post, I am a big fan of this site
would like to keep updated.
投稿： click here | 2019年10月26日 (土) 06:40
Appreciate this post. Will try it out.
投稿： auditing management app | 2019年10月26日 (土) 15:16
Hello, always i used to check website posts here early in the break of day,
since i love to gain knowledge of more and more.
投稿： auditing management app | 2019年10月26日 (土) 17:45
This post is worth everyone's attention. How can I find out more?
投稿： audit management software app | 2019年10月26日 (土) 18:19
I am really impressed with your writing skills as well as
with the layout on your blog. Is this a paid theme or did
you modify it yourself? Either way keep up the excellent quality
writing, it's rare to see a nice blog like this one today.
投稿： auditing software app | 2019年10月27日 (日) 20:35
Can I simply just say what a relief to find somebody who genuinely knows what they're talking
about over the internet. You certainly understand how to bring
a problem to light and make it important. A lot more people
should read this and understand this side of your story.
I was surprised that you're not more popular given that you most certainly possess the gift.
投稿： boiler replacement | 2019年10月29日 (火) 08:40
Excellent, what a blog it is! This webpage
gives valuable information to us, keep it up.
投稿： boiler installation | 2019年10月29日 (火) 09:33
of course like your web site however you need to take a look at the spelling on several of your posts.
Several of them are rife with spelling issues and I to find it very troublesome to inform the truth then again I'll certainly come back
again.
投稿： Rechargable Lighter | 2019年10月29日 (火) 22:57
I just like the helpful information you provide for your articles.
I will bookmark your weblog and take a look at once more here regularly.
I am quite sure I'll be told plenty of new stuff right right here!
Best of luck for the following!
投稿： situs agen bandarq online terpercaya | 2019年10月30日 (水) 05:03
Spot on with this write-up, I truly feel this site needs a
lot more attention. I'll probably be back again to see
more, thanks for the advice!
投稿： bola168 | 2019年10月30日 (水) 23:56
Thanks for the good writeup. It in truth used
to be a leisure account it. Look complex to far delivered
agreeable from you! By the way, how can we communicate?
投稿： daftar Agen bola terbaik | 2019年10月31日 (木) 17:14