We live Heartsnative!! の科学力！？の一部解説 #mosaiclive
2/20に行われた We live Heartsnative!! で映像再生やらインタラクティブシステムやらを担当させていただきました。
私の担当する部分のシステム構成は、映像側にMacBook2台（1台はBootCampでWinXP）とMacBookPro1台の合計3台、ステージ側に音関係用にMacBook1台でした。
見に来てくれた友人に「お前が何やってるか分からなかったけど楽しかった」という感想をもらったので
実際何をやっていたかを感想を交えて振り返ってみます
基本的には、メインのスクリーンの映像の表示は全てやりました。失敗すると進行にモロ影響がでるので結構ドキドキでした
後は、元々参加型のインタラクティブ作品を作っていたのもあって、何かしら参加型ができたらなーというのもありました。
今回は全てのソフトを、Max/MSP/Jitter かQuartz Composerで作成しています。
開場から開演までと終了後のスクリーン上で Twitter リアルタイム表示
まず、開場するとお客さんが入場し、開演までちょっと時間があるのですが、そこでスクリーンにこんな感じにメッセージを表示してTwitterにポストしてもらいました。
実際には、#mosaiclive というハッシュタグをつけて投稿されたメッセージがほぼリアルタイムに表示されるという状態になるので、それに気づいたお客さんがネタ的投稿をしてそれを見て開場が盛り上がる、、といった面白い状況になりましたｗ
ほぼ同じ仕組みをライブ終了後にも、スクリーンに表示しました。
やっぱり参加型だと、想像を越えて楽しんでもらえるなーといつも思います
歌って踊る Motion Portrait さんの3Dのようなミクさん
ライブ中にサイドのパネルとは別に歌って踊るミクさんが登場したのですが、これは Motion Portraitさんの技術によって2Dの画像から作成されていたのです
正直これを始めてみたときは、現代の技術ってすげーーと思いましたｗ
口パクもミクさんの歌声にあわせてやってくれます
後、ねんどろいど版のミクさんもいましたが、こちらも同じ技術で1枚の写真から作られてます。
このミクさん達に、曲によって背景を用意してあげてライブに登場させました
幕間劇や曲中の映像を流すためのソフト
今回はメインスクリーン全部担当ということで、幕間劇から曲中に流す口パクもあるＰＶ的な映像、歌詞の表示される映像を流す必要があったのですが、とある事情で音とシンクさせることができず、タイミング的にシビアなものもあったりと普通の再生プレイヤーでは無理でした。
そこで、自分が使いやすいように機能を追加した再生プレイヤーを作りました。（上記画像は開発中のものです）
遅れた場合に少し再生速度をあげて、また通常に戻して、、といったことができるように工夫しています。
リアルタイムでお話するミクさん
今回の個人的目玉に、リアルタイムでお話をするミクさんを登場させるという試みがありました。
通称ミクタイプと呼んでまして、これはローマ字入力で文字を打つと、若干棒読みだけどミクさんがしゃべる
というある意味画期的なソフトです（笑
今回はゲストのデＰさんとcosMoさんと会話するということで、2バージョン作りました。実際の会話は楽しい脚本を書いてくれたライターさんにやっていただきました。
![[image]](http://hayase.lekumo.biz/photos/uncategorized/2014/03/19/6a0120a85ce28c970b0120a8c3ceed970b.jpeg)
![[image]](http://hayase.lekumo.biz/photos/uncategorized/2014/03/19/6a0120a85ce28c970b0120a8c3ce92970b.jpeg)
モザミクブラザーズに登場！ミクフレーズ
DSやiPhoneなどガジェットで演奏するモザミクブラザーズの演奏の中で、みーこさんが鍵盤のキーボードとＰＣのキーボードが一体となったものでミクのボーカルを演奏しているのですが、このソフトウェアの部分も作りました。
これは演奏する方がタイミングなどシビアで、みーこさんがすごかったですｗ
リアルタイムにメンバーと踊るSDキャラのミクさん
みーこさんの発案で小さいみくさんを一緒にライブ映像で登場させるというものがあったので、カメラの映像とGifアニメのイラストをリアルタイムに合成できるアプリを作成しました。
（写真は開発中のものです）
これは、原因がよくわからないバグがあって表示におかしな部分がありましたが、ライブ前日になんとか解消してうまくいきました
Wiiリモコンでしゃべるミクさん
今回はかやもりさんが利用していたのですが、Wiiリモコンでミクさんと（きまったフレーズだけど）会話ができるソフトです。
WiiリモコンでBluetooth接続なので、もっとも心配な部分ではありましたが無事最後まできちんと動いてくれました
リアルタイム映像とTwitterの最新ポストを3D空間上に表示
鶴田さん登場後の曲で使ったのですが、リアルタイムの映像とＣＤジャケット写真やロゴなどをキューブ上に写し、#mosaiclive のハッシュタグのつぶやきをリアルタイムに表示しました。（ライブ中は携帯禁止なので、開演時やその前に発言していただいたものも表示しました。）
この直前に、ライブに来ることができなかった皆さんにも、今から会場のスクリーンに表示されるからメッセージを！とTwitterで呼びかけて、応援メッセージをいただきました。
若干ライブ会場にいるお客さんの中でもつぶやいている人がいたようですがみなさんのご協力により映像がつくられました
といった感じで個人的にも盛りだくさんで、いろいろあったけどいやーほんと楽しかったです
MOSAIC.WAVのお二人、関係者のみなさん、会場やネット上から参加していただいた皆さん、ありがとうございました
さらに技術的なことは、いずれ自分の忘備録も兼ねて別のブログに書くと思いますので、興味がありましたらチェックしていただければと思います。
| | 
| | 
You could certainly see your skills in the work
you write. The arena hopes for even more passionate writers such as you who aren't afraid
to mention how they believe. All the time follow your heart.
投稿： raw fermented sauerkraut | 2020年2月10日 (月) 06:25
You could certainly see your skills in the paintings you write.
The sector hopes for even more passionate writers like you who are not afraid to say how they believe.
All the time go after your heart.
投稿： nmims distance mba | 2020年2月10日 (月) 08:33
This piece of writing will assist the internet people for creating new
blog or even a weblog from start to end.
投稿： w88live | 2020年2月13日 (木) 03:59
I really like assembling utile info, this
post has got me even more info!
投稿： w88 | 2020年2月13日 (木) 07:01
Wow, awesome weblog layout! How lengthy have you
been blogging for? you made blogging look easy. The total look of your website is excellent, let alone the content!
投稿： ww88 | 2020年3月 1日 (日) 08:21
My developer is trying to convince me to move to .net from PHP.
I have always disliked the idea because of the expenses.
But he's tryiong none the less. I've been using
Movable-type on numerous websites for about a
year and am worried about switching to another platform.
I have heard good things about blogengine.net.
Is there a way I can import all my wordpress posts into it?
Any help would be greatly appreciated!
投稿： เช่าเต็นท์ผ้าใบ | 2020年3月 3日 (火) 05:33
Sweet site, super style and design, very clean and utilize pleasant.
投稿： Roofing Repair Near Me | 2020年3月 9日 (月) 03:45
I like what you guys are up too. Such intelligent work and reporting!
Carry on the superb works guys I have incorporated you guys to
my blogroll. I think it'll improve the value of my web site :
).
投稿： w88 | 2020年3月10日 (火) 05:08
As I website possessor I conceive the written content here
is real good, thanks for your efforts.
投稿： หนังสือพิมพ์ | 2020年3月11日 (水) 03:06
Thank you for the good writeup. It actually used to be a
enjoyment account it. Glance complex to far delivered agreeable from you!
However, how could we communicate?
投稿： https://www.fusionexus.com/ | 2020年3月15日 (日) 07:42
But a smiling visitant here to share the love (:, btw great
design and style.
投稿： K9 win | 2020年3月16日 (月) 03:20
If some one wants expert view regarding blogging and site-building then i advise him/her to pay a visit this weblog, Keep up the
fastidious job.
投稿： Roofing Sudbury Ontario | 2020年3月17日 (火) 02:25
Some really tremendous work on behalf of the owner of this website, perfectly great content
material.
投稿： CBD oil | 2020年3月17日 (火) 22:13
Only a smiling visitant here to share the love (:
, btw great design and style.
投稿： pandemic survival reviews | 2020年3月18日 (水) 21:08
Simply a smiling visitor here to share the love (:, btw great layout.
投稿： https://www.marketwatch.com/press-release/fungus-eliminator-review-purehealth-research-releases-new- | 2020年3月22日 (日) 02:02
Merely a smiling visitor here to share the love (:, btw great design and style.
投稿： erase my back pain reviews | 2020年3月22日 (日) 02:36
Remarkable! Its truly amazing article, I have got much clear idea concerning
from this post.
投稿： w88 ทางเข้า | 2020年3月22日 (日) 21:51
Amazing! Its really amazing piece of writing, I have got much clear idea about from this
piece of writing.
投稿： Roofing Companies Near Me | 2020年3月22日 (日) 23:43
Some really terrific work on behalf of the owner of this website, utterly outstanding content.
投稿： Buy Volume Pills GNc | 2020年3月23日 (月) 05:58
Just a smiling visitant here to share the love (:,
btw great style and design.
投稿： ts911 คาสิโน | 2020年3月23日 (月) 09:04
I am extremely impressed with your writing skills as well as
with the layout on your blog. Is this a paid theme
or did you customize it yourself? Either way keep up the nice quality writing, it is rare to see a nice blog like
this one nowadays.
投稿： LETOU สมัคร | 2020年3月24日 (火) 02:36
This piece of writing will help the internet users for creating new blog or even a blog from start to end.
投稿： LIVECASINOHOUSE | 2020年3月24日 (火) 03:49
If some one wants to be updated with hottest technologies
after that he must be pay a visit this web page and be up to date every day.
投稿： w88 | 2020年3月26日 (木) 11:36
As I website possessor I believe the written content here is rattling superb, regards for your efforts.
投稿： w88 | 2020年3月26日 (木) 13:40
I want gathering utile information, this post has got me even more info!
投稿： W88 | 2020年3月26日 (木) 13:45