カテゴリー: Blog

そんなわけで、7/8は僕の新プロジェクトで、
ガチのプログラミングを駆使した僕のプロジェクト、
“kengo.ThreadOrchestra”のライブです！

前回ライブから時間経ってますが、なかなか
バタバタして思うように進まず、、
ソースも整理が捗らず、せっかく草平くんから頂いた動画も編集進まず、、、
（ううう、草平くんすみませんぬ、、m(_ _)m ）
でも、ライブに向けて色々仕込んで作業はしておりまして、
更にまた面白いものをお見せできればと思っております。
是非是非、見に来て下さい～！！

■2017/07/08 kengo.ThreadOrchestra
@ LIVE&BAR D-Bop
札幌市中央区南1条西19丁目291番地山晃ハイツB1F
Open 19:30 Start 20:00
LC：予約￥2,000(要Order)/￥当日2,500(要Order)

[Member]
小野健悟(sax,laptop pc) 本山禎朗(key)
花田進太郎(gt) 大久保太郎(bs) 川合草平(dr)

– – ここからややマニア向けのつぶやきです – –
（※技術的な内容が含まれ、かなりアレなので
適当にスルーして頂ければと）

一番の問題点だった、早いテンポになると
メトロノームのタイミングがズレる問題
（前回ライブでひどい目に、、メンバー皆さま、すみませんorz）
を改善しようと、色々試行錯誤するも中々難しい、、、
そんな中、そういえば、PCが時刻情報NTPサーバで時間合わせる仕組み
ってどうやってんだろう、、と思いつく。
すぐさま調べ、

t1 ＝クライアントがクエリを発信した時刻
t2 ＝サーバがクエリを受信した時刻
t3 ＝サーバが応答を発信した時刻
t4 ＝クライアントが応答を受信した時刻
クライアントの時刻差＝((t2－t1)－(t4－t3))÷2

の計算式で出ること判明。
入力パラメータ的には間に合いそうだけど、ズレるのは
別の問題で多分ムリぽだな～と思いつつ、
時間調整コマンドを実装。
せっかくなので、同時に周辺コードもキレイに整理。

・・すると、

ありゃーー！激的に改善したばい！
以外といけるんだな、凄みが凄い！
とか驚いて、動作テストさせてたら、今度は、
修正前にタイミングがズレていた現象が発生せず、、
うぉぉーい、、どうゆうことねん、、

まぁ多分あれだと思うけど、、、
主に”同時に周辺コードもキレイに整理”
だと思われだけど、、ギャース
NTPサーバの計算式まで持ち出して、あちこち
いじったコードも元に戻す気になれず、
とりあえず現状維持で。

そんなわけで、何となくですがタイミング調整部分とかの動画を
少し撮影してみたんで楽しんで頂けましたら幸いです。

■動画

ちなみに画面下に移っているグレーの布は、
伊藤広規さんに頂いた素敵なバンダナです。
ありがたく使用させて頂いております
m(_ _)m m(_ _)m

先日のkengo.ThreadOrchestraライブで使用した、
新しく開発したシステムについて発表したいと思います！

─ ─ ─ ─ ─ ─ ─ ─ ─
■スレッドコンダクターシステム”TACTS” とは 】

各演奏者に配置されたスマホ等の端末をLAN(WiFi)経由で
相互接続し、マスターPCから操り、メトロノーム、指示内容、
メッセージ、音情報などを送ることで、各演奏者に独立した
指示を送ることができ、一人に対して指揮者が存在するような
状態を作り出すシステム。

更にお客様、照明スタッフ、ホール内スタッフなど、
あらゆる人が繋がることができ、通常では困難な
ダイナミックな連携プレイが可能となる。

※並列に指揮棒が存在するという意味で、
スレッドコンダクターまたはパラレルコンダクターシステム、
“TACTS” という名前にしてみました。
─ ─ ─ ─ ─ ─ ─ ─ ─

というシステムなんです～。
基本は、

・演奏メンバー、お客様に自分のスマホで、会場内に設置した
無線LANに接続してもらう。
・演奏メンバーには、楽譜の隣にスマホを置き、見ながら演奏する。
・僕がマスターPCを操作し、各メンバーに指示をする。
・各スマホには、指示内容、メッセージ、メトロノーム情報、音情報が
送信され、演奏者はその指示に従って演奏する。

という感じで、それに加え、

・VJプロジェクター用のPC、お客様のスマホ、会場のスタッフのスマホ
にも接続して、映像を流したり、メッセージ指示を送ったりできる。

ということも可能となるシステムです。
具体的にどんなことができるかと言いますと、

●曲中にリアルタイムで指示を送れる
各演奏者に「次、Aにいくね」「次、ギターソロいきます」
「次のコード、CM7 ね」 みたいな指示を送れる。
通常の目くばせ合図では不可能な曲をダイナミックに
変化させることができる。
簡易的な異なる楽譜をそれぞれ個々のメンバーに送って、
演奏してもらうというのも可能。

●異なるテンポ、拍子の指示を送れる
各演奏者に例えば、Aメロは通常通り演奏して、Bメロから急に、
キーボード → 110 BPM、4/4拍子
ギター → 115 BPM、7/4拍子
ベース → 100 BPM、3/4拍子
ドラム → 80 BPM、6/4拍子
という異なるテンポ、拍子で演奏して、またCメロで
元に戻る、というような指示を送ることができる。

●VJプロジェクター、お客様用のスマホに個々にメッセージを送れる
例えば、
VJプロジェクター1 → 映像、メッセージ1を表示
VJプロジェクター2 → 映像、メッセージ2を表示
お客様1 → 映像、メッセージ3を表示
お客様2 → 映像、メッセージ4を表示
という表示を行い、それを曲中にリアルタイムで自由に送信できる。

●会場スタッフにスマホ経由で指示を送れる
Bメロになったとき合図で花火打ち上げて下さい、とかできる。

●録音した音も送れる。
例えば、会場内でお客様から拍手してもらい、それをその場で録音して、
好きなタイミングで音を、各お客様のスマホ端末、VJプロジェクターから
音を再生させたりできる。

●リアルタイムでアンケートとったりもできる。
お客様のスマホに、
「次ソロ誰にとって欲しいですか？Aボタン＝ｘｘ、Bボタン＝ｘｘ」
のメッセージとボタンを表示させ、ボタン押下でマスターPCに
返信、集計され各演奏者に伝える、など斬新なコールアンドレスポンスが
できる。

みたいな感じです。先日のライブで披露する場面が作れず、
披露できなかった機能もあるのですが、次回のライブで披露できればと
思っております。

このシステムの技術的な部分については、

●ブラウザ経由で簡単に接続が行える。
→ 専用のアプリとか入れなくてもOK

●使用機材はノートPC、無線アクセスポイント、各スマホ
→ ノートPCはマスター操作用、無線アクセスポイントは会場にあれば不要。

●開発言語はjavascript、PHP。
→ メイン処理はjavascript、サーバーはPHP。
当初、Node.jsとか色々いじっていたが、結局、不具合が
見つかっても現場でも簡単に修正できたり、いじりやすいということで
この形態に。。

※追記
結局、接続の安定性やら、何やら色々検討した結果、
この後、Node.jsを採用し、Node.js用に書き換えました。

●Web Socketにより各端末と通信を行う。

●メトロノームや音関連の処理はWeb Audio Apiを使用。
→ 最初、同期部分の実装に苦労したが結構正確でびっくり

といった所です。
要は、曲中における演奏者（及びその他の人）との新たな
コミュニケーションツールといえるものかもしれませんが、
使い方とその可能性は無限にあるかと思います。

今回は、ジャズのありがちな編成をデジタル的に扱う、という意味で、
この楽器編成でしたが、そのうち、歌モノや、ビックバンド、
クラシックなどでもできたら面白いかなと思っております。

このシステム新たな音楽ツールともいえると思うので、
使ってもらわないと全く意味が無いので、ゆくゆくは
ソースを綺麗にして（笑）公開し、色んな人に使ってもらいたいと
思っております。是非、興味あれば声をかけて頂けたら嬉しいです！

あと、マスターPC側の操作画面は、完全にCUIベースで、ターミナル風入力画面で
コマンドをバタバタ打って操作するようになっております。
後ほど動画も公開しようと思います！
その他、システムには関係無いですが、キーボード自体にもマイクを付けて、
キーボードの手打ち音自体もパーカッション音として音を出しています。
（キーボードはFILCOの赤軸です！コツコツとした音が大好きなのです笑）

ジャムジカ12周年企画として開催された、
12/20、kengo.ThreadOrchestra
12/21、kengo.ThreadFlow
12/21、3days Final！
ライブ、無事終了致しました！！！！！

ライブ見にきて頂いたお客様、メンバーの皆さま、
このような機会を頂いたジャムジカの次郎さん、
大変ありがとうございました！！！！！

そもそも3daysライブ自体初めてなので
最初はどうなることかと思いましたが、
どのライブも内容が濃く、超盛り上がりました！！！
悪天候の中、見に来て頂いたお客様に本当に感謝です。
3daysライブのそれぞれが、独立したコンセプトでライブを行ったのですが、
どのライブも、それぞれ定期的に単体でやったとしても面白く
内容も濃いライブでして、これも参加して頂いたメンバーの皆さま
のお陰だと思っております。是非、機会があれば、また是非やりたいです！

集合写真がラスト日の一枚しかなく、、、
それを貼り付けます～(^-^;
　

)

そんなわけで昨日は12/20のkengo.ThreadOrchestra用のリハでした～
　
　
前々から温めていた秘密兵器の初披露だったのですが、
いやはや、我ながら、いい感じのモノが出来たなと！
　
　
サイバー感丸出しですよ笑
　
　
とりあえず、ライブ当日直後くらいは世界初、前人未到の画期的なシステム
によるライブ演奏、と言ってもバチ当たらんのでは無いかと、、、
　
　
とにかく、かなり尖ったことをやっていることは間違えないと思われです。
かなり面白い演奏です！

音楽好きはもちろん、未来感あるのが好きな人、
あと、システム開発に携わってる人など(^-^;;
　
是非是非見にきて下さい！！

久しぶりにリーダーライブやります～の続きですが、
昔からやりたいことは沢山あって（かつ、やらなくてはいけない残タスクも
大量にありまして、、m(_ _)m ）、、12/20ライブは、ようやく昔から温めていてやってみたかった、
プログラミングと演奏の融合をやってみようと思います。

プログラミングといっても、DTM打ち込みのことではなくて、ガチのシステム開発の方の
プログラミングでして、このところずーーっと身を潜め、秘密兵器開発のごとく、
コツコツと今回のライブ用に、今回演奏用のシステムの開発を進めてきた次第でありました。

元々、工学部→理学部→某大手電機メーカーの開発部という現場に身を置いていた経緯もありまして、
いつか、そのノウハウと音楽をぶつけてみたい、という気持ちがあり今回のチャレンジと
なりまして、恐らく、その後はそうではなくなるだろうけど、
この日直後だけは、このスタイルでの音楽演奏は、かなり前人未到ではないかと（笑）
否が応でも僕のカラー全開のライブになるかと思われです。

具体的には何かイメージ出来ないと思いますが、ノートPC使ってガシガシ
キーボード打ち込んだり、Saxも吹いたり、色々演奏してみたいな雰囲気で感じて
頂ければ幸いです(;^-^;;;
是非見にきて下さいです！

[2016/12/20]
ジャムジカ12周年企画「 kengo.ThreadOrchestra 」
@ Live&Dining JAMUSICA
札幌市中央区北4条28丁目1-16 ラ・ワイズビルB1
Open 19:30 / Start 20:00 / 予約￥2,000 / 当日￥2,500（要1drink）
小野健悟(sax,laptop pc) 本山禎朗(key)
花田進太郎(gt) 大久保太郎(bs) 川合草平(dr)