【Qoncept ✕ SEP】AI技術 ✕ 音楽ライブ映像！リアルタイムARグラフィックシステム「instrack（インストラック）」を開発

各種CGソフトウェア上で生放送・生配信でのAR演出が可能に

株式会社Qoncept（代表取締役社長兼CTO : 林建一、本社 : 東京都渋谷区、以下「Qoncept」）と株式会社セップ（代表取締役社長 : 高橋嘉幸、本社 : 東京都港区、以下「SEP」）は、音楽ライブ映像向けのリアルタイムARグラフィックシステム「instrack（インストラック）」を開発しました。

「instrack」は、カメラ映像内のAR演出に利用可能な各種情報（楽器の座標（※1）、人物の関節の座標、推定床面の座標、人物領域のマスク画像）を、AI技術を用いてリアルタイムに検出・解析します（※2）。取得したデータを用いることで、各種CGソフトウェア上で様々なAR演出を生放送・生配信で付与することが可能となります（※3）。 画像解析はラップトップPC（MacBook）のみで行うため、既存のシステムにも手軽に導入できます。
 

画像検出・解析の様子

※1 プレスリリース時はギターヘッドのみ。他楽器への対応は現在開発中
※2 M2チップ搭載MacBook Air使用時、入力解像度1920×1080px・入力フレームレート30fpsで1Fr以内に処理
※3 出力映像プロトコルは米国NewTek社のNDI®を使用


■演出例①
 

 

■演出例②

■会社概要

株式会社Qoncept
代表取締役社長兼CTO 林建一
東京都渋谷区渋谷2-19-15 宮益坂ビルディング301
https://qoncept.co.jp/

株式会社セップ
代表取締役社長 高橋嘉幸
東京都港区芝浦4-16-23 AQUACITY芝浦1F
https://www.sep.co.jp/