AI面接練習アプリ「steach」に自信解析AIエンジンを実装

AIエンジンが、“人に近い感覚”で話している人の自信を得点化

企業向けの教育研修事業と若年層向けの就職支援事業を展開する株式会社ジェイックは、本日より当社の子会社となる株式会社エフィシエントと共同開発したAI面接練習アプリ『steach（スティーチ）』に、独自に開発した話し方の自信を解析するAIエンジンを実装いたしました。

 

■アプリダウンロード数、2万突破  AI面接練習アプリ「steach」について

 

AI面接練習アプリ「steach」は、2022年5月にリリースした、「ひとりで気軽に面接練習ができて、客観的な評価がもらえる」面接練習アプリで、アプリダウンロード数は2万2000件を突破しています。(※1)これまで5万名以上（※2）の就職支援を行ってきた当社の求職者のニーズと面接対策のノウハウをもとに開発し、AIを活用してユーザーが回答した音声と動画を6つの指標（①自信、②笑顔、③ボディランゲージ、④声の大きさ、⑤話すスピード、⑥伝わりやすさ）でそれぞれ5段階評価することができます。

 

（※1）アプリダウンロード数22,429回 ／ (株)エフィシエント調べ（2022/5/14～2024/1/23）

（※2）当社が主催する面接会の参加者数（新卒者向け2012/4～2023/3、既卒者向け2005/5～2023/4）

 

▶ steach紹介ページ https://jaic-steach.jp

※使い方、steachご利用者の声は上記ページをご覧ください。

 

▶ アプリダウンロード

〈iPhone・iPadユーザー〉App Store：https://apps.apple.com/jp/app/id1623951835?mt=8

〈Androidユーザー〉 Google Play：https://play.google.com/store/apps/details?id=jp.jaic_steach.steach

 

 ■「自信解析AIエンジン」の開発・実装について

 

AI面接練習アプリ「steach」には、ディープラーニング(人間が自然に行うタスクをコンピュータに学習させる機械学習の手法)を活用した、独自開発のAIエンジンが2つ搭載されています。１つは2022年12月に発表した、話し方が伝わりやすいかを解析するAIエンジン（※3）です。2つ目が、今回新たに開発・実装した、人間に近い感覚で人の自信を解析できる「自信解析AIエンジン」です。

 

（※3）引用：ＡＩ面接練習アプリ「steach」に、自然言語処理を用いた新機能追加

https://www.jaic-g.com/news/pressrelease/news-2093/

 「自信解析AIエンジン」は、「steach」に蓄積された1000個の動画データを、国家資格キャリアコンサルタントの資格を持つジェイックの就職アドバイザーが、「自信あり」「自信なし」をアノテーションした結果を集計し、教師データを構築しました。アノテーションにはエフィシエントが持つ特許（※3）を活用。学習モデルは、3秒分の動画毎のフレームと音声の情報をもとに話し方の自信あり・なしを判定するCNN（※4）をベースにしたマルチモーダル（※5）AIモデルが判定。具体的には、スマホで撮影された動画フレーム（20フレーム）と音声の周波数情報を合わせて「自信あり」、「自信なし」の判定を実施。判定結果は、動画フレームのみ、動画フレームと音声、音声のみの3種類を結果として出力しています。

 

（※4）引用：人の話し方や表情を撮影した動画を評価して可視化する特許を取得

https://prtimes.jp/main/html/rd/p/000000005.000069602.html

（※5）CNNː主に画像系で使われるディープラーニングのモデルの種類

（※6）マルチモーダルː入力データの種類が複数のケースのこと

 

これまでは統計的な処理、具体的には ②笑顔、③ボディランゲージ、④声の大きさ、⑤話すスピードなどの結果を用い、その組み合わせを得点化して「⑤自信」の指標を解析していましたが、今回の「自信解析AIエンジン」の実装でディープラーニングを活用できたことで、以前よりも“人間が評価する感覚”で「⑤自信」の指標を得点化、評価することに成功しました。

 

■ 今後の展開とAIエンジンの開発について

「自信解析AIエンジン」は話し方に自信を持っているかを判定できることから、営業トレーニングや対話トレーニングにも活用できる可能性があると考えています。また今回は、自信に関して教師データを準備してエンジンを構築したのですが、蓄積されたデータを活用して「不安」や「楽しい」など人の表情を判定するエンジンの開発も可能となります。新規AIエンジン開発にご興味がある方はお問い合わせをお願いします。

 

 ■会社概要

会社名　　：株式会社ジェイック

代表者　　： 代表取締役社長　佐藤 剛志

本社所在地：〒101-0051 東京都千代田区神田神保町1-101 神保町101ビル7階

https://www.jaic-g.com/

 

会社名　　：株式会社エフィシエント

代表者　　： 代表取締役社長　脇坂 健一郎

本社所在地：〒220-0004神奈川県横浜市西区北幸1丁目11-1

https://efficient-inc.com/

【お問い合わせ先】
株式会社ジェイック 　担当：松尾

E-mail： [e-mail]　TEL  [phone]　 FAX  [phone]