ガイド

音声感情解析によるコンディション可視化 -- 仕組み・活用・導入の完全ガイド

ESジャパン編集部
音声感情解析の研究開発・プロダクト設計に従事

音声感情解析とは

「声を聞けば、相手の調子がなんとなくわかる」。多くの方がそう感じたことがあるはずです。声のトーンが低い日は元気がなさそうに聞こえ、明るくテンポのよい声の日は好調に見える。音声感情解析とは、こうした日常的な直感を科学的に裏付け、定量化する技術です。

具体的には、わずか20秒の音声データから22種類の感情パラメータを抽出します。パラメータにはEnergy(活力)、Hesitation(ためらい)、Atmosphere(雰囲気)などが含まれ、声の周波数特性・リズム・抑揚といった音響特徴量から算出されます。従来のアンケートでは捉えにくかった「本人も自覚していない微細な変化」を、声という非侵襲的な手段で捉えることが最大の特徴です。

この技術の源流は、1997年にイスラエルのAmir Liberman氏が発明したLVA(Layered Voice Analysis)技術にあります。Nemesysco社が心理学・犯罪学・音声学・精神医学・数学の各分野の専門家と協力して開発したもので、脳の活動変化が声に反映されるという原理に基づいています。具体的には、高周波数領域(RHFR: 興奮・覚醒を反映)と低周波数領域(RLFR: 認知過程を反映)の音声変動を多層的に解析し、さらに人の耳では聞き取れない非可聴域の周波数成分までも分析対象とします。この技術は米国特許 US 6,638,217 B1(2003年取得)および US 7,165,033 B1(2007年取得)として登録されています。

音声から感情や心理状態を読み解く研究領域は世界的にも拡大を続けています。AMED(日本医療研究開発機構)のDelight調査によれば、2003年から2022年の20年間で音声・感情解析に関連する学術論文数は106,427本に達し、関連技術カテゴリのなかで最多を記録しました。こうした学術的蓄積の上に、ESASの解析精度は支えられています。

CEEu Mentalが搭載する解析エンジンはESAS(Emotion Sensing & Analyzing System)と呼ばれ、累計100万件以上の音声データで学習されています。テキスト化は一切行わず、音響特徴量のみを解析するため、会話内容のプライバシーを守りながらコンディションの変化を数値化できます。

なぜ今「声」なのか

企業が従業員のコンディションを把握する手段として、年1回の法定チェックやサーベイが広く普及しています。しかし厚生労働省の調査によれば、年1回のチェックだけでは約6割の事業所が「効果を十分に実感できていない」と回答しています。年に一度のスナップショットでは、日々変動するコンディションの傾向変化を捉えることが構造的に困難だからです。

一方で、毎日20秒の音声を録音するだけの日次モニタリングであれば、従業員への負荷は最小限に抑えられます。アンケートのように「どう回答すべきか」を考える必要がないため、無意識のバイアスが入りにくい点も利点です。声のトーンの微細な変化を日次で蓄積することで、個人ごとのベースラインからの逸脱を早期に検知できるようになります。

つまり「声」は、低負荷・高頻度・低バイアスという三拍子が揃った、コンディション把握のための理想的なデータソースなのです。

詳しくはこちら: 年1回サーベイ vs 日次音声解析 -- 7つの違い

CEEu Mentalの仕組み

CEEu Mentalは2層のアーキテクチャで構成されています。第1層のESASエンジンが音声データから22種類の感情パラメータを抽出し、第2層のCEEu Mental APIがそれらのパラメータを統合してコンディションスコアを算出します。最終的にダッシュボードを通じて、管理者やHR担当者がチーム全体の傾向を確認できます。

この2層構造を採用する理由は、解析精度の確保と柔軟な応用を両立するためです。ESASエンジンは音響解析の専門レイヤーとして高精度なパラメータ抽出に集中し、CEEu Mental APIは業種・職種・組織規模に応じたスコアリングロジックを柔軟に調整できます。

3分でわかるCEEu Mental概要資料

音声感情解析の仕組み、導入効果、料金プランをコンパクトにまとめた資料をお送りします。

科学的根拠

CEEu Mentalの基盤技術であるESASは、産業医科大学との共同研究によって科学的に評価されています。研究結果はJournal of Occupational Health(JOH)に査読付き論文として掲載されました。

論文では、音声感情解析によるコンディション変化の検出において、AUC(Area Under the Curve)0.783が報告されています。AUCとは、モデルの識別精度を示す指標です。完全にランダムな判定(コイン投げ)がAUC 0.5、完璧な判定がAUC 1.0に相当します。AUC 0.783は、約78%の確率でコンディションに変化がある人とない人を正しく区別できることを意味し、早期気づき支援ツールとして実用的な水準にあります。

ただし、この研究にはサンプルサイズや対象業種の限界があり、全ての職種・環境で同等の結果が得られることを保証するものではありません。引き続き、多業種・多言語での検証が進められています。

引用: Tani et al. Journal of Occupational Health. AUC 0.783を報告。ただしサンプルサイズ・業種の限界あり。

研究の詳細: 産業医科大学との共同研究 -- AUC 0.783

活用シーン

コールセンター

コールセンターのオペレーターは、日々多数の顧客対応を行うなかでコンディションが大きく変動します。CEEu Mentalを活用すれば、始業時の20秒音声でその日のコンディションを把握し、管理者が適切なシフト調整やフォローアップを行えます。属人的な「ベテランSVの勘」に頼らず、データに基づいたケアが可能になります。

顧客対応においても音声感情解析は有効です。たとえば顧客が「ありがとう」と発した場合、音声認識によるテキスト化だけでは「ありがとう」という単語しか見えません。しかし音声感情解析では、声のトーン・揺らぎ・スピード・抑揚から、その「ありがとう」が喜びによるものか、悲しみを含んだものか、あるいは怒りを抑えたものかを区分できます。表面的には感謝の言葉を述べていても、実際には問題が未解決のまま通話が終了しているケースを発見できるため、顧客満足度の向上に直結します。

オフィス

管理者向けダッシュボードを用いることで、チーム全体のコンディション傾向を週次・月次で確認できます。特定のプロジェクト期間中にチーム全体のスコアが低下している場合、業務負荷の再配分やチームミーティングの設定といった早期対応が可能です。個人名を表示せず統計データのみを管理者に提示するモードも用意しています。

離職リスクの早期検知

ESASが算出するパラメータのひとつにP値(Painfulness: 苦痛度)があります。このP値の推移を追跡することで、離職リスクを早期に検知できる可能性が示されています。ある実証では、P値が継続的に高い水準を示した5名の従業員のうち4名が実際に離職したという結果が得られました。年1回のサーベイでは捉えきれない日々の変化を、音声データの蓄積によって可視化する事例です。

Dr.Tel連携による品質評価基盤

2025年1月31日、CENTRICはDr.Tel社と業務提携を締結しました。この提携により、音声認識(テキスト化)、感情解析(ESAS)、生成AIの三つの技術を統合した品質評価基盤の構築が進められています。コールセンターにおける応対品質を、テキスト内容と感情の両面から自動評価する仕組みであり、従来のモニタリング業務の効率化と評価精度の向上を同時に実現することを目指しています。

警察捜査支援

音声感情解析技術は、警察の捜査支援領域においても活用実績があります。声に含まれる微細な感情変化を客観的に数値化できるという特性が、供述分析などの場面で補助的な役割を果たしています。

音声感情解析の技術概要ホワイトペーパー

22種パラメータの詳細、解析アルゴリズムの概要、セキュリティ設計をまとめた技術資料です。

導入の流れ

CEEu Mentalの導入は、以下の3ステップで完了します。大規模なシステム改修は不要で、既存の業務フローに組み込む形で運用を開始できます。

  1. 技術相談(1-2日): 貴社の課題や環境をヒアリングし、最適な導入構成をご提案します。API連携の要件やセキュリティポリシーの確認もこの段階で行います。
  2. テスト接続(1週間): サンドボックス環境でAPIを接続し、実際の音声データを用いた動作検証を行います。パラメータの出力結果やダッシュボード表示を確認いただけます。
  3. 本番稼働: テスト検証の結果を踏まえて本番環境へ移行します。導入後もカスタマーサクセスチームが定期的な運用レビューを実施します。
導入の詳細手順: CEEu Mental導入ガイド -- 3ステップ

費用

CEEu Mentalは、組織の規模や利用人数に応じた3つのプランを用意しています。

  • Starter: 小規模チーム向け。基本的な音声解析機能とダッシュボードを利用できます。
  • Growth: 中規模組織向け。チーム比較やトレンド分析などの高度な分析機能が含まれます。
  • Enterprise: 大規模導入向け。専用環境、SLA保証、カスタムAPI連携に対応します。

よくある質問

音声データのプライバシーはどのように守られますか?
音声データはESASエンジンで解析された後、速やかに破棄されます。テキスト化(文字起こし)は一切行いません。保存されるのは22種のパラメータ数値のみで、個人を特定する情報とは分離して管理されます。オプトイン設計を採用しており、本人の同意なく解析が行われることはありません。
どの言語に対応していますか?
ESASエンジンは言語非依存の音響特徴量を解析するため、原理的には言語を問わず利用可能です。ただし、現時点で十分な検証データが蓄積されているのは日本語と英語です。その他の言語での利用をご検討の場合は、個別にご相談ください。
既存のシステムと連携できますか?
REST APIを提供しており、既存の勤怠管理システムやHRプラットフォームとの連携が可能です。主要なコミュニケーションツール(Teams、Slackなど)との連携プラグインも開発中です。
解析にかかる時間はどのくらいですか?
20秒の音声データに対して、通常2-3秒以内にパラメータ抽出が完了します。リアルタイムに近い速度で結果を取得できるため、業務フローを妨げることはありません。
導入にあたってIT部門の協力は必要ですか?
API連携を行う場合はIT部門との協力が必要ですが、ブラウザベースのダッシュボード利用であれば、専門的なIT知識がなくてもすぐにご利用いただけます。導入時にはカスタマーサクセスチームが技術支援を行います。
無料デモを申し込む

30分のオンラインデモ。無理な営業はいたしません。

デモを予約する