LINE WORKSは3月6日、「CLOVA Note β」において、話者が発するフィラーや言いよどみを除去する機能を追加したと発表した。
CLOVA Note βは、AI技術を活用した無料の音声記録管理サービスで、人の話す言葉を音声として認識してテキスト化するための音声認識が使用されている。この音声認識では、音声データそのものからAIモデルを学習し、正解ラベルを利用せずにモデルを構築する手法「自己教師あり学習」が活用されているとLINE WORKSは説明する。
従来の「End-to-End音声認識」は、膨大な音声データと正解ラベルの人的作業がペアで必須となるため、精度向上に不可欠な品質の良い学習データを集めるのに多大なリソースと時間がかかることが課題といわれている。CLOVA Note βでは、大量の音声データを用いてAI学習を行うため、効率的に精度を向上させることができるという。
今回追加されたフィラー・言いよどみ除去機能は、話者が発する「えー」「あのー」といったフィラー・言いよどみを識別・除去する。さらに、「あの」「その」のような指示代名詞などの重要な単語が誤って削除されないよう、文脈に応じたテキストの保持または除去が判断されるように調整されている。
フィラー・言いよどみ除去モデルの開発は、不要な言葉が含まれると可読性が低下し、内容の把握が困難になるというユーザーからの声を反映しているという。開発の初期段階では、ユーザーの意図に沿っているか、また発話内容から重要な情報を削除してしまうような処理を行っていないかを特に意識し、開発および性能評価を繰り返したと同社は述べる。
自然言語処理（NLP）タスクにおいて高い性能を発揮するRoBERTaを用い、適切なモデルの選択やテキストの前処理に重要な役割を果たす「モデルのサイズ」と「トークナイザー」は、フィラーと言いよどみの検出という下流タスクに合わせて最適化されるよう事前学習している。文章やテキストを小さな単位に分割するツールであるトークナイザーは、日本語の文字ベースのものを使用することで、フィラーや言いよどみなどを文字単位で効果的に識別できるよう工夫しているという。
フィラー・言いよどみ除去モデルの完成度を高めるための微調整においては、ドメインミスマッチを防ぐために正解テキストデータも使用している。専門チームによってアノテーションされた高品質なユーザーデータをサービスの向上のための情報源として活用することで、フィラーや言いよどみを高い精度で検出するモデルを実現。使用されるユーザーデータは、「サービス品質向上のためのユーザーデータの取得」で同意したユーザーのみのデータを利用していると同社は強調する。
このような高精度な日本語音声認識モデルの開発・提供ができる背景として、高品質な正解データを生成するための専門チームや、誤認識結果の分析や先行研究などを参考に音声精度の向上に取り組むリサーチエンジニアが在籍していることを同社は挙げる。
フィラー・言いよどみ除去機能は過去作成されたノートには適用されず、新規作成ノートにのみ適用される。また自動的に適用されるため、アプリアップデートは不要。
