株式会社メリオル

◾️概要
高齢者向けに、日本語の音読を自動で評価するWebアプリケーションを開発しました。

利用者がブラウザ上で文章を読み上げて録音すると、Azure Speech Serviceを利用して流暢さや正確性などを評価し、その結果をもとにAzure OpenAIでフィードバックコメントを生成する仕組みを構築しました。

◾️従来の課題
音読内容を人が毎回確認・評価する場合、評価者の負担が大きく、継続的に利用するサービスとして運用するには効率化が必要でした。

また、単純に点数だけを表示するのではなく、利用者が自身の読み方を振り返れるよう、評価結果を分かりやすく伝える仕組みも求められていました。

さらに、主な利用者が高齢者であるため、一般的なWebアプリ以上に、文字の見やすさや操作の分かりやすさを考慮する必要がありました。

◾️対策
ブラウザ上で音声を録音し、そのデータをAzure Speech Serviceへ送信することで、音読の流暢さや正確性などを自動評価する機能を実装しました。

さらに、Azure Speech Serviceから取得した評価結果をAzure OpenAIへ連携し、採点結果に応じたフィードバックコメントを自動生成する仕組みを構築しました。

UIについては、高齢者の利用を想定し、文字を大きくする、表示する情報を必要最小限にする、操作手順をシンプルにするなど、直感的に利用できる画面構成としました。

ブラウザ上で表示された文章を音読・録音し、そのまま採点まで行えるWebアプリケーションを構築しました。

録音データをAzure Speech Service APIへ連携し、総合点、流暢さ、正確性などの評価結果を自動算出。さらに、評価結果をAzure OpenAIへ連携することで、点数だけでは伝わりにくい改善点や評価内容を、ユーザーに分かりやすいフィードバックコメントとして自動生成する仕組みを実装しました。

UI設計では高齢者の利用を前提に、文字サイズを大きくし、画面上の情報や操作を必要最小限に整理することで、直感的に利用できる画面構成としました。

音読から採点、フィードバックまでを自動化することで、利用者がブラウザ上で一連の評価を完結できる環境を実現しました。

点数による定量的な評価に加えて、生成AIによるフィードバックを提示することで、利用者が自身の音読結果や改善点をより理解しやすくなりました。

また、高齢者の利用を考慮したUI設計により、デジタル機器の操作に不慣れなユーザーでも利用しやすいWebアプリケーションを実現しました。