🌟 ギャル的キラキラポイント✨ ● 評価が難しいAI音声の出来を、客観的に評価できるようになったってすごくない?😳 ● 人間が聞いて判断してたのが、AIのおかげで秒速で評価できる時代になったってこと!👏 ● これから、もっとすごい音声AIがバンバン出てくるって期待しちゃうよね~😍
背景 AI(エーアイ)がテキストから音声を生成する技術(TTA)ってすごいじゃん? でも、その音声の出来を評価するのって難しかったんだよね~。人間が一つ一つ聞いて「う~ん…」って判断してたから、時間もお金もかかって大変だったみたい😭
方法 そこで登場したのが「MOESCORE」! MoE(複数の専門家モデル)とSeqCoAttn(シーケンス・クロス・アテンション)を組み合わせた新しい評価方法だよ!難しい言葉だけど、要はAIがAI音声を評価するってコト💖 テキストと音声がどれだけ合ってるかをAIが判断するから、客観的な評価ができるってワケ🎵
結果 MOESCOREを使うと、TTAシステムの評価がめっちゃ早くなったんだって! しかも、人間の判断よりもブレがないから、ずーっと安定した評価ができるらしい!✨ 開発者さんたちも大助かりだね!
続きは「らくらく論文」アプリで
Recent advances in generative models have enabled modern Text-to-Audio (TTA) systems to synthesize audio with high perceptual quality. However, TTA systems often struggle to maintain semantic consistency with the input text, leading to mismatches in sound events, temporal tructures, or contextual relationships. Evaluating semantic fidelity in TTA remains a significant challenge. Traditional methods primarily rely on subjective human listening tests, which is time-consuming. To solve this, we propose an objective evaluator based on a Mixture of Experts (MoE) architecture with Sequential Cross-Attention (SeqCoAttn). Our model achieves the first rank in the XACLE Challenge, with an SRCC of 0.6402 (an improvement of 30.6% over the challenge baseline) on the test dataset. Code is available at: https://github.com/S-Orion/MOESCORE.