Mudy.

Mudyは、そのために設計されたiPhoneアプリです。話している声をリアルタイムで聴き、物語の現在の文脈からムードを判断して、なめらかにつながる音楽を選びます。ページをスキャンするアプリや電子書籍リーダーではありません。

デバイス上のFoundation Modelsが、現在の場面がどれほど明るい、または暗い印象か、音楽にどれほど劇的な推進力が必要かを判断します。直近の物語の文脈も解釈に使います。判定に少し余裕を持たせ、一文ごとに曲が切り替わるのを抑えています。AIが文章を読み違えることもあるため、ムードは手動でも選べます。

はい。語りを聴かせることも、ムードを手動で選ぶこともできます。分析は聞こえた声をもとに行うため、テーブルでの雑談が結果に影響する場合があります。それ以上声を聴かせずに音楽を維持したいときは、音楽をロックしてください。

公開に向けて準備中のアプリは、リアルタイムの音声処理とデバイス上の場面分析を使用します。音声を録音したり、物語のテキストをMudyのバックエンドにアップロードしたりはしません。現在の物語の文脈はセッション中のメモリに保持され、リセット時またはアプリ終了時に消去されます。

必要なAppleのリソースが揃えば、音声認識と場面分析はローカルで動作する設計です。それらのリソースのダウンロード、音楽パックの購入や復元、購入済み音楽のダウンロードには、インターネット接続が必要な場合があります。ダウンロード済みのパックはオフラインで使えます。