audio

"WAV合成の仕組み 外部ライブラリに依存せず、Pythonの標準ライブラリだけで実装しました。"

"2026年4月16日、Google Cloudから Gemini 3.1 Flash TTS のプレビュー版が公開されました。70を超える言語、30種類のプリセット音声、そして200以上の「オーディオタグ」 で囁き・叫び・笑い・ため息までテキストの中で自在に指示できるという、音声合成の世界をまた一段引き上げるモデルです。"

"新しく導入された「スタイルタグ」機能により、自然言語のコマンド（「ささやく」「少し速く話す」など）をテキストに直接組み込むことで、様々なスタイル、話すペース、表現をきめ細かく制御できるようになります。"

"VoiceBank-DEMANDデータセットでの実験は、GatherMOSが限られたラベル付きデータ条件で訓練された場合、DNSMOS、VQScore、単純なスコア平均、さらにはCNN-BLSTMやMOS-SSLなどの学習ベースのモデルをも一貫して上回ることを実証しています。"

"特徴量分析により、音高の変動とスペクトルの豊かさ（スペクトル重心、帯域幅）が重要な識別手がかりであることが明らかになりました。"

"最新のオーディオモデルは、表現力豊かなオーディオ生成のためにAI音声を指示する正確なコントロールを提供する、きめ細かいオーディオタグを導入しています。"

"Googleの最新のRealtimeモデルであるGemini 3.1 Flash Liveオーディオは、そのパイプラインを完全に排除します。ネイティブに音声を処理します。音声をストリーミングで入力すると、モデルが音声をストリーミングで出力します。"

"Distilledモデルは、音声品質の向上とわずかに洗練されたビジュアル美学を伴って再トレーニングされました（現在v1.1）。"

"「AIになんでもやらせる」のではなく、「実用性のために機能を削ぎ落とす」という判断をし、「100点の分析を10件」やるよりも、「80点の分析を全件（数千件）回す」ことを選びました。"

"qwen3-omni-moe が動作中（ビジョン + オーディオ入力） qwen3-asr が動作中"

"皆様、llama.cpp（llama-server）がGemma-4 E2AおよびE4AモデルによるSTT（音声認識）をサポートするようになったことを確認でき、大変嬉しく思います。"

"私がこれを行うインスピレーションとなったのは、チャーリー・プースが400ドル以上を支払ってAIチャットボットに自分の音楽を「レビュー」させる音楽制作コースを持っていることを知ったことです。"

"「クールなローファイで深夜の、わずかに不気味な雰囲気があります。これは従来の曲というよりも雰囲気のある作品のように感じますが、実際にはそれがプラスに働いています。」"

"今回は、生成AIで楽曲を作り、それをrekordboxというパソコンのソフトで繋いでみたという記事の後日談を書いていきたいと思う。"

"テキストからオーディオへの超高速な変換を行うための、他の洞察や戦略があるのかどうか知りたいです。"

"提案されたモデルは97.8%の精度と0.98のマクロF1スコアを達成し...低リソース言語におけるTransformerベースのアプローチの可能性を強調しています。"

"目標は、曲を入力として受け取り、ジャンル、ムード、歌手の性別など、複数の要素を予測するシステムを構築することです。"

"私は自分自身のクラウドを構築しています... Tailscaleをインストールすることなく、マシンやそのマシン上のTCPサービスに接続する独自の方法が欲しかったのです... Tela（フィリピン語でfabric＝ファブリックを意味し、ネットワークファブリックとして実装されています）と呼ぶものの構築を始めました。"

"「我々の実験では、DAT-CFTNetがCFTNetやDCCRNなどの既存のモデルを上回り、音声の明瞭さと品質の点で一貫して性能の向上をもたらすことが示されています。」"

"我々は、現在最大のMSAコーパス（言語やジャンルにまたがる14,000曲以上）であるSongFormDBと、専門家によって検証された300曲のベンチマークであるSongFormBenchをリリースする。"

"VibeVoiceは7.5 HzトークナイザーでEncodec比80×圧縮を実現し、次トークン拡散によって最大4話者・90分の自然な対話を1つのLLMコンテキストウィンドウ内で合成できる画期的なTTSモデルです。音声品質はMOS 3.76を達成し、競合モデルを上回ります。"

"本記事では、whisper-1からgpt-4o-transcribeへの移行で、このハルシネーション (幻覚) を完全に解消した実装の全過程を、実コード付きで解説します。"

"我々は、シーン固有の聴覚知覚を再構築するために、空間室内インパルス応答（SRIR）をリアルタイムで生成するVRオーラリゼーション用のマルチモーダル深層学習モデルを提案する。"

"オーディオファイルをアップロードするだけで、わりと自然にMIDIに変換してくれました。特にメロディのメインラインはかなり正確で、「あ、これ使えるかも」と嬉しくなりました。"

"発言の帰属が全話を通してほぼ正確でした。単に「話者A/話者B」ではなく、「イチロー：」「武豊：」と実名で正しく出力されており、この体験を技術的に解説したいと思います。"

"LRS3で評価した結果、VisG AV-HuBERTはベースラインのAV-HuBERTと比較して同等以上の性能を達成し、特に高ノイズ条件下で顕著な改善が見られました。"

"Status Pro Xは、ニューヨークに拠点を置くStatus Audioの最新のイヤホンです。 イヤホンを小型化し、装着しやすくするために設計された、メッキ金属シャーシのようなハイエンド機能が含まれています。"

"最近、MOVAエコシステム企業である零界奇点（MOVA TPEAK）は、数千万人民元規模の新たな資金調達の完了を発表しました。"

"Meta が TRIBE v2 を発表：画像と音声に対する人間の脳の反応を予測。"

"Alibabaは、10時間以上の音声入力をサポートする、Qwen3.5-OmniマルチモーダルLLMをリリースし、PlusバージョンがオーディオベンチマークでGemini 3.1 Proを上回ると発表しました（Qwen）"