タグ: #audio

한국어English日本語中文

← すべての記事

• SOTAマルチモーダルLLM分析 — 一つのモデルで見て聞いて話す

  テキストだけで学習されたLLMが、どのようにして画像・音声・動画まで理解し生成できるようになったのかを見ていきます。モダリティごとのエンコーダとプロジェクタ、統合トークン空間、any-to-anyの流れ、ネイティブマルチモーダルとアダプタ接合、そして学習戦略やベンチマーク・限界までを整理します。

  2026-06-30 · 43 分で読めます #multimodal-llm#any-to-any#vision-language#audio#architecture

• torchaudio完全ガイド — オーディオ処理から音声認識、TTS、音楽分析まで

  torchaudioでオーディオ読み込み、スペクトログラム変換、Melフィルタバンク、MFCC、音声認識（Wav2Vec2/Whisper）、TTS、話者分離、ノイズ除去まで。オーディオAIのすべてをPyTorchで扱います。

  2026-03-02 · 11 分で読めます #ai-platform#pytorch#torchaudio#audio#speech-recognition