ローカルLLM自由帳 (Local LLM Diary)
ローカルLLM自由帳 (Local LLM Diary)
読者になる

ローカルLLM自由帳 (Local LLM Diary)

2024-04-15から1日間の記事一覧

2024-04-15

Chat Vector の効果 vs. MoEマージ の効果

前回の続きです。次はChat Vector処理によってどれくらい日本語チャット機能が改善しているのかを具体的にみてみます。 下記の記事で、Chat Vectorを使わなくても単純に2モデルをMoEマージするだけで一定の性能向上が観察できることは確認しています。 sc-ba…

#LLM #MoE #llama.cpp
はてなブックマーク - Chat Vector の効果 vs. MoEマージ の効果
プロフィール
id:sc_bakushu id:sc_bakushu
読者です 読者をやめる 読者になる 読者になる
このブログについて
最新記事
  • DeepSeek v3.2で採用された"Interleaved Thinking"について
  • 論文メモ:LLMの「行動的自己認識」を生む最小限かつメカニズム的なプロセス
  • AIバブル:弾けたら大変、弾けなくても大変
  • "今のAIエージェントはClaude無しじゃ役に立たない":中国KimiのAI開発戦略
  • RekaQuant:RekaAIによるGGUF量子化の新手法
検索
月別アーカイブ
  • ▼ ▶
    2025
    • 2025 / 12
    • 2025 / 11
    • 2025 / 8
    • 2025 / 7
    • 2025 / 5
    • 2025 / 1
  • ▼ ▶
    2024
    • 2024 / 8
    • 2024 / 6
    • 2024 / 4
    • 2024 / 3
    • 2024 / 2
    • 2024 / 1
  • ▼ ▶
    2023
    • 2023 / 12
    • 2023 / 7
ローカルLLM自由帳 (Local LLM Diary) ローカルLLM自由帳 (Local LLM Diary)

Powered by Hatena Blog | ブログを報告する

引用をストックしました

引用するにはまずログインしてください

引用をストックできませんでした。再度お試しください

限定公開記事のため引用できません。

読者です 読者をやめる 読者になる 読者になる