MENU
  • こどもプログラミング教室
  • 大人のプログラミング教室
  • 中小企業経営学
  • About us
知識があれば世界が変わる
金重総合研究所
  • こどもプログラミング教室
  • 大人のプログラミング教室
  • 中小企業経営学
  • About us
金重総合研究所
  • こどもプログラミング教室
  • 大人のプログラミング教室
  • 中小企業経営学
  • About us
  1. ホーム
  2. LLM

LLM– tag –

  • LLM応答時間を firstbyte と body に分解し、ホスト起因とプロバイダ起因を切り分ける計測の概念図
    AI・エージェント

    AIの応答が遅い原因を、ホスト起因とプロバイダ起因に分解 — 実測29,628件

    LLM呼び出しの所要時間を送出・ヘッダ受信・本文読了の3点で分解し、25日分・29,628件を実測した。遅さの約94%はプロバイダ側の本文生成で、firstbyte は日次中央値0.53〜0.68秒と安定していた。再起動が効くのはホスト起因のときだけである。
    2026年10月20日
1
新着記事
  • LLM応答時間を firstbyte と body に分解し、ホスト起因とプロバイダ起因を切り分ける計測の概念図
    AIの応答が遅い原因を、ホスト起因とプロバイダ起因に分解 — 実測29,628件
  • Ceph OSD 削除 — safe-to-destroy が通らないときに何を実測するか
  • ロシア産軽油の制裁緩和はなぜ起きたのか — トランプ氏『エネルギー停戦合意』の空手形と米国の“一人負け”構図
  • ICC 国際刑事裁判所とは — ハーグに本部が置かれた理由と東京裁判からの系譜
  • Proxmox の vzdump が監視を誤爆させていた — ZFS スナップショットと sanoid でバックアップを分ける
カテゴリ
  • AI・エージェント
  • インフラ・仮想化
  • ガジェット
  • こどもプログラミング教室
  • モータースポーツ
  • 中小企業経営学
  • 健康・医療
  • 大人のプログラミング教室
  • 政治
  • 未分類
  • 資産運用・投資
  • 金融・経済
目次

© 金重総合研究所.