現実世界のAI導入でRAGが崩壊する理由
TLDR: RAGの概念上の約束は、非効率的な取得と生成の結合から生じる過剰なレイテンシーのために、O(n^2)の現実世界の複雑性の中で失敗します。サーバーコストから生じる1トークンあたり最大0.10ドルの経済的負担は非効率性を悪化させ、展開を持続不可能にします。大幅な再構築なしには、企業は高額なコストと低パフォーマンスに直面します。
TLDR: RAGの概念上の約束は、非効率的な取得と生成の結合から生じる過剰なレイテンシーのために、O(n^2)の現実世界の複雑性の中で失敗します。サーバーコストから生じる1トークンあたり最大0.10ドルの経済的負担は非効率性を悪化させ、展開を持続不可能にします。大幅な再構築なしには、企業は高額なコストと低パフォーマンスに直面します。