最高のVectara AIツールモデル_厳選Vectara情報

AIニュース

AIの幻想からお別れ？Vectaraが精度の高いエラー修正を声称する守護エージェントをリリース

企業における人工知能（AI）の利用は日々拡大していますが、その固有の「幻想」リスク——つまり事実とは異なるまたは根拠がない情報を生成するリスク——は、大規模な展開を妨げる主要な課題となっています。業界内で減少させるための技術や方法が数多く登場していますが、それでも効果は限定的です。最近、Vectaraという会社が新たなソリューション、「Vectara 幻想補正装置」をリリースしました。これは監視エージェントを通じて解決を目指すものです。

8.1k 2 日前

AI大規模言語モデルの幻覚ランキング：Gemini 2.0 Flashが幻覚率最低

最近、Vectaraは「幻覚ランキング」と題するレポートを発表し、様々な大規模言語モデル（LLM）が短い文書を要約する際に生じる幻覚を比較しました。このランキングは、VectaraのHughes幻覚評価モデル（HHEM-2.1）を利用しており、このモデルは定期的に更新され、要約に虚偽の情報が含まれる頻度を評価することを目的としています。最新のデータによると、このレポートは、いくつかの一般的なモデルの幻覚率、事実の一貫性率、応答率、平均要約の長さなどの重要な指標を示しています。

9.9k おととい

AI大規模言語モデルの幻覚ランキング：Gemini 2.0 Flashが幻覚率最低

DeepSeek-R1モデルの幻覚問題が深刻化、推論能力と正確性に課題

先日、Vectaraの機械学習チームがDeepSeekシリーズの2つのモデルに対して詳細な幻覚テストを実施した結果、DeepSeek-R1の幻覚率は14.3%に上り、前身であるDeepSeek-V3の3.9%を大幅に上回ることが判明しました。これは、推論強化のプロセスにおいて、DeepSeek-R1がより多くの不正確な内容、または元の情報と矛盾する内容を生成していることを示しています。この結果を受けて、推論強化型大規模言語モデル（LLM）における幻覚率に関する議論が活発化しています。画像参照

5.9k 3 日前

VectaraランキングでOpenAI GPT-4がドキュメント要約における幻覚率最低を記録

VectaraランキングでOpenAI GPT-4が傑出した成果を示し、ドキュメント要約における幻覚率はわずか3％、精度は97％に達しました。Vectaraの評価結果によると、GPT-4 TurboとGPT-4が最高の性能を示し、GPT-3.5 Turboがそれに続きます。OpenAI以外のモデルでは、Meta Llamaが最高ランクに位置付けられました。Vectaraは、言語モデルの幻覚率をチェックし、生成AIシステムの信頼性を向上させるためのオープンソースモデルを公開しました。Googleのモデルもランキングに含まれていました。

9.5k 4 日前