テンセントが WorkBuddy Bench を発表:コード、ウェブページ、オフィス作業、セキュリティをすべてワンパッケージにしたコードインテリジェントテストケース
テンセントが WorkBuddy Bench 多分野評価キットを発表しました。論文は arXiv に掲載されています。これはコードインテリジェントの評価においてそれぞれの分野が独立していること、および生成基準が透明ではないという状況を打ち破り、コードエンジニアリングのリポジトリレベル、フロントエンド製品、オフィス自動化などの4つの業務シーンを統合したものです。最大の特徴は問題数ではなく、問題の根源的な設計によって答えを覚えることを排除し、インテリジェントが異なる分野で汎用性と移行能力を実際の評価で反映できることを確保しています。