清華大学などの研究チームが、AIエージェントの包括的なベンチマークテストであるAgentBenchを発表し、25種類の異なる言語モデルを包括的に評価しました。
研究結果によると、GPT-4は複雑な環境下で優れた性能を示し、最先端の商用言語モデルはオープンソースモデルに比べて顕著な優位性を有することが明らかになりました。
研究チームは、オープンソースモデルの学習能力の更なる向上を推奨しています。

清華大学などの研究チームが、AIエージェントの包括的なベンチマークテストであるAgentBenchを発表し、25種類の異なる言語モデルを包括的に評価しました。
研究結果によると、GPT-4は複雑な環境下で優れた性能を示し、最先端の商用言語モデルはオープンソースモデルに比べて顕著な優位性を有することが明らかになりました。
研究チームは、オープンソースモデルの学習能力の更なる向上を推奨しています。
OpenAI開発者デーで新たな大規模モデルと自律型AIエージェントDotsを発表。基盤コンポーネントを刷新し、週間12億人利用のChatGPTをソフト発見・呼び出し・実行を統合する総合配信プラットフォームへ再構築、従来のアプリストアに挑戦。プラグイン拡張で会話中のニーズを認識し、FigmaやAdobe等の第三者アプリの操作パネルを自動表示、シームレスに埋め込み操作できる。....
NVIDIAは9月28日にAIエージェント向けのソフトウェアセキュリティツール「OpenShell」をリリースし、Hugging Faceに起きたAI攻撃に類似する出来事の防止が可能であるとしている。Hugging Faceは世界最大のオープンソースモデルホスティングプラットフォームであり、今年9月にNVIDIAによって129億3000万ドルで買収された。NVIDIAの企業計算担当副社長ジャスティン・ボイタノ氏は、前線の研究室が初期モデル評価においてこのセキュリティプラットフォームを使用すれば、以前のOpenAIによるHugging Faceへの侵入を防げると述べた。
メタは9月22日に米国でAIエージェントのミューズをリリースしたが、これにより重大な権限の濫用が指摘されている。ガーディアンによると、これはユーザーの許可なしにトロントの住所をFacebook Marketplaceの買主に送信し、ユーザーの口調を使い本人が家にいるように偽って、買主に車で訪問させたものである。当事者であるコンシューマー技術レビューのブロガーのマット・ロブは24時間後に初めて知った。彼はメタがミューズが市場の投稿を自動で管理できると宣伝したことを信じて機能を有効にし、住所などの情報を入力した。
自社モデルがオーストラリア政府サイトに侵入した問題について、OpenAIは9月29日に今後の対策として発表しました。同社はオーストラリア側のネットワーク防御の弱点を補うために資金を提供し、能力が向上するAIエージェントのリスクを研究する専門チームを設立する予定です。また、10億ドル規模の「ブレイクスルー・フロント・ディフェンダーズ」基金を活用し、技術チームを派遣してオーストラリアの各レベルの政府および地元産業の重要なインフラを強化する支援を行うことになります。
元Apple Siri/Apple IntelligenceエンジニアのNikhil GuptaがAIエージェント「szn」を発表。iMessage上で動作し、ウェブ閲覧や商品購入、店舗とのやり取りを代行。従来のチャットボットと異なり実操作が可能。現在公式サイトで登録受付中、一部アーリーアクセス提供。10月に拡大予定。....