関連推奨
楊植麟がGTC2026で暴露:月の暗面はAdam、全注意と残差接続をすべて変更し、すべてオープンソースにした
月の暗面CEO楊植麟は、オープンモデルがクローズドに迫るにはパラメータと計算力の積み増しではなくTransformerの基盤再構築が必要と語る。彼らは10年来使われてきた最適化器Adam、注意機構、残差接続を再設計し、大規模モデル学習の根本を変えつつある。....
Jul 20, 2026
168.6k
OpenAIがNeptuneを買収、実験監視ツールがGPTのイテレーション速度を倍に
OpenAIが実験管理企業Neptuneを買収し、その監視・デバッグツールをトレーニング技術スタックに統合。モデル開発のリアルタイム可視性を向上させ、実験追跡と自動アラート機能を共同で最適化する。....
Dec 4, 2025
163.9k
テンセントクラウド、星脈ネットワーク2.0を発表 大規模モデルのトレーニング速度を20%向上
テンセントクラウドは最近、大規模モデルのトレーニング効率を向上させることを目的としたアップグレード版の星脈ネットワーク2.0を発表しました。以前のバージョンでは、大規模モデルの計算結果の同期通信時間が50%以上を占め、効率が低下していました。新バージョンの星脈ネットワーク2.0では、複数の側面でアップグレードが実施されました。
Jul 1, 2024
149.8k
中興通訊、大規模モデル訓練に対応した最新のAIサーバーを発表
中興通訊は、中小規模モデルのトレーニングと推論ニーズに対応した最新のAIサーバーを発表しました。G5シリーズサーバーを発表し、今年中には大規模モデルのトレーニングに対応した最新のAIサーバーを発表する予定です。
Oct 12, 2023
143.2k
上海AI研究所、大規模モデル訓練ツールキットXTunerを発表 訓練コストの大幅削減を実現
上海AI研究所は、様々なハードウェアに対応し、大規模モデルの訓練コストを大幅に削減するツールキットXTunerを発表しました。XTunerは複数のオープンソース大規模モデルと互換性があり、増分事前学習や指示微調整などのタスクを実行できます。使いやすさと設定可能性を両立しており、標準化されたワークフローにより、ワンクリックで訓練を開始できます。
Sep 20, 2023
147.9k
