бенчмарк

ARC-AGI-3: новый тест на здравый смысл, который нейросети массово проваливают. Фонд ARC Prize представил новый эталон для проверки универсальных способностей искусственного интеллекта — ARC-AGI-3. Если ранние версии теста предлагали абстрактные головоломки с цветными решётками, то теперь...

Миллиард токенов потратили на эксперимент, который перевернул представления о возможностях машин. Исследователи из SenseTime Research и S‑Lab Наньянского технологического университета представили подробный технический отчёт о прогрессе мультимодальных моделей в области пространственного...

DARPA выясняет, как новые технологии изменят мир науки и бизнеса. DARPA запустила программу Quantum Benchmarking в 2021 году для оценки прогресса в области квантовых вычислений. Программа направлена на создание новых метрик для измерения достижений в квантовых вычислениях и устранение...

Под угрозой многомиллионные инвестиции. Организация по оценке производительности систем SPEC (Standard Performance Evaluation Corporation) аннулировала более 2600 результатов тестирования процессоров Intel Xeon за 2022 и 2023 годы. Причина – использование Intel специальных компиляторов...

MLPerf поделилась результатами тестирования суперкомпьютеров от Nvidia, Intel и Google. MLPerf , ведущий публичный бенчмарк на способность компьютерных систем обучать нейронные сети, добавил в свою таблицу результаты тестирования производительности различных систем для обучения крупных...

Исследователи представили платформу для сравнения и развития робототехники в области производства и сборки. Роботы-сборщики - это роботы, которые могут собирать различные продукты из отдельных деталей. Они могут быть очень полезны для промышленности, но для этого им нужно уметь манипулировать...