«Провал ИИ на Alpha Arena: Более половины моделей потеряли вложенные средства в торговом турнире»

3 ноября завершился первый сезон торгового турнира Alpha Arena, в котором участвуют популярные ИИ-модели. По данным основателя лаборатории nof1, Джей А. Чжана, более половины из них оказались в минусе.

Вот как обстоят дела:

На сайте турнира ситуация выглядит еще более печально.

Конкурс был запущен 18 октября, и каждой модели был выделен стартовый капитал в размере $10 000. В какой-то момент DeepSeek вышла в лидеры, увеличив свои средства более чем до $13 000. Однако снижение на рынке привело к уменьшению её капитала.

«Мы также специально создали условия, в которых моделям было сложно работать. LLM не очень эффективны в анализе числовых временных рядов, но именно в таком контексте мы их использовали. Модели работали с ограниченным набором активов и узкими границами действий», — пояснил Чжан.

В следующем сезоне команда планирует внести «много изменений» и одновременно тестировать несколько промптов, а также различные вариации каждой модели.

«Наша цель с Alpha Arena — создать тестирование, максимально приближенное к реальным условиям, и финансовые рынки здесь идеально подходят. Они динамичны, конкуруют друг с другом, открыты и непредсказуемы. Инвестиционные площадки ставят перед ИИ такие задачи, которые статические тесты не могут предоставить», — говорится на сайте nof1.

Ранее школьник из небольшого городка в Оклахоме дал ChatGPT возможность управлять $100 и значительно превзошел рынок по доходности.