Насколько сильно ChatGPT и Copilot ошиблись в прогнозах победителя Дерби в Кентукки?

В 2016 году онлайн-платформа, использующая принципы "коллективного интеллекта", поразила поклонников скачек, сделав точный прогноз для Kentucky Derby, назвав все четыре лидирующие лошади в правильном порядке. (Однако в следующем году ее прогнозы оказались далеки от истины, и TechRepublic предположил, что в гонке 2016 года просто наблюдалось необычное скопление очевидных фаворитов.)

С тех пор стало почти традицией — обращаться к искусственному интеллекту (ИИ) для прогнозирования победителей каждый год, а затем оценивать, насколько близок был прогноз. Поэтому, перед сегодняшней гонкой, лошади по имени "Journalism" профессиональные букмекеры дали лучшие шансы на победу, но смогла ли ИИ сделать более точный прогноз? USA Today сообщает:

Сеть USA TODAY попросила Microsoft Copilot AI смоделировать порядок финиша для Kentucky Derby 2025 года, основываясь на последних коэффициентах, прогнозах и факторах гонки 1 мая. В ее прогнозе лидировала Journalism. ИИ-сгенерированный ответ отметил благоприятную стартовую позицию Journalism (№8), которая произвела второе по величине количество победителей Kentucky Derby, а также четырехгоночную победную серию, включающую Derby в Санта-Анита в прошлом месяце.

ChatGPT также выбрал ту же лошадь, согласно FanDuel. Однако победителем оказалась лошадь "Sovereignty" (которую Copilot предсказал на втором месте). Тем временем, выбор Copilot на первое место (Journalism) финишировал вторым.

Но затем прогнозы Copilot оказались сильно неточными…

• Выбор Copilot на третье место — лошадь по имени Rodriguez — был снят с гонки за несколько часов до ее начала.
• (А на следующий день лошадь, которую Copilot выбрал на 10-е место, также была снята с гонки.)
• Выбор Copilot на четвертое место — "Sandman" — финишировал на 18-м месте.
• Выбор Copilot на пятое место — "Burnham Square" — финишировал на 11-м месте.
• Выбор Copilot на шестое место — "Luxor Cafe" — финишировал на 10-м месте.
• Выбор Copilot на седьмое место — "Render Judgment" — финишировал на 16-м месте…

Онлайн-издание, посвященное скачкам, также попросило "обученную ИИ LLM-модель" сделать свои прогнозы и получило крайне неравномерный результат:

• Burnham Square (финишировал 11-м)
• Journalism (финишировал 2-м)
• Sandman (финишировал 18-м)
• Tiztastic (финишировал 15-м)
• Baeza (финишировал 3-м)