Провідні системи штучного інтелекту показали несподівані результати знань про історичну науку.
Істинний іспит на AI: Які результати?
Чи може штучний інтелект стати надійним помічником для істориків? Це питання зацікавило групу дослідників Центру вивчення складних систем у Відні (науковий центр складності у Wien). Вони вирішили влаштувати незвичайний іспит на історію для найсучасніших систем AI – GPT, Gemini та Llama.
Але завдання було непростим. Вчені створили справжній історичний навчальний ґрунт – база даних, що охоплює 600 товариств у всьому світі. Він містить понад 36 тисяч фактів та інформації з 2700 наукових статей.
Кандидати вимагали не лише знань про дати та імена. Вони повинні були розуміти складні релігійні системи, ідеологічні рухи та бачити історичний контекст.
ІСТОРІЯ ІСТОРІЇ для ШІ: Занадто складно
Найскладнішим для електронного розуму була нова історія – період після 1500. Тут жодна система не подолала позначку в 40 відсотків правильних відповідей. Здається, що машини ще не можуть розгадати кулю складних відносин, характерних для останніх століть.
Цікаво і більше. AI демонструє очевидні географічні уподобання. Він впевнено обговорює про Північну та Центральну Америку. Але історія Південної Африки чи Океанії для нього – це темний ліс. Причина проста: більшість даних для систем навчання надходять з Європи та Північної Америки.
За словами Марії дель -Ріо Ханона з Лондонського університету, головна проблема лежить глибше. AI ідеально пам’ятає факти, але ще не здатний вважати істориком.
Йому не вистачає розуміння тонких зв'язків між соціальними, економічними та світоглядними факторами. Однак у цифровому розумі є шанс повернутись.
Дослідники створили відкриту базу даних, яка допоможе розширити історичні горизонти ШІ. Вони також планують перевірити останні версії систем, включаючи GPT-4O3. Можливо, наступний іспит пройде більш успішно.
Тим часом варто пам’ятати – з усією його ефективністю у вирішенні багатьох проблем, штучний інтелект ще не виріс до рівня реального історика. Він може бути хорошим помічником, але все ще занадто рано довіряти йому складним історичним дослідженням.
