ChatGPT погіршує довгострокову пам’ять студентів — доведено науково

Сьогодні,   19:21    11

Штучний інтелект пришвидшує навчання — але чи справді навчає? Нове наукове дослідження дає несподівано чіткий негативний висновок. У матеріалі PsyPost описано рандомізований контрольований експеримент, опублікований у журналі Social Sciences & Humanities Open: студенти, які готувались до іспитів за допомогою ChatGPT, через 45 днів пам’ятали матеріал значно гірше за тих, хто навчався традиційними методами. Автор дослідження називає це явище «когнітивною милицею» — і попереджає, що наслідки можуть виявитись незворотними.

Що відомо коротко

  • Експеримент провів Андре Баркауі, професор Федерального університету Ріо-де-Жанейро, з 120 студентами бізнесу.
  • Одна група готувала теми за допомогою ChatGPT, інша — традиційними методами: конспекти, академічні бази даних, пошуковики.
  • Через 45 днів несподіваний тест виявив: «традиційна» група відповіла правильно на 68,5% питань, «ChatGPT-група» — лише на 57,5%.
  • Навіть після поправки на різницю в часі (традиційна група витрачала 5,8 год проти 3,2 год у ChatGPT-групи) результати лишались кращими для традиційної.
  • Особливо сильним ефект виявився для складних технічних тем — саме там, де мозок найбільше потребує «продуктивного зусилля».

Що таке когнітивне розвантаження і чому воно небезпечне

Когнітивне розвантаження — це передача розумових задач зовнішнім інструментам. Калькулятор звільнив нас від усного рахунку, записник — від необхідності тримати список покупок у голові. Ці форми розвантаження зазвичай нейтральні або корисні, бо вивільнений ресурс мозку спрямовується на складніші завдання.

Але генеративний ШІ — принципово інша ситуація. Він бере на себе не механічне запам’ятовування, а сам процес аналізу, синтезу й аргументації — тобто саме ту «важку роботу», яка й формує довгострокову пам’ять. Нейронаука знає це явище як консолідацію пам’яті: нові знання стабілізуються в мозку лише тоді, коли під час навчання виникає достатньо «тертя» — зусилля, повторення, самоперевірка. Коли ChatGPT усуває це тертя, він усуває й умову для справжнього запам’ятовування.

Про те, як мозок взагалі зберігає пам’ять і формує нові нейронні зв’язки, ми вже детально розповідали — і ці механізми прямо пояснюють, чому легке навчання виявляється неефективним.

Деталі дослідження: умови та хід експерименту

Баркауі відібрав 120 студентів програми «Управління бізнесом» — 68 чоловіків і 52 жінки, усі від 18 до 24 років, без спеціальної підготовки з комп’ютерних наук. Жоден з них раніше не проходив курсів з машинного навчання. Це важливо: дослідник виключив можливість того, що технічна підготовленість учасників вплине на результати.

Випадково розподілена перша група (60 осіб) використовувала ChatGPT для дослідження тем з основ штучного інтелекту — включаючи етику, суспільні наслідки ШІ та технічні основи. Друга група (ще 60 осіб) мала ті самі завдання, але без доступу до чат-ботів: лише конспекти, наукові бази даних і звичайний пошук. Обидві групи готували десятихвилинні презентації впродовж двох тижнів.

Після презентацій усі студенти продовжили звичне академічне життя. Через 45 днів їх несподівано зібрали на тест із 20 питань — не на визначення, а на розуміння концепцій. Повернулись 85 із 120 учасників (відсів рівномірний між групами).

Результат: 68,5% проти 57,5% на користь традиційної групи — різниця в 11 відсоткових пунктів, яка особливо яскраво проявилась у технічних темах.

Що показали нові дані: «ілюзія компетентності»

Один із найважливіших висновків дослідження: попередній досвід роботи з ChatGPT не захищав від негативного ефекту. Студенти, які регулярно користувались чат-ботами раніше, показали результати не кращі за новачків. Це спростовує припущення, що «просто треба навчитись правильно використовувати ШІ» — адже навіть досвідчені користувачі потрапляють у когнітивну пастку.

Баркауі описує її як «ілюзію компетентності»: ChatGPT дає відчуття, що ти зрозумів матеріал, бо отримав гарно сформульовану відповідь. Але відчуття розуміння й саме розуміння — різні речі. Справжнє засвоєння відбувається лише тоді, коли мозок самостійно шукає, з’єднує й відтворює інформацію.

Дослідник формулює три ключові висновки. По-перше, продуктивність не замінює компетентність: здати завдання і засвоїти процес його виконання — абсолютно різні речі. По-друге, критичний «м’яз» атрофується: так само, як калькулятор знизив навички усного рахунку, делегування аналізу ШІ поступово руйнує здатність до синтезу та критичного мислення. По-третє, ШІ — другий пілот, а не автопілот: технологія повинна розширювати людські можливості, а не замінювати зусилля.

Про ширший контекст того, як штучний інтелект впливає на критичне мислення і пізнання, — в нашому окремому матеріалі.

Чому це важливо для освіти і суспільства

Результати дослідження мають прямі практичні наслідки для університетів, шкіл і роботодавців. Якщо студент навчився «отримувати результат», не розвинувши відповідного розуміння, він матиме серйозні проблеми у ситуаціях, де немає ШІ під рукою — на реальній роботі, у кризовій ситуації, під час іспиту без доступу до мережі.

Дослідники з MIT та Гарварду вже кілька років вивчають феномен «когнітивного аутсорсингу» — ситуації, коли людина делегує мисленнєві задачі зовнішнім системам настільки глибоко, що втрачає здатність виконувати їх самостійно. Дослідження Баркауі — одне з перших, яке тестує цей ефект за допомогою рандомізованого контрольованого дизайну — золотого стандарту медичних і психологічних досліджень.

Варто уточнити, що дослідження має обмеження: воно проводилось на студентах бізнес-спеціальності одного університету Бразилії. Автор визнає, що результати можуть відрізнятись в інших дисциплінах і культурних контекстах. Майбутні дослідження, за його словами, мають перевірити, чи змінює ситуацію підхід «спочатку спробуй сам, потім запитай ШІ» — тобто чи можна зберегти швидкість ChatGPT, не жертвуючи якістю засвоєння.

Про те, яка область мозку відповідає за навчання новим навичкам і чому без активації цих зон справжнє навчання неможливе, — читайте у нашому попередньому матеріалі.

Цікаві факти

  1. Психологічна концепція «бажаних труднощів» (desirable difficulties), на якій базується дослідження, була розроблена когнітивним психологом Робертом Бьорком з UCLA. Суть: навчання стає глибшим саме тоді, коли воно важче — наприклад, коли студент намагається відтворити матеріал по пам’яті перед тим, як повторно читає текст.
  2. За даними OpenAI, ChatGPT щотижня використовують понад 400 мільйонів активних користувачів по всьому світу — і значна частина з них є студентами. Масштаб потенційного когнітивного ефекту, який описує нове дослідження, відповідно є безпрецедентним.
  3. Схожий ефект вже спостерігався з мобільними навігаторами: дослідження, опубліковані у Nature Communications, показали, що постійне використання GPS знижує активність гіпокампу — відділу мозку, відповідального за просторову пам’ять і орієнтацію.
  4. Виявлений у дослідженні ефект частково пояснює парадокс: чим більше студент використовував ChatGPT раніше, тим гірше результати — незалежно від досвіду. Регулярні користувачі ШІ не адаптуються, а навпаки, закріплюють пасивну стратегію навчання.

FAQ

Чи означає це, що ChatGPT шкідливий і його не варто використовувати? Дослідження не закликає відмовлятись від ChatGPT. Воно показує, що повне делегування навчального процесу чат-боту шкодить довгостроковій пам’яті. Автор пропонує модель «ШІ як другого пілота»: спочатку студент сам намагається розібратись із матеріалом, а потім може звернутись до ChatGPT для перевірки, уточнення або генерації прикладів.

Чому ефект особливо сильний для технічних тем? Технічні концепції потребують побудови складних ментальних моделей — зв’язків між поняттями, причинно-наслідкових ланцюжків. Коли ChatGPT будує ці зв’язки замість студента, мозок не формує відповідних нейронних шляхів. Для менш технічних тем (наприклад, етики) вплив також є, але менш виражений — ймовірно, бо там простіше інтуїтивно зрозуміти матеріал.

Чи відрізняється ефект залежно від способу використання ChatGPT? Це ключове питання для майбутніх досліджень. Поточне дослідження не розрізняло типи запитів до ChatGPT. Автор пропонує перевірити, чи зміниться результат, якщо студенти спочатку формулюватимуть власні відповіді, а потім просять ChatGPT оцінити або доповнити — тобто використовують його як «тренера», а не «виконавця».


WOW-факт. Група студентів із ChatGPT впоралась із завданням майже вдвічі швидше — 3,2 години проти 5,8 у традиційної групи. Але через 45 днів вони пам’ятали матеріал на 11 відсоткових пунктів гірше. Вийшло, що кожна заощаджена година навчання з ШІ-помічником «коштувала» приблизно два відсотки довгострокових знань — немов купити підручник, але замість читання просто покласти його під подушку.


cikavosti.com





  • Контакти
  • Політика конфіденційності
  • Карта сайту