Трошки про школу та ШІ
Минулого тижня OECD опублікувала PISA 2025 (ну, давайте, оріть з назви, я знаю, що ви хочете) — і там знайшовся датапоінт, який пояснює дещо важливе одним реченням: AI, який робить роботу за тебе, робить тебе гіршим. AI, якого ти перевіряєш, робить тебе кращим. Різниця не в тому, скільки ти ним користуєшся, а в тому, хто в цьому симбіозі головний.
П’ятнадцятирічні школярі вже проходять той самий урок, який ми в IT досі вчимо методом боляче набитих ґуль.
Що сталося
PISA раз на три роки тестує
Українська частина — просідання по читанню й математиці порівняно з
Розрив із середнім показником країн ОЕСР залишається значним:
• природничі науки — мінус 34 бали;
• читання — мінус 43 бали;
• математика — мінус 32 бали.
Найбільш тривожний показник — частка учнів, які не досягають базового рівня одразу з трьох предметів. В Україні таких 29,3%, тоді як у середньому по ОЕСР — 19,7%.
Тобто майже кожен третій український
Йдеться не про складну академічну теорію. Учням нижче базового рівня може бути важко зрозуміти простий текст, прочитати базовий графік або пов’язати одиниці вимірювання з ціною.
Є й помітний гендерний розрив. В Україні дівчата значно випереджають хлопців у читанні — 434 бали проти 402, тобто різниця становить 32 бали. У математиці навпаки: хлопці мають 435 балів проти 427 у дівчат. У природничих науках різниця мінімальна: 450 балів у дівчат і 446 у хлопців.
Мене в цьому звіті зацікавила не загальна деградація, а розділ про AI.
Цифри, які ламають зручний наратив
Учні, які не використовували AI для написання тексту, скорочення чи попереднього пошуку інформації, показали найвищі результати з природничих наук серед усіх груп. Розрив був найбільшим на самаризації текстів: щоденні користувачі AI відставали від тих, хто взагалі ним не користувався, майже на 30 балів.
Виняток один. Серед тих, хто використовував AI приблизно раз на тиждень саме «щоб допомогти вчитися» — не написати за них, а пояснити, потренувати, перевірити розуміння — результати були найвищі, вищі навіть за тих, хто AI взагалі не торкався. І ще нюанс: серед активних користувачів кращі результати показували ті, кого окремо навчили оцінювати якість AI-згенерованої інформації.
Тобто змінна, яка визначає результат, — не частота використання. Це роль, яку AI грає в парі з людиною: виконавець чи тренажер.
Той самий урок, тільки з естімаціями замість домашки
Кілька місяців тому я писала про роботу з Rovo, корпоративним AI-агентом Atlassian. Ми підключили агента до попередньої оцінки нової ініціативи: на вхід — опис задачі, історичні тікети як приклади, правила естімації. На виході — структурований драфт з числами й посиланнями на конкретні тікети. Виглядало переконливо. Настільки, що перший імпульс був — прийняти й піти далі.
Ми перевірили. І знайшли: агент бачив обмежений фрагмент з приблизно 50 тікетів, приклади брав не найрелевантніші, а ті, що потрапили в контекст, а правила естімації читав як звичайний текст, а не як алгоритм. Розбіжність із коректною оцінкою сягала
Якби ми взяли AI-драфт як фінальний — це був би режим «AI написав за нас», той самий, що в дослідженні корелює з гіршими результатами. Ми використали його як відправну точку для перевірки — режим «AI як тренажер для критичного мислення», той, що дає найкращий результат.
Різниця між цими режимами непомітна на виході — в обох ви отримуєте гарно структурований документ з числами. Різниця з’являється тільки в процесі, і саме там школярі й дорослі BA роблять однакову помилку: пропускають крок перевірки, бо AI звучить впевнено, а перевірка забирає час, якого нема.
Чому помірність це оманлива метрика
«Користуйтеся в міру» звучить як універсальна порада, яку можна дати про що завгодно, спорт, алкоголь, солодке. Але річ не в кількості дотиків до інструменту за день, а в тому, хто виконує розумову роботу. Можна користуватися AI щодня в режимі тренажера — якщо щоразу перевіряти. А можна скористатися ним раз на тиждень, але саме той раз бездумно скопіювати драфт у фінальний документ — і це вже режим виконавця, навіть при мінімальній частоті.
У BA-роботі це підступно, бо наш продукт це переважно текст: вимоги, оцінки, комунікація зі стейкхолдерами. AI генерує текст, який виглядає компетентно за замовчуванням. Виглядає, ага.
Що з цим робити
Універсального рецепта нема навіть у авторів PISA — вони самі пишуть, що зв’язок складний і залежить від того, як саме використовують інструмент. Але в нашій команді працює таке:
- Верифікація фінальних артефактів — окремим кроком від генерації, бажано іншою людиною або хоча б після паузи.
- Навчання команди — це не «як писати промпт», а навичка розпізнавання типових помилок AI: обрізана вибірка даних, вигадані деталі, впевнений тон при неправильному розрахунку.
- Швидкість, яку дає AI, вища за швидкість перевірки. Якщо економите на першому й пропускаєте друге — ви не заощаджуєте час, а переносите ризик помилки на пізніший, дорожчий етап.
Питання без відповіді
PISA виміряла школярів, яких цілеспрямовано навчали оцінювати якість AI-контенту, і показала, що це працює. У дорослих професійних командах такого навчання здебільшого нема — ми просто отримали доступ до інструменту й вирішили, що вміння ним користуватися прийде само. Судячи з мого досвіду з естімаціями через Rovo, воно не приходить.
Чи є у вашій команді формалізований процес перевірки AI-ауткаму, чи це поки тримається на тому, що хтось один занадто параноїдальний, щоб довіряти красивому драфту з першого разу?
28 коментарів
Додати коментар Підписатись на коментаріВідписатись від коментарівВсе перевіряється законами логіки.
Схоже фільм «Ідіократія» все ж таки був пророцькою документалкою, а не абсурдистською комедією :)
Я вот взял и ради интереса решил школьный выпускной тест по математике. Без подготовки правильно ответил на все вопросы, а мне 61 годик уже... что могу сказать... Эти тесты рассчитаны на полных дебилов. Я не понимаю, как после таких тестов, даже если они решены на 100500 баллов, можно принимать людей в вуз, где с 1 сентября начинается например матанализ. Они ж просто не потянут, для них даже первые несколько лекций будут шоком.
Просто помню это все по себе. Я при совке физматшколу закончил с отличием, сдал вступительные экзамены в Шевченко по математике и физике на пятерки, и все равно был просто ошеломлен тем потоком математики, который на нас обрушился в универе с первых лекций. Как сегодняшние эти долбодятлы выпускники там учатся, я вообще не представляю...
Я в школі по олімпіадам їздив по фізиці і математиці, а на днях на інстаграмі попався математичний quiz з дужками, корнями і квадратними корнями, і я на 5 хв заліп, не міг згадати як дужки правильно розкриваються, що на що множиться.
І вот думаю, як же я стільки вижив і так далеко просунувся по кар’єрі без цього? А на ДОУ тут розкажуть, що без універу нікуди, що неможливо стати інженером і програмістом без двох років матана та іншої математики.
Так, може, ви і просунулися в кар’єрі, бо знали це. Хз, що буде з тими, хто вирішує всі задачки АІшкою
Взагалі ні, 0 користі. Єдине що з математики згодилося це базова арифметика, відсотки, базова статистика. Тобто те, що за місяць можна вивчити а не 5 років в школі і 2 роки в універі. І то, вплив на досягнення може 5%.
А еще натренированная нейронка в голове на поиск решения и анализ и построение связностей.
І забита голова непотрібною фігньою. Тому не знаєш що краще, аналітична нейронка, чи зря використані, зіпсовані слоти пам’яті, і нарушена психіка.
Ну і я ж не кажу замість математики і матана в пивко пити і сємки жувати. І не кажу убирати всю математику. Просто замість інтегралів, теорем та іншого харкора, краще б різного роду складності рівняння і арифметичні задачки вирішували, руку і нейронку набивали.
Плюс є куди корисніші і практичніші речі і скіли які прокачувати. І є куди ефективніші способи «на пошук рішень і аналізу». Та навіть комп ігри, стратегії, прокачають цю нейронку куди краще ніж доведення теорем, ще й задоволення отримаєш. Про різні логічні ігри взагалі мовчу, ніякий матан з ними не зрівняється.
уті-путі яка мімозка, матан йому слоти памʼяті зіпсував та психіку нарушив.
а замість того, щоб здавати на водійське посвідчення, краще почати бігати ))
Дійсно неможливо, тому що «математика — це гімнастика для ума» ©, а хороший університет «вчить вчитися». Звісно що більшості людей в житті не знадобиться математика вище рівня «рахувати відсотки по кредиту», але вміння логічно розібрати важку задачу на складові і таким чином її вирішити — буде в пригоді багатьом.
Тут я хочу уточнить. Monkey-кодером и таким же «инженером» получится стать, а вот хорошим, самодостаточным инженером или програмистом вряд ли.
Звісно що для того щоб питати у клодіка «зроби так щоб все працювало» багато мізків не треба.
ох лол
радиофизиком же
а можна я цей час потрачу на іншу, більш цікавішу і кориснішу гімнастику для ума замість теорем, інтегралів, диференціалів, трьохетажних формул та іншого матана який по факту майже всі заучували і нікому не згодилися? Тобто по-факту ніякої гімнастики не було, була прокачка пам’яті (зубрьожка) і вміння писати дрібним шрифтом (шпори), он це да, прокачало.
Можна я виберу он це для «гімнастики ума»?
— цікаві арифметичні, практичні, побутові задачі, так щоб сходу, як табличку множення, можна було оцінити виплати по кредиту, дохідність від інвестицій, порахувати бюджет, податки
— головоломки, квізи, ребуси, та навіть судоку який ще й пам’ять качає
— фізичні, практичні, побутові задачки
— цікаві програмістські задачки, реальні практичні проекти які вирішують якість твої проблеми
Угу, а «автоваз» вчить автомеханіці, а виробник телевізорів «Електрон» — електроніці
Ну тобто якби я не доводив би теореми на дошці в універі, я би не вмів розбивати задачу на складові, так виходить? Більше немає інших варіантів цього навчитися? Я можу згадати кілька однокурсників, які забили на матан, і на універ з другого курсу, і пішли працювати, зараз стафф інжініри та інших високих позиціях в зарубіжних компаніях. Як же так? Вони ж не вміють розбивати задачі на складові по твоїй логіці!
Можна, я тобі дозволяю. Роби зі своїм життям що хочеш.
Ну тобто та сама математика.
Побутові практичні задачки це що?
Дивно що ти в цей список не додав научпоп тіктоки і кросворди в газетах, там же теж думати треба.
І? Що ти цим хотів сказати? Що конкретно в тих компаніях не треба знати матан щоб досягти високої позиції? Ну окей.
До чого ти взагалі матан (математичний аналіз) припер? Мова про математику йшла, ти між ними не знаєш різниці?
Не та сама а сабсет шкільної математики який необхідний для реального життя, без всякого хардкору який забувається через пів року після школи / універу
порахувати скільки сонячних панелей для дому треба, яку батарею для безперебійного живлення, базова електроніка, як грами в міллітри перевести, тощо, короче 5% від того, чим грузять в школі і універі.
В 99.99% компаніях
Мій оригінальний коментар був про математику і матан, на що ти почав відповідати що без матана ніяк задачу логічно не розбити, а ти тепер плавно намагаєшся на арифметику спригнути, що ти про арифметику говорив. Ну так проти арифметики ніхто не виступає, но і її вчити не треба N років життя.
А що там хардкорного в школі? Окрім елементів вишмату в 11 класі все достатньо примітивне.
А ще ти здивуєшся, але математика і ази вишмату потрібні далеко не тільки в програмуванні. Те що особисто тобі воно не треба щоб клодіка питати зробити щоб працювало, але є повно технічних спеціальностей де знання математики і матану дійсно необхідне. І набагато краще коли в спеціалізований навчальний заклад людина приходить вже з якоюсь базою хоча б на рівні «щось таке чув», ніж вчити з нуля.
Особисто їх всі перевірив чи так приблизно по вайбу відчуваєш?
Покажи мені де в моєму оригінальному коментарі слово «матан»? Я бачу тільки «математику». Хоч нейроночці мої коментарі кидай якщо сам не можеш їх нормально прочитати.
в універі ще фізкультура була, предмет який от точно не має нічого спільного з інженерією. але ти приєбався до матана. невже тобі і справді так складно було? ))
ти просто програму не тягнув. в нас були хлопці, які не зубрили, але то були дійсно світлі голови, які вміли міркувати і в них був хист до знання. звичайно більшість включаючи мене шпори писала і потім коли потрібно було вирішити задачу просто шукали потрібну формулу.
тобі що хтось забороняє головоломку та ребуси? сиди, вирішуй свої кросворди, престаркуватим навіть рекомендують це робити, щоб заповільнішати процесс отупіння
ну і шо? а я знаю президента двічі несудимого, якій взагалі не вчився в універі. до чого тут матан?
Идиотское утверждение, что математику надо зубрить, иначе ничего знать не будешь. Как раз матра тем и прекрасна, что там зубрить не надо ничего, потому что это наверное единственная наука, где получение более сложных знаний делается путем логических выводов из знаний более простых. Я например в свои 61 год до сих пор могу спокойно вывести все формулы тригонометрии и геометрии, просто основываясь на определении синуса и косинуса (абсцисса и ордината точки единичной окружности).
а ты призовые места занимал или просто ездил? бо это 2 большие разницы. а не понимать как скобочки раскрывать это уже прямо плохо...
не то чтобы я за математику топлю, но какая карьера? ты же не Илон Маск и даже не Черный Борис, а рядовой эяйщик
Интересно, а сколько школьников смогут управиться с лошадью? А ведь не так уж давно, это был очень важный навык!
А сколько людей смогут сложить обычную печку? А ведь тоже важный навык был.
Идет эволюция, динозавры пытаются схватит приматов и сдернуть с деревьев на землю.
а якщо інтернет відключать?
а если канализацию?
отож
ну вот и не надо тягать школьников
Увага! На ДОУ заявили що ШІбурда перетворює Інтернет на каналізацію