AIPA (Artificial Intelligence Policy Analyst): повна автономія ШІ у зборі даних та написанні записки.PA (Policy Analyst): традиційне створення документу людиною-аналітиком.IAPA (Intelligence Augmented Policy Analysis): гібридна модель («людина в контурі»), де людина редагує згенерований ШІ текст.3. Методологія дослідженняДослідники порівняли ці три моделі на прикладі створення 6 аналітичних записок на дві теми: ефективність вуглецевого податку та заходи протидії COVID-19.Розробка AIPA: Модель GPT-2 (medium, 355M) була навчена на корпусі з 1 895 сторінок аналітичних записок уряду Британської Колумбії (Канада) та 64 звітів ВООЗ.Розробка PA та IAPA: Студент магістратури з публічної політики створив записки з нуля (PA), а пізніше відредагував матеріали, згенеровані ШІ (IAPA).Експертна оцінка: Оцінку проведено двома незалежними панелями з 8 колишніх заступників міністрів уряду Саскачевану (Канада).Панель 1 («Поінформована»): Знала про використання ШІ та мала вгадати, які саме документи створені машиною.Панель 2 («Введена в оману»): Не знала про участь ШІ до завершення оцінювання.4. РезультатиЧасові витрати: Навчання ШІ вимагало близько 30 людино-днів для підготовки даних, проте сама генерація записки займала всього 8 секунд. Натомість людина витрачала на написання записки з нуля понад 1,5 години, а на редагування тексту ШІ — близько 40 хвилин.Текстова подібність: Записки IAPA зберегли 50–66% початкового тексту ШІ.Оцінки експертів (у % від максимально можливого балу):Модель аналізуВуглецевий податокCOVID-19AIPA (тільки ШІ)39% – 41%30% – 38%PA (тільки людина)57% – 67%46% – 62%IAPA (ШІ + людина)56% – 61%39% – 41%Здатності оцінювачів розпізнавати ШІ: Усі учасники поінформованої групи безпомилково ідентифікували ШІ-тексти. У групі, яку ввели в оману, лише 1 із 4 експертів здогадався про штучне походження документів.Зауваження експертів: Тексти чистом'якого ШІ (AIPA) містили безглузді речення, нерозшифровані абревіатури, помилки у фактах і недоречні посилання (URL). Редагування людиною (IAPA) покращило якість, але не перевищило якість аналітики, написаної людиною з нуля (PA).5. Обговорення, висновки та обмеженняЧи настав «кінець аналітика політики»?Ні. Чистий ШІ (станом на момент експерименту) не здатен самостійно проводити якісний аналіз. Він не розуміє політичного контексту, цілей міністра, законності рішень та людських нюансів.Майбутнє за гібридною моделлю (IAPA):ШІ є чудовим інструментом для миттєвого створення першого чернетки («Background» та фактчекінг). Проте остаточна оцінка та стратегічні рекомендації залишаються за людиною.Ключовий висновок: «Штучний інтелект не замінить аналітиків; але аналітики, які використовують ШІ, замінять тих, хто його не використовує».Рекомендації для освіти та уряду:Забороняти ШІ у закладах вищої освіти марно. Слід навчати майбутніх державних службовців критично працювати з ШІ-чернетками, виявляти упередженість даних та зосереджуватися на вищих комунікативних і стратегічних навичках.Обмеження дослідження:Складність досту
AIPA (Artificial Intelligence Policy Analyst): повна автономія ШІ у зборі даних та написанні записки.PA (Policy Analyst): традиційне створення документу людиною-аналітиком.IAPA (Intelligence Augmented Policy Analysis): гібридна модель («людина в контурі»), де людина редагує згенерований ШІ текст.3. Методологія дослідженняДослідники порівняли ці три моделі на прикладі створення 6 аналітичних записок на дві теми: ефективність вуглецевого податку та заходи протидії COVID-19.Розробка AIPA: Модель GPT-2 (medium, 355M) була навчена на корпусі з 1 895 сторінок аналітичних записок уряду Британської Колумбії (Канада) та 64 звітів ВООЗ.Розробка PA та IAPA: Студент магістратури з публічної політики створив записки з нуля (PA), а пізніше відредагував матеріали, згенеровані ШІ (IAPA).Експертна оцінка: Оцінку проведено двома незалежними панелями з 8 колишніх заступників міністрів уряду Саскачевану (Канада).Панель 1 («Поінформована»): Знала про використання ШІ та мала вгадати, які саме документи створені машиною.Панель 2 («Введена в оману»): Не знала про участь ШІ до завершення оцінювання.4. РезультатиЧасові витрати: Навчання ШІ вимагало близько 30 людино-днів для підготовки даних, проте сама генерація записки займала всього 8 секунд. Натомість людина витрачала на написання записки з нуля понад 1,5 години, а на редагування тексту ШІ — близько 40 хвилин.Текстова подібність: Записки IAPA зберегли 50–66% початкового тексту ШІ.Оцінки експертів (у % від максимально можливого балу):Модель аналізуВуглецевий податокCOVID-19AIPA (тільки ШІ)39% – 41%30% – 38%PA (тільки людина)57% – 67%46% – 62%IAPA (ШІ + людина)56% – 61%39% – 41%Здатності оцінювачів розпізнавати ШІ: Усі учасники поінформованої групи безпомилково ідентифікували ШІ-тексти. У групі, яку ввели в оману, лише 1 із 4 експертів здогадався про штучне походження документів.Зауваження експертів: Тексти чистом'якого ШІ (AIPA) містили безглузді речення, нерозшифровані абревіатури, помилки у фактах і недоречні посилання (URL). Редагування людиною (IAPA) покращило якість, але не перевищило якість аналітики, написаної людиною з нуля (PA).5. Обговорення, висновки та обмеженняЧи настав «кінець аналітика політики»?Ні. Чистий ШІ (станом на момент експерименту) не здатен самостійно проводити якісний аналіз. Він не розуміє політичного контексту, цілей міністра, законності рішень та людських нюансів.Майбутнє за гібридною моделлю (IAPA):ШІ є чудовим інструментом для миттєвого створення першого чернетки («Background» та фактчекінг). Проте остаточна оцінка та стратегічні рекомендації залишаються за людиною.Ключовий висновок: «Штучний інтелект не замінить аналітиків; але аналітики, які використовують ШІ, замінять тих, хто його не використовує».Рекомендації для освіти та уряду:Забороняти ШІ у закладах вищої освіти марно. Слід навчати майбутніх державних службовців критично працювати з ШІ-чернетками, виявляти упередженість даних та зосереджуватися на вищих комунікативних і стратегічних навичках.Обмеження дослідження:Складність досту
Created using ChatSlide
У цьому документі розглядаються три моделі політичного аналізу: AIPA, PA та IAPA, які відрізняються за підходами до генерації записів та редагування. Досліджуються експериментальні результати, зокрема вплив COVID-19 на підготовку даних. Висновки підкреслюють важливість контекстуального судження та критичного аналізу інформації для урядових структур та освітніх установ.