• Технології

Інструменти для оцінювання на основі штучного інтелекту: як штучний інтелект змінює процес оцінювання та робочі процеси вчителів

  • Felix Rose-Collins
  • ••
  • 5 min read

Вступ

AI grader for teachers showing a grading queue with essays reviewed and ready for teacher approval

Коли вчитель задає есе, справжня робота починається після того, як учні здають його. Клас із тридцяти учнів, кожен із яких пише по 800 слів, дає близько 24 000 слів для читання, а більшість вчителів ведуть кілька класів. Кожен твір потребує ретельного прочитання, оцінки за кожним пунктом критеріїв оцінювання та коментарів, які будуть зрозумілі саме тому учневі, який його написав. Цей процес часто розтягується на цілий тиждень вечірніх годин, і до того часу, як твори повертаються учням, вони вже перейшли до наступної теми. Ціна цього — не лише час вчителя. Це також втрачена можливість для учнів навчитися на основі зворотного зв’язку, поки завдання ще свіже в їхній пам’яті.

Чому обсяг роботи впливає на те, що задають

Вчителі — практичні люди, і велике навантаження на виставлення оцінок непомітно змінює те, як викладається письмо. Багато освітян зізнаються, що задають менше розгорнутих есе, ніж хотіли б, просто тому, що не можуть перевіряти більше, не втрачаючи вихідних. Чернетки пропускаються, тренувальні есе залишаються без оцінок, а відгуки стають коротшими, коли стос робіт зростає. Ніщо з цього не свідчить про відсутність турботи. Це свідчить про обмеженість часу однієї людини. Будь-який інструмент, що полегшує цей тиск, безпосередньо впливає на те, скільки текстів учні насправді пишуть, саме тому підтримка в оцінюванні стала такою поширеною темою в учительських.

Що штучний інтелект знімає з плечей вчителя

Штучний інтелект бере на себе найбільш трудомістку частину оцінювання: детальне перше читання. Він повністю читає кожну роботу, порівнює її з критеріями оцінювання вчителя та формує попередню оцінку й письмові коментарі за кожним критерієм. Потім вчитель переглядає цей попередній варіант, коригує все, що не відповідає його судженням, і надсилає остаточну версію учневі. Іншими словами, інструмент виконує читання та перший етап складання коментарів, тоді як вчитель залишається відповідальним за кожне рішення, яке доходить до учня. Різниця полягає в тому, що вчитель починає з упорядкованого зворотного зв’язку, а не з порожньої сторінки.

Тиждень оцінювання «до» і «після»

Найпростіший спосіб уявити цю зміну — порівняти дві версії одного й того самого тижня. Без підтримки вчитель може витратити понеділок і вівторок на читання, середу й четвер — на написання коментарів, а п’ятницю — на наздоганяння, через що роботи повертаються із запізненням. Оскільки перше читання відбувається автоматично, понеділок можна присвятити перегляду готових відгуків, вівторок — коригуванню оцінок, а середу — поверненню робіт. Решта тижня звільняється для консультацій щодо написання робіт та часу на доопрацювання. Конкретний графік буде відрізнятися для кожного вчителя, але саме завдяки переходу від читання до перегляду звільняється час.

comparison of a teacher's grading week with and without an AI grader, showing earlier feedback and time for writing conferences

Налаштування критеріїв оцінювання перед першою партією робіт

Інструмент може керуватися лише тими критеріями, які йому задано, тому перед першою партією есе варто приділити кілька хвилин увазі рубриці. Чіткі критерії, описані простою мовою для кожного рівня виконання, забезпечують чіткі відгуки. Нечіткі фрази, такі як «хороший аналіз», породжують настільки ж нечіткі коментарі. Вчителі, які вже мають критерії оцінювання для певного завдання, зазвичай можуть використовувати їх без змін, можливо, лише уточнивши один-два описи. Ті, хто починає з нуля, можуть адаптувати готові критерії до типу есе або створити їх на основі короткого опису завдання, а потім відредагувати відповідно до того, що викладалося на уроках.

Перегляд відгуків замість їх написання з нуля

Саме на етапі перегляду досвід вчителя має найбільше значення. Замість того, щоб читати кожен твір «наосліп», вчитель читає його разом із попередньо складеним відгуком, перевіряючи, чи виправдані кожна оцінка та коментар. Точні коментарі можна залишити без змін. Коментарі, що неправильно інтерпретують задум учня, можна відредагувати або видалити за лічені секунди. Вчителі часто вважають, що такий вид перегляду є менш виснажливим, ніж написання кожного коментаря з нуля, оскільки структура вже сформована, і увагу можна зосередити на тих моментах, які справді потребують професійної оцінки.

У яких випадках все ж таки потрібна оцінка вчителя

Є аспекти оцінювання, які жоден інструмент не повинен замінювати, і корисно чітко усвідомити їх з самого початку:

  • Визначення підсумкової оцінки за кожну роботу, особливо у сумнівних випадках
  • Визнання прогресу студента протягом семестру та винагородження реального покращення
  • Розуміння, коли незвичайний вибір є свідомим і ефективним, а не помилкою
  • Врахування індивідуальних навчальних потреб та обставин
  • Проведення подальшої бесіди зі студентом щодо його письмової роботи

Comparison of roles in AI-assisted grading, with the AI grader handling the first read and the teacher deciding final grades

Послідовність від першої роботи до останньої

Навіть досвідчені вчителі оцінюють тридцятий твір трохи інакше, ніж перший. Втома, порядок робіт та якість попереднього твору — все це може трохи підвищити або знизити оцінку. Застосування однієї й тієї ж шкали оцінювання до кожного твору зменшує ці відхилення. Тоді перевірка вчителя стає скоріше перевіркою справедливості, а не щоразу новим судженням, що полегшує виявлення справжніх відмінностей між учнями. Для кафедр, які використовують спільні критерії оцінювання, така послідовність також допомагає різним викладачам виставляти схожі оцінки за схожу роботу.

Повернення чернеток та тренувальних есе до навчального плану

Як тільки навантаження на оцінювання зменшиться, написання робіт, що не мають вирішального значення, знову стає реальним. Вчителі можуть збирати чернетки та надавати відгуки до остаточного терміну, щоб учні могли виправляти свої роботи, маючи чіткі вказівки, а не гадаючи. Тренувальні твори, написані на час, які часто залишаються без оцінки, можуть отримати коментарі на рівні критеріїв, що допоможуть учням побачити свій прогрес. Саме тут оцінювання за допомогою штучного інтелекту має один із найбільших впливів на навчання, адже навички письма вдосконалюються завдяки повторюваним циклам спроб, отримання відгуків та нових спроб, а ці цикли залежать від швидкого отримання відгуків.

Почніть з одного класу та одного завдання

Найпростіший спосіб запровадити оцінювання за допомогою штучного інтелекту — почати з малого. Простий експеримент зазвичай виглядає так:

  • Виберіть один курс та одне майбутнє завдання з написання есе
  • Завантажте критерії оцінювання, якими ви вже користуєтеся, уточнивши будь-які нечіткі описи рівнів
  • Спочатку самостійно оцініть кілька есе, а потім проаналізуйте ті самі роботи за допомогою інструменту
  • Порівняйте свої оцінки та коментарі з підготовленими зауваженнями
  • Зверніть увагу, у чому ви згодні, у чому розходитеся та скільки редагування було потрібно

Вчителі, які хочуть спробувати це, можуть почати з clasa.ai, який оцінює есе за обраною шкалою та надає редаговані коментарі щодо кожного критерію. Після одного-двох завдань більшість вчителів чітко розуміють, у чому цей інструмент економить час і скільки часу потрібно на перевірку робіт у їхніх класах.

Питання точності та справедливості

Вчителі справедливо запитують, чи можна довіряти автоматизованим відгукам. Чесна відповідь полягає в тому, що їх слід перевіряти, а не приймати на віру. Точність значною мірою залежить від якості критеріїв оцінювання та чіткості завдання, і результати покращуються, коли обидва ці аспекти чітко визначені. Перевірка кожного есе перед оприлюдненням захищає учнів від помилок, а ведення нотаток про те, у яких випадках інструмент, як правило, погоджується або не погоджується з вашою оцінкою, допомагає вирішити, наскільки ретельно слід перевіряти роботи в майбутньому. За такого використання оцінювання за допомогою ШІ сприяє справедливості, застосовуючи критерії рівномірно, тоді як вчитель захищає учнів від помилок.

Робота з роботами, написаними ШІ

Ті самі інструменти, що допомагають вчителям оцінювати роботи, часто викликають запитання щодо протилежної проблеми: використання учнями чат-ботів для написання своїх есе. Багато систем оцінювання містять функцію перевірки на використання ШІ, яка виділяє фрагменти, що виглядають як згенеровані машиною. Це може бути корисним сигналом, але не є доказом. Формальне або шаблонне письмо іноді може бути помилково позначене, тому виділений фрагмент краще розглядати як привід для розмови з учнем, запиту про попередні чернетки або порівняння роботи з тим, що було написано в класі, а не як підставу для автоматичного зниження оцінки.

Пояснення процесу учням та їхнім родинам

Прозорість допомагає всім прийняти новий підхід. Учні повинні знати, що інструмент формує першу версію відгуку, що їхній вчитель перевіряє кожен результат і що остаточна оцінка залишається на розсуд вчителя. Батьки, як правило, позитивно реагують, коли бачать, що ця зміна означає швидший і детальніший відгук, а не зменшення участі вчителя. Зразок звіту з відгуками, опублікований у інформаційному бюлетені або представлений на батьківських зборах, зазвичай відповідає на більшість запитань ще до того, як їх ставлять, і точно показує, що саме отримають учні.

Як вчителі використовують час, який вони заощаджують

Цінність системи оцінювання на основі штучного інтелекту проявляється в тому, що відбувається після завершення оцінювання. Деякі вчителі використовують звільнений час для індивідуальних консультацій з письма, де п’ятихвилинна розмова може дати більше, ніж сторінка коментарів. Інші додають додатковий етап написання чернетки до основних завдань або проводять сесії взаємного рецензування, використовуючи ту саму шкалу оцінювання. Дехто просто повертає собі вечори та вихідні, що має велике значення для того, щоб залишатися в професії протягом тривалого часу. У кожному випадку час перерозподіляється від повторюваного читання до тих аспектів викладання, які залежать від міжособистісних стосунків із учнями.

Felix Rose-Collins

Felix Rose-Collins

Ranktracker's CEO/CMO & Co-founder

Felix Rose-Collins is the Co-founder and CEO/CMO of Ranktracker. With over 15 years of SEO experience, he has single-handedly scaled the Ranktracker site to over 500,000 monthly visits, with 390,000 of these stemming from organic searches each month.

Почніть користуватися Ranktracker... Безкоштовно!

Дізнайтеся, що стримує ваш сайт від ранжування.

Створіть безкоштовний обліковий запис

Або Увійдіть, використовуючи свої облікові дані

Different views of Ranktracker app