დავალების შემოწმება AI-ით: შეფასების რუბრიკა, უკუკავშირი და რისკები

AI-ით დავალების შემოწმება შესაძლებელია, მაგრამ მხოლოდ ნაწილობრივ. ხელოვნური ინტელექტი კარგად ადგენს შეფასების რუბრიკის მონახაზს, წერს უკუკავშირის პირველ ვერსიას და პოულობს კლასის ტიპურ შეცდომებს. საბოლოო ქულა, მოსწავლის კონტექსტის გათვალისწინება და აკადემიური კეთილსინდისიერების საკითხები კი მასწავლებლის საქმეა. AI დეტექტორებს ბრალდების საფუძვლად ნუ გამოიყენებთ: კვლევები აჩვენებს, რომ ისინი არასანდოა.

მასწავლებლის დროის დიდი ნაწილი საშინაო დავალების შემოწმებას და კომენტარების წერას ეთმობა. ოცდაათი ესე, თითოეულზე ხუთი წუთი, უკვე ორნახევარი საათია. AI ამ დროს ამოკლებს, თუ სწორად გამოიყენებთ: ის თქვენი ასისტენტია და არა შემფასებელი.

ქვემოთ ნახავთ რუბრიკის მზა მაგალითს ქართულად, უკუკავშირის პრომპტებს, სიას იმისა, რაც AI-ს არ უნდა მიანდოთ, და იდეებს, როგორ შევცვალოთ თავად დავალება, რომ AI-ის ეპოქაშიც აზრი ჰქონდეს.

რისთვის გამოდგება AI დავალების შემოწმებისას და რისთვის არა?

ჩატბოტები (ChatGPT, Claude, Gemini) და მასწავლებლისთვის შექმნილი ინსტრუმენტები, მაგალითად Brisk Teaching (Chrome-ის გაფართოება Google Docs-ისთვის), ტექსტთან მუშაობაში ძლიერია. ისინი სწრაფად კითხულობენ, აჯამებენ და წერენ. სუსტია იქ, სადაც უნდა იცნობდეთ მოსწავლეს, ხედავდეთ მის პროგრესს და იცოდეთ კლასის კონტექსტი.

კალიფორნიის უნივერსიტეტის (ირვაინი) მკვლევრებმა ChatGPT-ს საშუალო და უფროსი კლასების დაახლოებით 1 800 ესე შეაფასებინეს ექვსქულიან სკალაზე და შედეგი გამოცდილი შემფასებლების ქულებს შეადარეს. ესეების სხვადასხვა ჯგუფში ChatGPT-ის ქულა ადამიანის ქულას ერთი ქულის სიზუსტით ემთხვეოდა შემთხვევების 76–89%-ში, ზუსტად კი დაახლოებით 40%-ში (ორი შემფასებლის ქულები ერთმანეთს ზუსტად დაახლოებით 50%-ში ემთხვეოდა). კვლევის ხელმძღვანელის დასკვნა მარტივია: ასეთი სიზუსტე საკმარისია დაბალი წონის, განმავითარებელი შეფასებისთვის, მაგალითად ნაშრომის პირველი ვერსიის წინასწარი შეფასებისთვის, მაგრამ არა ნიშნისთვის, რომელიც საბოლოო შეფასებაზე მოქმედებს.

როგორ შევქმნათ შეფასების რუბრიკა AI-ით: მაგალითი ქართულად

შეფასების რუბრიკა (rubric) არის ცხრილი, სადაც დავალება კრიტერიუმებად არის დაყოფილი და თითოეულ კრიტერიუმს რამდენიმე დონის აღწერა აქვს. კარგი რუბრიკა მოსწავლეს წინასწარ აჩვენებს, რას ელით, თქვენ კი შეფასებას უფრო თანმიმდევრულს და სწრაფს ხდის. ეროვნული სასწავლო გეგმით გათვალისწინებული კომპლექსური დავალების შესაფასებლად რუბრიკა თითქმის აუცილებელია.

AI-ს რუბრიკა კარგად გამოსდის, თუ ზუსტ კონტექსტს მისცემთ: კლასი, საგანი, დავალების ტექსტი, მიზნობრივი ცნებები და დონეების რაოდენობა. მაგალითად:

შენ ხარ ისტორიის მასწავლებლის ასისტენტი. VIII კლასის მოსწავლეებმა დაწერეს
არგუმენტირებული ესე (300–400 სიტყვა) თემაზე: „რატომ გახდა დავით აღმაშენებლის
რეფორმები საქართველოს გაძლიერების საფუძველი?“
შეადგინე ანალიტიკური რუბრიკა 4 კრიტერიუმით და 4 დონით (4, 3, 2, 1 ქულა).
კრიტერიუმები: თეზისი, არგუმენტები და მტკიცებულებები, ისტორიული წყაროების
გამოყენება, სტრუქტურა და ენა. თითოეული დონის აღწერა იყოს ერთი წინადადება,
VIII კლასელისთვის გასაგები ენით. შედეგი მომეცი ცხრილის სახით.

შედეგი დაახლოებით ასეთი იქნება (შემოკლებული ვერსია, მასწავლებლის შესწორებების შემდეგ):

AI-ის პასუხი არასოდეს გამოიყენოთ შეუმოწმებლად. ყურადღება მიაქციეთ სამ რამეს: ემთხვევა თუ არა დონეები თქვენს საგნობრივ სტანდარტს, ხომ არ ფასდება ერთი და იგივე ორ სხვადასხვა კრიტერიუმში და გასაგებია თუ არა ტექსტი მოსწავლისთვის. ქვიზებისა და დიფერენცირებული დავალებების მზა პრომპტებს ნახავთ სტატიაში ChatGPT მასწავლებლებისთვის: 10 მზა პრომპტი. გაკვეთილის გეგმის, ქვიზის და რუბრიკის შექმნაში ChatGPT-თი და Claude-ით კი ორსაათიან ონლაინ მასტერკლასზე „პრაქტიკული AI ინსტრუმენტები მასწავლებლებისთვის“ ივარჯიშებთ.

კურსი TDS-შიხელოვნური ინტელექტი მასწავლებლებისთვის4 კვირა · 16 სთ · დაწყება 16 ნოედეტალურად

როგორ დავწეროთ უკუკავშირი მოსწავლეს AI-ის დახმარებით?

კარგი უკუკავშირი სამ კითხვას პასუხობს: სად ვარ ახლა, სად უნდა მივიდე და რა არის შემდეგი ნაბიჯი. ზოგადი შენიშვნა („კარგია, მაგრამ გააუმჯობესე“) მოსწავლეს არაფერს ასწავლის. AI აქ სასარგებლოა, რადგან სწრაფად წერს კონკრეტულ, რუბრიკაზე დაფუძნებულ კომენტარს, თქვენ კი მხოლოდ ასწორებთ და ამატებთ პირად შენიშვნას.

ასე მუშაობს პრაქტიკაში:

1. მოსწავლის ნაშრომიდან წაშალეთ სახელი და ყველა პირადი დეტალი, ჩაანაცვლეთ კოდით (მაგალითად „მოსწავლე 07“).
2. ჩასვით რუბრიკა და ნაშრომი ერთ მოთხოვნაში.
3. მოითხოვეთ ფორმატი „ორი ძლიერი მხარე და ერთი შემდეგი ნაბიჯი“, მოსწავლის ასაკისთვის გასაგები ენით, მაქსიმუმ 80 სიტყვა.
4. მოსთხოვეთ, რომ თითოეული შენიშვნა ნაშრომიდან ციტატით დაასაბუთოს.
5. წაიკითხეთ, შეასწორეთ და დაამატეთ ერთი წინადადება საკუთარი თავისგან. მოსწავლემ უნდა იგრძნოს, რომ მისი ნაშრომი ადამიანმა წაიკითხა.

კიდევ ერთი სასარგებლო ხერხი კლასის დონის ანალიზია. როცა ყველა ნაშრომს შეამოწმებთ, AI-ს მიეცით თქვენი მოკლე ჩანაწერები (ანონიმურად) და სთხოვეთ, დააჯგუფოს ხშირი შეცდომები. ასე შემდეგი გაკვეთილის თემა თავად გამოიკვეთება: თუ კლასის ნახევარს თეზისის ჩამოყალიბება უჭირს, ღირს ამაზე 15-წუთიანი სავარჯიშოს ჩატარება. ამ გაკვეთილის გეგმას, ტესტს და სამუშაო ფურცელს AI-ით როგორ მოამზადებთ, ნაბიჯ-ნაბიჯ აღწერილია სტატიაში გაკვეთილის გეგმა ხელოვნური ინტელექტით.

რა არ უნდა მივანდოთ AI-ს შეფასებისას?

AI ცდება, ზოგჯერ სრულიად თავდაჯერებულადაც. გარდა ამისა, ის არ იცნობს თქვენს მოსწავლეს. ამიტომ ზოგი გადაწყვეტილება მხოლოდ მასწავლებლის საქმეა:

• საბოლოო ქულა და ნიშანი. AI-ის ქულა შეიძლება იყოს ორიენტირი, მაგრამ არა გადაწყვეტილება.
• ბრალდება გადაწერაში ან AI-ის გამოყენებაში. ამაზე ქვემოთ დაწვრილებით.
• სპეციალური საგანმანათლებლო საჭიროების მქონე მოსწავლის შეფასება. აქ ინდივიდუალური სასწავლო გეგმა და კონტექსტი გადამწყვეტია.
• პირადი ან ემოციური თემები. თუ ნაშრომში ოჯახზე, ჯანმრთელობაზე ან პრობლემაზე წერია, ეს AI-ში არ უნდა მოხვდეს.
• მგრძნობიარე წერილი მშობელს. მონახაზი შეიძლება, მაგრამ ტონი და შინაარსი თქვენი უნდა იყოს.

მოსწავლის ნაშრომი და პერსონალური მონაცემები: რას არ ვტვირთავთ AI-ში?

მოსწავლის ნაშრომი პერსონალური ინფორმაციაა, განსაკუთრებით თუ მასში სახელი, სკოლა, ფოტო ან ოჯახის დეტალებია. იუნესკოს 2023 წლის სახელმძღვანელო რეკომენდაციები განათლებაში გენერაციული AI-ის გამოყენების შესახებ პირდაპირ ითხოვს მომხმარებლის მონაცემების დაცვას და ასაკობრივი ზღვრის დაწესებას დამოუკიდებელი გამოყენებისთვის. კლასში გამოყენებისთვის იუნესკო 13 წლის ასაკობრივი ზღვრის განხილვას გვთავაზობს.

პრაქტიკული წესები:

• სახელი, გვარი, პირადი ნომერი, ფოტო და ხელმოწერა არასოდეს ატვირთოთ.
• ხელნაწერი ნაშრომის ფოტოს გადაღებამდე სახელი დაფარეთ.
• შეამოწმეთ სერვისის პარამეტრები: ბევრ ჩატბოტში შეგიძლიათ გამორთოთ საუბრების გამოყენება მოდელის გასაუმჯობესებლად.
• სკოლის დონეზე შეთანხმდით, რომელი ინსტრუმენტებია დაშვებული და გააცანით ეს წესები მშობლებსაც.

მუშაობს თუ არა ხელოვნური ინტელექტის დეტექტორი?

მოკლე პასუხი: საიმედოდ არა. ეს მხოლოდ მოსაზრება არ არის, ამას კვლევები ადასტურებს:

• 2023 წელს აკადემიური კეთილსინდისიერების მკვლევართა საერთაშორისო ჯგუფმა 14 დეტექტორი გამოსცადა, მათ შორის Turnitin. დასკვნა: ეს ინსტრუმენტები „არც ზუსტია და არც საიმედო“. როცა AI-ის ტექსტს ხელით ან პროგრამით გადააკეთებენ, დეტექტორების შედეგი კიდევ უფრო უარესდება.
• სტენფორდის მკვლევრებმა შვიდი დეტექტორი გამოსცადეს TOEFL-ის ესეებზე, რომლებიც იმ მოსწავლეებმა დაწერეს, ვისთვისაც ინგლისური მშობლიური ენა არ არის. დეტექტორებმა ამ ესეების საშუალოდ 61% შეცდომით AI-ის ნაწერად მიიჩნიეს, თითქმის 20% კი შვიდივე დეტექტორმა ერთხმად „დაადანაშაულა“.
• ვანდერბილტის უნივერსიტეტმა 2023 წელს Turnitin-ის AI დეტექტორი გამორთო. უნივერსიტეტის გამოთვლით, თუნდაც 1%-იანი ცრუ დადებითი მაჩვენებლის (false positive) პირობებში, 2022 წელს Turnitin-ში ატვირთული 75 000 ნაშრომიდან დაახლოებით 750 შეცდომით მოინიშნებოდა, როგორც ნაწილობრივ AI-ის დაწერილი.

ეს კვლევები ძირითადად ინგლისურ ტექსტებზე ჩატარდა. ქართულ ტექსტზე დეტექტორების სიზუსტე პრაქტიკულად შემოწმებული არ არის, ამიტომ მათ შედეგს ქართულ ესეზე კიდევ უფრო ნაკლებად უნდა ენდოთ.

რა გავაკეთოთ ამის ნაცვლად? თუ ეჭვი გაქვთ, ესაუბრეთ მოსწავლეს: სთხოვეთ, ახსნას თავისი არგუმენტი, ან რამდენიმე წინადადება კლასში დაწეროს იმავე თემაზე. Google Docs-ის ვერსიების ისტორია (Version history) აჩვენებს, როგორ შეიქმნა ტექსტი. ეს ბევრად უფრო სამართლიანი მტკიცებულებაა, ვიდრე დეტექტორის პროცენტი.

როგორ შევცვალოთ საშინაო დავალება AI-ის ეპოქაში?

თუ დავალების შესრულება ერთი პრომპტით შეიძლება, პრობლემა დავალებაშია. საუკეთესო დაცვა არის დავალება, რომელიც მოსწავლის აზროვნებას, პროცესს და პირად გამოცდილებას ითხოვს.

ზოგ დავალებაში AI-ის გამოყენება ღიად შეგიძლიათ დაუშვათ, იმ პირობით, რომ მოსწავლე აღწერს, რა გააკეთა AI-მ და რა თავად. ასე ის AI-თან პასუხისმგებლიანად მუშაობას სწავლობს. როგორ გავაცოცხლოთ გაკვეთილი AI-ით, წაიკითხეთ სტატიაში სახალისო გაკვეთილები AI-ით: 20 იდეა. უმაღლესი სასწავლებლის კონტექსტი და სილაბუსის AI პოლიტიკის ნიმუშები განხილულია სტატიაში AI უნივერსიტეტის ლექტორებისთვის.

ხშირად დასმული კითხვები

შეუძლია თუ არა ChatGPT-ს დავალების შემოწმება?

შეუძლია ნაწილობრივ: რუბრიკით ქულის შეთავაზება, შეცდომების პოვნა და კომენტარის მონახაზი. კვლევაში ChatGPT-ის ქულა ადამიანის ქულას ერთი ქულის სიზუსტით ემთხვეოდა შემთხვევების 76–89%-ში, ზუსტად კი მხოლოდ დაახლოებით 40%-ში. ამიტომ საბოლოო ნიშანი მასწავლებელმა უნდა დაწეროს.

როგორ შევადგინო შეფასების რუბრიკა სწრაფად?

მიეცით AI-ს დავალების ტექსტი, კლასი, 3–5 კრიტერიუმი და დონეების რაოდენობა, სთხოვეთ ცხრილი. შემდეგ შეადარეთ საგნობრივ სტანდარტს და გამოსცადეთ სამ უკვე შეფასებულ ნაშრომზე. პირველი რუბრიკის მოსამზადებლად, როგორც წესი, 20–30 წუთი საკმარისია.

შეიძლება თუ არა AI დეტექტორის შედეგით მოსწავლის დადანაშაულება?

არა. დამოუკიდებელი კვლევები აჩვენებს, რომ დეტექტორები არც ზუსტია და არც საიმედო, განსაკუთრებით არამშობლიურ ენაზე დაწერილ ტექსტზე. ეჭვის შემთხვევაში ესაუბრეთ მოსწავლეს და გადახედეთ დოკუმენტის ვერსიების ისტორიას.

უსაფრთხოა თუ არა მოსწავლის ნაშრომის ატვირთვა AI-ში?

მხოლოდ ანონიმურად: სახელის, ფოტოს და პირადი დეტალების გარეშე. შეამოწმეთ სერვისის კონფიდენციალურობის პარამეტრები და სკოლაში შეთანხმდით დაშვებულ ინსტრუმენტებზე. პირადი ან ემოციური შინაარსის ნაშრომები AI-ში საერთოდ არ ატვირთოთ.

რომელი AI ინსტრუმენტი ჯობია უკუკავშირისთვის?

ChatGPT-იც, Claude-იც და Gemini-ც კარგად წერს უკუკავშირს, მათ შორის ქართულად. Brisk Teaching მოსახერხებელია, თუ Google Docs-ში მუშაობთ. მთავარია არა ინსტრუმენტი, არამედ კარგი რუბრიკა და თქვენი საბოლოო რედაქტირება.

შემდეგი ნაბიჯი

თუ გსურთ, რუბრიკა, უკუკავშირის ბანკი და საკლასო AI წესები ერთ სისტემად აქციოთ, კურსის „ხელოვნური ინტელექტი მასწავლებლებისთვის“ ბოლო, მერვე შეხვედრა სწორედ ამას ეთმობა: თქვენი საგნისთვის ამზადებთ ინტერაქციულ ქვიზს, რუბრიკას და უკუკავშირის ბანკს. მანამდე, შვიდ შეხვედრაზე, AI-ით მთელი თემის სასწავლო მასალებს ქმნით. მასწავლებლების კურსი სხვა AI კურსებთან ერთად ნახეთ გვერდზე ხელოვნური ინტელექტის (AI) კურსები.

წყაროები

• AI essay grading is already as ‘good as an overburdened’ teacher (Tate et al.), The Hechinger Report
• Testing of Detection Tools for AI-Generated Text (Weber-Wulff et al., 2023), arXiv
• GPT detectors are biased against non-native English writers (Liang et al., 2023), Patterns / PMC
• Guidance on AI Detection and Why We’re Disabling Turnitin’s AI Detector, Vanderbilt University
• Guidance for generative AI in education and research, UNESCO
• UNESCO calls for regulations on AI use in schools, UN News
• Grading and Performance Rubrics, Carnegie Mellon University