Hodnotiaca rubrika založená na podkladoch
Porovnanie pracovných výstupov s výslovnými kritériami a úrovňami výkonu, kontrola presných citácií podkladov a výpočet skóre z ľudských hodnotení.
CSV kritérií hodnotiacej rubriky: id,name,weight,definition C1,Dohľadateľnosť,2,Tvrdenia sú prepojené s identifikovateľnými zdrojovými záznamami. C2,Zrozumiteľnosť,1,Metóda a jej obmedzenia sú výslovne uvedené. CSV úrovní výkonu: id,crit…
Správa z workshopu sa posudzuje podľa dohľadateľnosti a zrozumiteľnosti. Dodané hodnotenie dohľadateľnosti prispieva k ľudskému skóre; chýbajúce hodnotenie zrozumiteľnosti ponecháva súhrn podľa predvoleného postupu neúplný. Vierohodný ná…
Užitočná rubrika oddeľuje kritérium, jeho opisy výkonu, predložené podklady a skutočné hodnotenie. Nástroj ponecháva tieto vrstvy viditeľné. AI pre každý pracovný výstup a kritérium navrhuje existujúcu úroveň výkonu podloženú nezmenenou citáciou zdroja alebo návrh ponechá nevyriešený. Deterministický kód počíta vážené súhrnné skóre iba z výslovne dodaných ľudských hodnotení. Výstup je návrh posúdenia s medzerami v podkladoch a nezhodami, nie automatické rozhodnutie o známke.
Tvoje texty, stránky a obrázky sa spracúvajú na našich vlastných serveroch v EÚ. Centrum dôvery
Pre koho je
Tvorcovia vzdelávania, facilitátori workshopov a tímy kvality posudzujúce pracovné výstupy podľa spravovanej rubriky. Vhodné na prípravu štruktúrovanej diskusie alebo kontrolu konzistentnosti dodaných hodnotení. Nenahrádza kvalifikovaných posudzovateľov ani neoprávňuje na rozhodnutia vo vzdelávaní, zamestnávaní, úverovaní alebo iné rozhodnutia so závažnými dôsledkami pre ľudí.
Typické použitie
- Posúdenie každého pracovného výstupu podľa všetkých dodaných kritérií a ich existujúcich úrovní výkonu.
- Porovnanie návrhov AI s nezávisle dodanými ľudskými hodnoteniami bez skrytého nahrádzania jedných druhými.
- Výpočet váženého normalizovaného ľudského skóre s výslovnou stupnicou a postupom pri chýbajúcom hodnotení.
- Spoločné zachovanie pôvodných citácií, verzie rubriky, opisov úrovní a nevyriešených medzier v podkladoch.
Príklad
Vstup
CSV kritérií hodnotiacej rubriky: id,name,weight,definition C1,Dohľadateľnosť,2,Tvrdenia sú prepojené s identifikovateľnými zdrojovými záznamami. C2,Zrozumiteľnosť,1,Metóda a jej obmedzenia sú výslovne uvedené. CSV úrovní výkonu: id,criterion,points,descriptor L1,C1,0,Nie je uvedený identifikovateľný podporný zdroj. L2,C1,2,Hlavné tvrdenie cituje identifikovateľný zdrojový záznam. L3,C2,0,Metóda alebo jej obmedzenia chýbajú. L4,C2,2,Metóda a aspoň jedno obmedzenie sú výslovné. CSV podkladov pracovných výstupov: id,name,text E1,Správa z workshopu,Záver používa záznam DATA-7. Metóda porovnáva dve vzorky a nemôže preukázať príčinnú súvislosť. CSV dodaných ľudských hodnotení: id,evidence,criterion,level H1,E1,C1,L2 Potvrdiť dodané definície: Potvrdené pre toto posúdenie Potvrdená verzia definícií: RUBRIC-1 Podrobnosť citácií: Podrobné Poradie výsledkov: Poradie zdrojov Váženie kritérií: Dodané váhy kritérií Postup pri chýbajúcom ľudskom hodnotení: Zobraziť neúplné skóre Stupnica súhrnného skóre: 100 Desatinné miesta skóre: 2 Poradie zobrazených úrovní výkonu: Body vzostupne
Výsledok
Správa z workshopu sa posudzuje podľa dohľadateľnosti a zrozumiteľnosti. Dodané hodnotenie dohľadateľnosti prispieva k ľudskému skóre; chýbajúce hodnotenie zrozumiteľnosti ponecháva súhrn podľa predvoleného postupu neúplný. Vierohodný návrh zrozumiteľnosti od AI zostáva oddelený a nemôže doplniť chýbajúce ľudské hodnotenie.
Pevný príklad, skrátený. Skutočné výsledky generuje AI: skontroluj ich.
Cena a limity
- Cena
- zvyčajne 1–3 kreditov
- Dostupné s
- Zadarmo, S balíkom
- Limit vstupu
- Jedna stránka s najviac 80 000 znakmi HTML
Ochrana súkromia
Spracované na našich vlastných serveroch v EÚ (Poľsko). Vstupy a výsledky sa odstránia po 7 dňoch (Zadarmo) alebo 30 dňoch (balíky), alebo hneď po zobrazení výsledku, ak zvolíš, že sa nemajú ukladať. Obrázky sa odstránia hneď po spracovaní.
V API
Názov nástroja: assessment_rubrics. Úlohu vytvoríš cez POST /api/v1/jobs a výsledok načítaš cez GET /api/v1/jobs/{id}. Svoj kľúč API nájdeš vo svojom účte.
curl -X POST https://do4u.eu/api/v1/jobs \
-H "Authorization: Bearer d4u_…" -H "Content-Type: application/json" \
-d '{"tool": "assessment_rubrics", "url": "https://example.com/"}'
Otázky a odpovede
Môže model vymyslieť úroveň výkonu alebo udeliť konečnú známku?
Nie. Navrhnutá úroveň musí byť existujúce ID patriace presne danému kritériu. Jej citácia sa musí bez zmeny vyskytovať v texte pracovného výstupu. Model môže úroveň ponechať nevyriešenú. Štrukturálne platná citácia stále vyžaduje významové posúdenie; nedokazuje správnosť navrhnutej úrovne.
Ako sa kombinujú váhy a rôzne bodové stupnice?
Každé dodané ľudské hodnotenie sa delí najvyšším dodaným počtom bodov príslušného kritéria. Normalizované hodnoty sa kombinujú pomocou vybraných dodaných alebo rovnakých váh a násobia nastavenou súhrnnou stupnicou. Výpočet používa presnú racionálnu aritmetiku a zaokrúhľuje polovice nahor iba na zobrazenie. Táto aritmetika nepreukazuje platnosť metódy hodnotenia.
Čo sa deje s chýbajúcimi ľudskými hodnoteniami?
Voľba incomplete nezobrazí súhrn, ak niektorému kritériu chýba ľudské hodnotenie. Voľba zero výslovne započítava chýbajúce hodnotenia ako nulu pri zachovaní upozornení. Návrhy AI nevstupujú ani do jedného výpočtu. Dodané hodnotenia nie sú schváleniami s overenou totožnosťou.
Ukladá sa môj text?
Iba tak dlho, ako je potrebné: 7 dní vo verzii Free, 30 dní s balíkom – alebo vôbec, ak sa rozhodneš text neukladať. Spracovanie prebieha na našich vlastných serveroch v EÚ (Poľsko).
Môžem výsledok použiť hneď?
Výsledky generuje AI. Pred zverejnením alebo odoslaním si ich, prosím, prečítaj.