Přeskočit na obsah

Hodnoticí rubrika založená na podkladech

Porovnání pracovních výstupů s výslovnými kritérii a úrovněmi výkonu, kontrola přesných citací podkladů a výpočet skóre z dodaných lidských hodnocení.

Vstup

CSV kritérií hodnoticí rubriky: id,name,weight,definition C1,Dohledatelnost,2,Tvrzení jsou propojena s identifikovatelnými zdrojovými záznamy. C2,Srozumitelnost,1,Metoda a její omezení jsou výslovně uvedeny. CSV úrovní výkonu: id,criteri…

Výsledek

Zpráva z workshopu se posuzuje podle dohledatelnosti a srozumitelnosti. Dodané hodnocení dohledatelnosti přispívá k lidskému skóre; chybějící hodnocení srozumitelnosti ponechává souhrn podle výchozího postupu neúplný. Věrohodný návrh sro…

Užitečná rubrika odděluje kritérium, jeho popisy výkonu, předložené podklady a skutečné hodnocení. Nástroj ponechává tyto vrstvy viditelné. AI pro každý pracovní výstup a kritérium navrhuje existující úroveň výkonu podloženou nezměněnou citací zdroje, nebo návrh ponechá nevyřešený. Deterministický kód počítá vážená souhrnná skóre pouze z výslovně dodaných lidských hodnocení. Výstup je návrh posouzení s mezerami v podkladech a neshodami, nikoli automatické rozhodnutí o známce.

Tvoje texty, stránky a obrázky se zpracovávají na našich vlastních serverech v EU. Centrum důvěry

Vyzkoušet hned Ceník

Pro koho je

Tvůrci vzdělávání, facilitátoři workshopů a týmy kvality posuzující pracovní výstupy podle spravované rubriky. Vhodné pro přípravu strukturované diskuse nebo kontrolu konzistence dodaných hodnocení. Nenahrazuje kvalifikované posuzovatele ani neopravňuje k rozhodnutím ve vzdělávání, zaměstnávání, úvěrování nebo jiným rozhodnutím se závažnými důsledky pro lidi.

Typické použití

  • Posouzení každého pracovního výstupu podle všech dodaných kritérií a jejich existujících úrovní výkonu.
  • Porovnání návrhů AI s nezávisle dodanými lidskými hodnoceními bez skrytého nahrazování jedněch druhými.
  • Výpočet váženého normalizovaného lidského skóre s výslovnou stupnicí a postupem při chybějícím hodnocení.
  • Společné zachování původních citací, verze rubriky, popisů úrovní a nevyřešených mezer v podkladech.

Příklad

Vstup

CSV kritérií hodnoticí rubriky: id,name,weight,definition C1,Dohledatelnost,2,Tvrzení jsou propojena s identifikovatelnými zdrojovými záznamy. C2,Srozumitelnost,1,Metoda a její omezení jsou výslovně uvedeny. CSV úrovní výkonu: id,criterion,points,descriptor L1,C1,0,Není uveden identifikovatelný podpůrný zdroj. L2,C1,2,Hlavní tvrzení cituje identifikovatelný zdrojový záznam. L3,C2,0,Metoda nebo její omezení chybí. L4,C2,2,Metoda a alespoň jedno omezení jsou výslovné. CSV podkladů pracovních výstupů: id,name,text E1,Zpráva z workshopu,Závěr používá záznam DATA-7. Metoda porovnává dva vzorky a nemůže prokázat příčinnou souvislost. CSV dodaných lidských hodnocení: id,evidence,criterion,level H1,E1,C1,L2 Potvrdit dodané definice: Potvrzeno pro toto posouzení Potvrzená verze definic: RUBRIC-1 Podrobnost citací: Podrobné Pořadí výsledků: Pořadí zdrojů Vážení kritérií: Dodané váhy kritérií Postup při chybějícím lidském hodnocení: Zobrazit neúplné skóre Stupnice souhrnného skóre: 100 Desetinná místa skóre: 2 Pořadí zobrazených úrovní výkonu: Body vzestupně

Výsledek

Zpráva z workshopu se posuzuje podle dohledatelnosti a srozumitelnosti. Dodané hodnocení dohledatelnosti přispívá k lidskému skóre; chybějící hodnocení srozumitelnosti ponechává souhrn podle výchozího postupu neúplný. Věrohodný návrh srozumitelnosti od AI zůstává oddělený a nemůže chybějící lidské hodnocení doplnit.

Pevný příklad, zkrácený. Skutečné výsledky vytváří AI: zkontroluj je prosím.

Cena a limity

Cena
obvykle 1–3 kreditů
K dispozici s
Zdarma, S balíčkem
Limit vstupu
Jedna stránka s nejvýše 80 000 znaky HTML

Soukromí

Zpracováváme na vlastních serverech v EU (Polsko). Vstupy a výsledky se mažou po 7 dnech (Zdarma) nebo po 30 dnech (balíčky), případně hned po zobrazení výsledku, pokud zvolíš, že se neukládají. Obrázky se mažou hned po zpracování.

V API

Název nástroje: assessment_rubrics. Úlohu vytvoříš pomocí POST /api/v1/jobs a výsledek získáš pomocí GET /api/v1/jobs/{id}. Svůj klíč API najdeš ve svém účtu.

curl -X POST https://do4u.eu/api/v1/jobs \
  -H "Authorization: Bearer d4u_…" -H "Content-Type: application/json" \
  -d '{"tool": "assessment_rubrics", "url": "https://example.com/"}'

Úplná dokumentace API →

Otázky a odpovědi

Může model vymyslet úroveň výkonu nebo udělit konečnou známku?

Ne. Navržená úroveň musí být existující ID patřící přesně k danému kritériu. Její citace se musí beze změny vyskytovat v textu pracovního výstupu. Model může úroveň ponechat nevyřešenou. Strukturálně platná citace stále vyžaduje významové posouzení; nedokazuje správnost navržené úrovně.

Jak se kombinují váhy a různé bodové stupnice?

Každé dodané lidské hodnocení se dělí nejvyšším dodaným počtem bodů příslušného kritéria. Normalizované hodnoty se kombinují pomocí vybraných dodaných nebo stejných vah a násobí nastavenou souhrnnou stupnicí. Výpočet používá přesnou racionální aritmetiku a zaokrouhluje poloviny nahoru pouze pro zobrazení. Tato aritmetika neprokazuje platnost metody hodnocení.

Co se děje s chybějícími lidskými hodnoceními?

Volba incomplete nezobrazí souhrn, pokud některému kritériu chybí lidské hodnocení. Volba zero výslovně započítává chybějící hodnocení jako nulu při zachování upozornění. Návrhy AI nevstupují ani do jednoho výpočtu. Dodaná hodnocení nejsou schválení s ověřenou totožností.

Ukládá se můj text?

Pouze tak dlouho, jak je potřeba: 7 dní v tarifu Free, 30 dní s balíčkem – nebo vůbec, pokud se rozhodneš text neukládat. Zpracování probíhá na našich vlastních serverech v EU (v Polsku).

Můžu výsledek hned použít?

Výsledky vytváří AI. Než je zveřejníš nebo odešleš, prosím si je přečti.