Įrodymais pagrįsta vertinimo matrica

Palygink darbo artefaktus su aiškiais kriterijais ir pasiekimų lygiais, patikrink tikslias citatas ir apskaičiuok balus iš pateiktų žmogaus įvertinimų.

Įvestis

Rezultatas

Dirbtuvių ataskaita peržiūrima pagal atsekamumą ir aiškumą. Pateiktas atsekamumo įvertinimas prisideda prie žmogaus balo; trūkstamas aiškumo įvertinimas pagal numatytąją taisyklę palieka suvestinį balą neišsamų. Įtikinamas DI aiškumo pas…

Naudinga vertinimo matrica atskiria kriterijų, jo pasiekimų aprašus, pateiktus įrodymus ir faktinį įvertinimą. Šis įrankis šiuos sluoksnius palieka matomus. DI kiekvienam artefaktui ir kriterijui pasiūlo esamą pasiekimų lygį, pagrįstą nepakeista šaltinio citata, arba palieka pasiūlymą neišspręstą. Deterministinis kodas svertinius suvestinius balus apskaičiuoja tik iš aiškiai pateiktų žmogaus įvertinimų. Rezultatas yra peržiūros juodraštis su įrodymų spragomis ir nesutarimais, o ne automatinis vertinimo sprendimas.

Tavo tekstai, puslapiai ir vaizdai apdorojami mūsų pačių serveriuose ES. Pasitikėjimo centras

Išbandyk dabar Kainos

Kam skirta

Mokymų kūrėjams, dirbtuvių vadovams ir kokybės komandoms, peržiūrintiems darbo artefaktus pagal palaikomą vertinimo matricą. Tinka struktūruotai diskusijai parengti arba pateiktų įvertinimų nuoseklumui patikrinti. Jis nepakeičia kvalifikuotų peržiūrėtojų ir nesuteikia teisės priimti švietimo, įdarbinimo, kredito ar kitų svarbių pasekmių turinčių sprendimų dėl žmonių.

Tipiniai panaudojimai

Peržiūrėk kiekvieną artefaktą pagal kiekvieną pateiktą kriterijų ir jo esamus pasiekimų lygius.
Palygink DI pasiūlymus su nepriklausomai pateiktais žmogaus įvertinimais, tyliai nepakeisdamas nė vieno iš jų.
Apskaičiuok svertinį normalizuotą žmogaus balą su aiškia skale ir trūkstamų įvertinimų tvarkymu.
Laikyk kartu pradines citatas, vertinimo matricos versiją, lygių aprašus ir neišspręstas įrodymų spragas.

Pavyzdys

Įvestis

Vertinimo matricos kriterijų CSV: id,name,weight,definition C1,Atsekamumas,2,Teiginiai susieti su identifikuojamais šaltinio įrašais. C2,Aiškumas,1,Metodas ir jo apribojimai aiškiai nurodyti. Pasiekimų lygių CSV: id,criterion,points,descriptor L1,C1,0,Nepateiktas identifikuojamas pagrindžiantis šaltinis. L2,C1,2,Pagrindiniame teiginyje cituojamas identifikuojamas šaltinio įrašas. L3,C2,0,Metodo arba jo apribojimų nėra. L4,C2,2,Metodas ir bent vienas apribojimas aiškiai nurodyti. Artefakto įrodymų CSV: id,name,text E1,Dirbtuvių ataskaita,Išvadoje naudojamas įrašas DATA-7. Metodas lygina du mėginius ir negali nustatyti priežastingumo. Pateiktų žmogaus įvertinimų CSV: id,evidence,criterion,level H1,E1,C1,L2 Patvirtinti pateiktus apibrėžimus: Patvirtinta šiai peržiūrai Patvirtinta apibrėžimo versija: RUBRIC-1 Citatų išsamumas: Išsamiai Rezultatų tvarka: Šaltinio tvarka Kriterijų svertinimas: Pateikti kriterijų svoriai Trūkstamų žmogaus įvertinimų tvarkymas: Rodyti neišsamų balą Suvestinio balo skalė: 100 Balo dešimtainių skaitmenų skaičius: 2 Rodoma pasiekimų lygių tvarka: Taškai didėjimo tvarka

Rezultatas

Fiksuotas, sutrumpintas pavyzdys. Tikrus rezultatus sukuria DI: patikrink juos.

Kaina ir limitai

Kaina: paprastai 1–3 kreditų
Prieinama su: Nemokamas, Su paketu
Įvesties limitas: Vienas puslapis iki 80 000 HTML simbolių

Privatumas

Apdorojama mūsų pačių serveriuose ES (Lenkijoje). Įvestis ir rezultatai ištrinami po 7 d. (nemokamas) arba 30 d. (paketai), o jei pasirenki jų nesaugoti – iškart po to, kai pamatai rezultatą. Paveikslėliai ištrinami iškart po apdorojimo.

API

Įrankio pavadinimas: assessment_rubrics. Sukurk užduotį su POST /api/v1/jobs ir gauk rezultatą su GET /api/v1/jobs/{id}. Savo API raktą rasi savo paskyroje.

curl -X POST https://do4u.eu/api/v1/jobs \
  -H "Authorization: Bearer d4u_…" -H "Content-Type: application/json" \
  -d '{"tool": "assessment_rubrics", "url": "https://example.com/"}'

Visa API dokumentacija →

Klausimai ir atsakymai

Ar modelis gali išgalvoti pasiekimų lygį arba skirti galutinį pažymį?

Ne. Siūlomas lygis turi būti esamas ID, priklausantis būtent tam kriterijui. Jo citata turi būti artefakto tekste nepakeista. Modelis gali palikti lygį neišspręstą. Struktūriškai galiojančiai citatai vis tiek reikia turinio peržiūros; ji neįrodo, kad siūlomas lygis yra teisingas.

Kaip sujungiami svoriai ir skirtingos taškų skalės?

Kiekvienas pateiktas žmogaus įvertinimas dalijamas iš didžiausių to kriterijaus pateiktų taškų. Normalizuotos reikšmės sujungiamos naudojant pasirinktus pateiktus arba vienodus svorius ir dauginamos iš nustatytos suvestinio balo skalės. Skaičiuojant naudojama tiksli racionaliųjų skaičių aritmetika, o pusė apvalinama į viršų tik rodymui. Ši aritmetika nepatvirtina, kad vertinimo metodas yra pagrįstas.

Kas nutinka su trūkstamais žmogaus įvertinimais?

Neišsamus balas sulaiko suvestinį balą, kai kuriam nors kriterijui trūksta žmogaus įvertinimo. Nulis aiškiai laiko trūkstamus įvertinimus nuliu ir išsaugo įspėjimus. DI pasiūlymai niekada neįtraukiami į nė vieną skaičiavimą. Pateikti įvertinimai nėra patvirtinimai su patikrinta tapatybe.

Ar mano tekstas saugomas?

Tik tiek, kiek reikia: 7 d. nemokamame plane, 30 d. su paketu – arba išvis ne, jei pasirinksi jo nesaugoti. Apdorojimas vyksta mūsų pačių serveriuose ES (Lenkijoje).

Ar rezultatą galiu naudoti iškart?

Rezultatai sukuriami DI. Prieš skelbdamas ar siųsdamas juos perskaityk.