Feladatok automatikus kiértékelése LLM-ekkel
Supervisor:
Karsa Zoltán István
Subject:
Project Laboratory 1 - Biomedical engineering, MSc Bio.
Project Laboratory 2 - Biomedical engineering, MSc Bio.
Project Laboratory 1 - Control and vision systems, MSc Elec.
Project Laboratory 1 - Visual informatics, MSc IT.
Project Laboratory 2 - Control and vision systems, MSc Elec.
Project Laboratory 2 - Visual informatics, MSc IT.
Teamwork Project for Mechatronics Engineers
Project Laboratory 2 - Biomedical engineering, MSc Bio.
Project Laboratory 1 - Control and vision systems, MSc Elec.
Project Laboratory 1 - Visual informatics, MSc IT.
Project Laboratory 2 - Control and vision systems, MSc Elec.
Project Laboratory 2 - Visual informatics, MSc IT.
Teamwork Project for Mechatronics Engineers
Students count:
1
Continue:
Szakdolgozat / Diplomaterv
Description:
Az Automated essay scoring (AES) során automatizált módon rendelünk osztályzatot, pontot az általában szabadszöveges dolgozatokhoz. A téma egészen az 1990-es évek elejére nyúlik vissza, amikor már léteztek olyan programok, amik az elgépelések vagy a nyelvtani hibákra hívták fel a figyelmet.
Elsősorban esszé jellegű ZH-k, vizsgák automatikus
kiértékelése LLM-ekkel, HF-beadások automatikus
értékelése.
A témára jelentkező feladata az előre betanított modellek vizsgálata,
finomhangolása, esetleg saját megoldások kidolgozása, prompt
engineering. A megoldások során tekintettel kell lenni a szűkös
erőforráskapacitásokra. Az így kidolgozott modellek interfészének
fejlesztése, összekötése a kari moodle vagy a jporta rendszerrel.
Az esszék pontozása során általában nemcsak a konkrét tartalom minőségét kell figyelembe venni, hanem a nyelvhasználatot, következetes, jól érhető stílust is. A hallgató feladata az LLM kiértékelés és emberi/manuális kiértékelés összehasonlítás is.