Про застосування методу аналізу ієрархій для автоматизованого оцінювання студентських робіт

dc.contributor.authorОлецький, Олексій
dc.contributor.authorТригуб, Олександр
dc.date.accessioned2021-01-08T20:01:38Z
dc.date.available2021-01-08T20:01:38Z
dc.date.issued2020
dc.description.abstractУ статті досліджено задачу багатокритеріальної оптимізації, яку розв’язують методом аналізу ієрархій. Розглянуто ситуацію, коли потрібно порівняти та ранжувати студентські роботи (проекти), приблизно одного рівня якості. Продемонстровано, що в таких випадках класичний метод аналізу ієрархій, запропонований Т. Сааті, призводить до отримання досить "грубих" числових результатів (глобальних пріоритетів), коли виявляється, що робота одного студента суттєво переважає роботу іншого (хоча це не так, бо розглядали роботи приблизно одного рівня). Запропоновано використати альтернативну шкалу попарних порівнянь, яка даватиме змогу отримувати в таких випадках більш адекватні числові результати. Проведено відповідні чисельні розрахунки із використанням авторської програмної системи, результати яких наведено у вигляді скріншотів.uk_UA
dc.description.abstractThe problem of applying multicriteria optimization on the basis of the analytical hierarchy process (AHP) for a specific subject domain is regarded in the paper. Namely, the situation when some students’ study projects should be compared and assessed with the aid of automated algorithm-based tools for grading especially if these projects are nearly of the same quality level is considered. It is well-known that using the classical graduation scale of pairwise comparisons preferences, suggested by T.Saati and commonly used in AHP, may lead to not very good results. The reason for this is that the difference between the automatically evaluated grades of the projects may become unacceptably large even though all of the projects are good enough and deserve good grades. On the other hand, a competitive and comparative approach to grading study projects should be preserved. In order to mitigate this problem, many authors proposed to apply alternative scales of pair comparisons, which are sometimes referred to as transitive ones. Constructing such scales should imply introducing some parameter that determines how many times the next graduation in the scale of preferences in pair comparisons matrices is bigger than the previous one. Typically this parameter is a rational value between 1 and 2 whereas 2 is the least graduation of preferences in the standard Saati scale. The main issue is how to find out appropriate values of this parameter in order to meet the requirements of the certain task. For exploring this question, some numerical experiments have been carried out and are reported in this paper. According to the typical algorithm of estimations, some projects executed by students have been compared pairwise by each criterion separately. Then the chosen criteria have been compared pairwise as well, and the linear convolution method has been applied for getting final grades. The reported experiments show that for the task of automated grading of students’ study projects alternative transitive scales described above can provide more adequate results than using the standard Saati scale, and the best choice of the parameter for this specific task is about 1.1. All experiments have been carried out with the help of the author software toolkits developed for the purposes of exploring AHP and of applying it for various practical tasks. Some screenshots illustrating the main points of reported experiments are supplied.en_US
dc.identifier.citationОлецький О. В. Про застосування методу аналізу ієрархій для автоматизованого оцінювання студентських робіт / Олецький О. В., Тригуб О. С. // Наукові записки НаУКМА. Комп'ютерні науки. - 2020. - Т. 3. - С. 127-131.uk_UA
dc.identifier.issn2617-3808
dc.identifier.urihttps://doi.org/10.18523/2617-3808.2020.3.127-131
dc.identifier.urihttps://ekmair.ukma.edu.ua/handle/123456789/19171
dc.language.isoukuk_UA
dc.relation.sourceНаукові записки НаУКМА. Комп'ютерні науки.uk_UA
dc.statusfirst publisheduk_UA
dc.subjectметод аналізу ієрархійuk_UA
dc.subjectбагатокритеріальна оптимізаціяuk_UA
dc.subjectавтоматизоване оцінюванняuk_UA
dc.subjectнавчальний проектuk_UA
dc.subjectпопарні порівнянняuk_UA
dc.subjectтранзитивні шкалиuk_UA
dc.subjectпрограмна системаuk_UA
dc.subjectстаттяuk_UA
dc.subjectanalytical hierarchy processen_US
dc.subjectmulticriteria optimizationen_US
dc.subjectautomated assessingen_US
dc.subjectstudy projecten_US
dc.subjectpair comparisonsen_US
dc.subjecttransitive scalesen_US
dc.subjectsoftware systemen_US
dc.titleПро застосування методу аналізу ієрархій для автоматизованого оцінювання студентських робітuk_UA
dc.title.alternativeUse of Analytical Hierarchy Process for Automated Assessing of Students’ Study Projectsen_US
dc.typeArticleuk_UA
Files
Original bundle
Now showing 1 - 1 of 1
Loading...
Thumbnail Image
Name:
Oletskyi_Pro_zastosuvannia_metodu_analizu_iierarkhii.pdf
Size:
679.76 KB
Format:
Adobe Portable Document Format
Description:
License bundle
Now showing 1 - 1 of 1
No Thumbnail Available
Name:
license.txt
Size:
7.54 KB
Format:
Item-specific license agreed upon to submission
Description:
Collections