Квалиметрический подход к методологии объективизации оценивания при проведении объективного структурированного клинического экзамена

Abstract

В работе представлена универсальная методика создания инструмента оценки объективного структурированного клинического экзамена. В основу инструмента оценки положен чек-лист со штрафными баллами. Алгоритм предполагает поэтапное решение задачи создания инструмента оценки, условием для использования которой является обязательные расчеты согласованного мнения разработчиков и независимых экспертов из числа профильных специалистов, для чего используется расчет коэффициента конкордации Кенделла. Окончательное решение о пригодности инструмента оценки принимается после анализа надежности оценок с по мощью критерия альфа Кронбаха после предварительной апробации. Для облегчения регистрации действий экзаменуемых, чек-листы записываются в электронных таблицах с использованием «облачных» технологий. Автоматизация расчетов итоговых оценок осуществляется путем прописывания специальных формул с помощью мастера функций. Рассматриваемая в статье методика, является результатом многолетнего поиска оптимального решения создания адекватной и удобной системы оценки ОСКЭ. Разработанный инструмент оценки внедрен в практику учебной деятельности симуляционно-аттестационного центра учреждения образования «Витебский государственный ордена Дружбы народов медицинский университет» и успешно апробирован при проведении объективных структурированных клинических экзаменов в ходе текущих и итоговых аттестаций.

The paper presents a universal methodology for creating an assessment tool for an objective structured clinical examination. The assessment tool is based on a checklist with penalty points. The algorithm assumes a step-by-step solution to the problem of creating an assessment tool, the condition for the use of which is the mandatory calculation of the agreed opinion of the developers and independent experts from among the specialized specialists, for which the calculation of the Kendall concordance coefficient is used. The final decision on the suitability of the assessment tool is made after analyzing the reliability of the assessments using the Cronbach's alpha criterion after preliminary testing. To facilitate the registration of examinees' actions, checklists are recorded in spreadsheets using “cloud” technologies. Automation of calculations of final grades is carried out by writing special formulas using the function wizard. The methodology considered in the article is the result of many years of searching for an optimal solution to create an adequate and convenient OSCE assessment system. The developed assessment tool has been implemented in the practice of educational activities of the simulation and certification center of the educational institution “Vitebsk State Order of Friendship of Peoples Medical University” and has been successfully tested during objective structured clinical examinations during current and final certifications.