Наши журналы
Опубликовать статью Вход и регистрация
Расширенный поиск
Разделы статьи

ИНФОРМАЦИОННЫЕ ТЕХНОЛОГИИ КОНТРОЛЯ УРОВНЯ ЗНАНИЙ ОБУЧАЕМЫХ: РОССИЙСКИЙ ОПЫТ

Научная статья
Ларин С. Н.
Юдинова В. В.
Юрятина Н. Н.
DOI:
https://doi.org/10.23670/IRJ.2017.59.030
Выпуск: № 5 (59), 2017
Опубликована:
2017/05/19
PDF

Ларин С.Н.1, Юдинова В.В.2, Юрятина Н.Н.3

1ORCID: 0000-0001-5296-5865, Кандидат технических наук, ведущий научный сотрудник, ФГБУН Центральный экономико-математический институт РАН, 2Руководитель Управления, АНО ДПО Институт международных стандартов учета и управления, 3Научный сотрудник, АНО ДПО Институт международных стандартов учета и управления

ИНФОРМАЦИОННЫЕ ТЕХНОЛОГИИ КОНТРОЛЯ УРОВНЯ ЗНАНИЙ ОБУЧАЕМЫХ: РОССИЙСКИЙ ОПЫТ

Аннотация

Основная цель данной статьи заключается в проведении анализа российского опыта использования современных информационных технологий для контроля уровня знаний обучаемых. Представлено современное понимание результата образовательного процесса и обоснована значимость контроля уровня знаний обучаемых как неотъемлемой его составляющей. Приведен краткий обзор современных программных средств технологий тестирования, используемых в нашей стране для контроля уровня знаний обучаемых. Показаны их возможности и определены перспективные направления дальнейшего развития.

Ключевые слова: образовательный процесс, результат, уровень знаний, контроль, российский опыт, информационные технологии.    

Larin S.N.1, Yudinova V.V.2, Yuryatina N.N.3

1ORCID: 0000-0001-5296-5865, PhD in Engineering, Leading Researcher, FGBUS Central Economics and Mathematics Institute RAS, 2Head of Department, ANO DPE Institute of International Standards Accounting and Management, 3Researcher, ANO DPE Institute of International Standards Accounting and Management

INFORMATION TECHNOLOGIES FOR THE CONTROL OF KNOWLEDGE LEVEL OF TRAINEES: RUSSIAN EXPERIENCE

Abstract

The main purpose of this article is to analyze the Russian experience of using modern information technologies to monitor the level of knowledge of trainees. Modern understanding of the educational process result is presented in the paper and the importance of controlling the level of knowledge of trainees as an integral part of it is justified. The brief review of modern software of testing technologies used in our country for monitoring the level of knowledge of trainees is given. Their capabilities are shown and promising directions for further development are determined.

Keywords: educational process, result, level of knowledge, control, Russian experience, information technology

Введение

Происходящий переход к ры­ночным отношениям предопределил необходимость существен­ных преобразований во всех сферах жизнедеятельности российского общества, в том числе и в системе профессионального об­разования. В составе ос­новных целей и задач  преобразований российской системы профессионального образования выделим следующие: систематическое обновление основополагающих принципов образования; организация образовательного процесса с учетом достижений современной науки; подготовка высоко­квалифицированных специалистов; развитие современных педагогических технологий (СПТ) на основе использования наукоемких информационных технологий; обеспечение вариативности образовательных программ; переориентация процесса обучения на индивидуализацию с учетом личностных особенностей обучаемых [2]. Реализация указанного комплекса целей и задач невозможна без использования современных информационных технологий контроля уровня знаний обучаемых, которые в этих условиях становятся неотъемлемой составной частью организации образовательного процесса.

Сегодня в качестве инновационных технологий контроля уровня знаний обучаемых используется достаточно много различных систем и информационных продуктов. В данной работе будет обоснована значимость контроля уровня знаний обучаемых при организации образовательного процесса в условиях расширения информатизации всей образовательной сферы, а также рассмотрены наиболее известные и широко применяемые в нашей стране технологии контроля уровня знаний обучаемых.

Основная часть

  1. Значимость контроля уровня знаний обучаемых в образовательном процессе

В федеральных государственных образовательных стандартах (ФГОС) нового поколения представлены основные требования к организации образовательного процесса с учетом применения СПТ и электронных образовательных ресурсов (ЭОР) [1, 11]. Однако в них не дается четкого определения самого результата образовательного процесса. Нам представляется, что результатом образовательного процесса следует считать подготовку квалифицированных специалистов в конкретной области знаний, обладающих необходимыми профессиональными компетенциями, навыками и умениями, обеспечивающих их полноценное участие в производственной деятельности предприятий различных отраслей экономики. В этой связи контроль уровня знаний обучаемых становится неотъемлемой функцией управления современным образовательным процессом [12].

Развитие информатизации образовательной сферы привело к тому, что традиционные системы контроля уровня знаний обучаемых перестали соответствовать изменившимся условиям организации образовательного процесса. По этой причине во многих зарубежных странах были предприняты попытки трансформировать традиционные системы контроля уровня знаний обучаемых. Так, например, в Германии был проведен эксперимент по внедрению диагностических листов для контроля уровня знаний обучаемых на протяжении определенного периода их обучения. Аналогом диагностических листов в Великобритании стала разработка индивидуальных «профилей» для контроля уровня знаний обучаемых. Эти «профили» представляли собой табличные матрицы в разрезе отдельных образовательных дисциплин, их тем и разделов. Они составлялись по результатам тестирования обучаемых [3].

В России реализация ФГОС нового поколения также предполагает изменение подходов к традиционным системам контроля уровня знаний обучаемых и оценке качества их профессиональных компетенций. Это, в свою очередь, приводит к необходимости разработки и внедрения новых видов, форм, методов, средств и информационных технологий контроля уровня знаний обучаемых в ходе организации образовательного процесса [1].

На этом основании можно сделать вывод о том, что современная педагогика и за рубежом, и в России активно разрабатывает новые информационные технологии для решения проблемы объективного контроля уровня знаний обучаемых и оценки качества их профессиональных компетенций.

Одной из широко используемых информационных технологий для контроля уровня знаний обучаемых, которая  в современных условиях всеми признана и является наиболее технологичной, считается технология систематического  тестирования обучаемых [8, 10]. Проведение тестирования обеспечивает эффективность всех видов контроля уровня знаний обучаемых (входного, текущего, итогового и др.), а также позволяет своевременно выявлять соответствие качества усвоенных обучаемыми профессиональных компетенций требованиям конкретных образовательных дисциплин. Кроме  того, результаты тестирования очень наглядны и информативны, поскольку легко интерпретируется путем использования различных шкал для перевода ответов на вопросы теста  в конкретные оценки уровня знаний обучаемых.

  1. Современные технологии контроля уровня знаний обучаемых

Сегодня в качестве инновационных технологий контроля уровня знаний обучаемых используются не только методы и технологии тестирования, но и разнообразные модульные и рейтинговые технологии контроля уровня знаний, различные системы мониторинга качества усвоения обучаемыми профессиональных компетенций, а также разнообразные подходы к формированию индивидуальных портфолио обучаемых [9, 13].

Основная цель использования модульных технологий  контроля уровня знаний обучаемых заключается в проведении систематического тестирования уровня их знаний в разрезе тем и разделов образовательных дисциплин. Их практическое применение способствует созданию для обучаемых необходимых условий для регулярных занятий своим образованием за весь период их обучения в ВУЗе.

Рейтинговые технологии контроля уровня знаний обучаемых лишены многих недостатков традиционных систем контроля, поскольку они основываются на получении рейтинговых оценок уровня знаний и обеспечивают дифференцированный подход к каждому обучаемому. В результате их применения формируется рейтинг  обучаемых. Он представляет собой некоторую числовую последовательность, выраженную, как правило, в одной из многобалльных измерительных шкал. Рейтинг является интегральной характеристикой для контроля уровня знаний обучаемых по той или иной образовательной дисциплине в разрезе ее тем и разделов за весь период их обучения в ВУЗе.

Повышение эффективности контроля уровня знаний обучаемых при использовании рейтинговых технологий обеспечивается за счет того, что они позволяют:

- осуществлять контроль текущего уровня знаний обучаемых и создавать значительные стимулы для активизации самостоятельного получения ими знаний за весь период их обучения в ВУЗе;

- получать более объективные и точные данные для  контроля уровня знаний обучаемых за счет использования при оценивании многобалльных измерительных шкал;

- создавать предпосылки для дифференциации обучаемых по уровню их знаний, что принципиально важно в условиях перехода к многоуровневой системе обучения;

- получать подробную информацию для контроля уровня знаний обучаемых и степени усвоения каждым из них профессиональных компетенций в рамках той или иной образовательной дисциплины.

Система формирования индивидуальных портфолио обучаемых может рассматриваться как альтернативная технология контроля уровня их знаний. Использование этой технологии позволяет решить отдельные задачи в условиях личностно-ориентированного образовательного процесса, а именно: осуществлять контроль уровня знаний обучаемых и фиксировать его рост или снижение за определенный период времени; создавать дополнительные стимулы к обучению и конкретизировать его цели; обеспечивать преемственность процесса обучения по мере расширения диапазона навыков, умений и профессиональных компетенций, усваиваемых обучаемыми за весь период их обучения в ВУЗе.

Использование различных технологий мониторинга в образовательном процессе позволяет регулярно контролировать уровень знаний обучаемых и качество усвоения ими профессиональных компетенций. Как правило, в системах мониторинга объединяется некая совокупность контролирующих и диагностирующих мероприятий, которые разнесены во времени в зависимости от тем и разделов изучаемых образовательных дисциплин. Состав этих мероприятий в каждой технологии мониторинга может быть разным, но все они обусловлены целеполаганием образовательного процесса с позиции обучаемых. Они предусматривают контроль уровня их знаний и его корректировку при необходимости, а также динамики качества усвоения обучаемыми профессиональных компетенций. Таким образом, применение различных технологий мониторинга в образовательном процессе позволяет не только контролировать уровень знаний обучаемых, но и регулярно отслеживать качество усвоения ими профессиональных компетенций.

Поскольку тема нашего исследования связана с использованием технологий тестирования для контроля уровня знаний обучаемых в рамках СПТ и ЭОР, то в дальнейшем изложении будет раскрыта практическая сущность некоторых из них.

  1. Программные средства современных технологий тестирования

Развитие информационных технологий создает необходимые предпосылки для разработки новых технологий тестирования с использованием методического аппарата различных кон­трольно-измерительных методов и программных средств. При этом конечная цель проведения контроля уровня знаний обучаемых при помощи и программных средств технологий тестирования заключается в разработке тестов, показывающего одинаковый уровень валидности и надежности по отношению ко всему диапазону тестируемого дидактического контента либо измеря­емых конструктов предметной области той или иной образовательной дисциплины.

Тем самым современные адаптивные технологии тестирования представляют собой программные средства для научно обоснованного проведения контроля уровня знаний обучаемых, обладающие высокой эффективностью за счет оптимизации процедур си­стематизированной разработки тестов. Одновременно с этим программные средства технологий тестирования позволяют получить максимум возможной информации в разрезе индивидуальной идентификации уровня знаний об­учаемых [9].

К современным программным средствам технологий тестирования уровня знаний обучаемых с целью их контроля можно отнести программу диагностики результатов обучения (E-Assessments) [14]. Функциональные модули этой программы тестирования позволя­ют:

– создавать и корректировать совокупность тестов для контроля уровня знаний обучаемых;

– гибко настраивать удельный вес каждой процедуры контроля уровня знаний обучаемых относительно их текущего рейтинга и интегрального балла;

– работать с малыми группами обучаемых, управлять их доступом к модулям контроля уровня знаний обучаемых с учетом представленного в каждом из них дидактического контента, а также поддерживать взаимодействие внутренних коммуникационных интерфейсов;

– контролировать в реальном времени уровень знаний обучаемых и динамику рейтинга качества усвоения ими дидактического контента и профессиональных компетенций;

– получать рекомендации для принятия реше­ний по выбору форм и методов организации образовательного процесса применительно к каждому обучаемому или всей группе в целом на основании протоколов тестирования.

Для контроля уровня знаний обучаемых можно использовать онлайн-технологии тестирования, которые разработаны НИИ мониторинга качества образования и размещены на сайте бесплатно­го бизнес-образования Businesslearning.ru [4, 5]. Эти технологии тестирования разработаны для отдельных модулей различных экономических дисципли­н и содержат тесты по 104 модулям и 15-и курсам. Однако основной недостаток онлайн-технологий тестирования заключается в их ориентации на проведение семинаров и тренингов, а не на контроль уровня знаний обучаемых по отдельным дисциплинам. Кроме того, представленный в онлайн-технологиях тестирования дидактический контент не в полной мере соответствует требованиям ФГОС.

Одним из наиболее удобных программных средств технологий тестирования является пакет прикладных программ VeralTest, который способен работать в локальных сетях [7]. Этот пакет содержит необходимый функционал для формирования тестов, а также управ­ления ходом процесса тестирования. Главное достоинство пакета VeralTest заключается в том, что модуль визуального редактора прост и удобен в ра­боте, а также позволяет создавать тесты различной сложности в рамках изучаемого дидактического контента по разным образовательным дисциплинам. При помощи модуля администратора происходит ре­гистрация обучаемых, их объединение в груп­пы, просмотр и распечатка результатов тестирования.

Еще одним достоинством пакета VeralTest является способность  модуля тестирования случайным обра­зом формировать как порядок вопросов, так и порядок ответов в каждом вопросе. В этом случае совместный по­иск обучаемыми правильных ответов лишен какого-либо смысла. При этом контроль уровня знаний обучаемых по результатам тестирования, не за­висит от субъективности преподавателя, а использование программных средств технологий тестирования существенно сокращает время на проверку результатов тестирования.

Таким образом, неоспоримым преимуществом использования программных средств технологий тестирования по сравнению с традиционной системой контроль уровня знаний обучаемых является наличие больших информационных массивов вариантов вопро­сов и ответов, а также возможность формирования тестов по принципу случайной выборки их комбинаций. Кроме того результаты тестирования обу­чаемых на­глядно отражают уровень усвоения ими дидактиче­ского контента и качество овладения профессиональными  компетенциями.

К достоинствам пакета VeralTest можно отнести тот факт, что количество заданий в конкретном тесте изначально не ограничен, а процесс тестирования завершается при достижении заданного числа точных ответов, которое характеризует уровень знаний конкретного обучаемого. Другими словами, задания адаптивных тестов не выходят за пределы его уровня знаний, из­меряемого посредством определенных дидактических конструктов. На практике это становится возможным п­ри наличии банка заданий, которые релевантны измеряемой области дидактических конструктов. При этом задания тестов могут ранжироваться по степени сложности на основе соотношения уровня знаний обучаемых, давших правильные ответы, либо соотношения правильных и неправильных отве­тов на какое-либо задание теста.

К недостаткам пакета VeralTest следует отнести необходимость трудоёмкой подготовительной работы по формированию заданий для тестов, выбору критериев контроля уровня знаний обучаемых, а также технические сбои, связанные с нарушениями в работе оргтехники или программного обеспечения.

К программным средствам технологий тестирования относится оболочка SunRav TestOfficePro, которая внесена в Единый реестр российских программ для контроля уровня знаний обучаемых [6]. Она представляет собой технологию тестирования уровня знаний обучаемых, в которой реализованы три функционала: для создания тестов, для проведения тестирования, для анализа результатов тестирования обучаемых. Являясь программным средством технологий тестирования, SunRav TestOfficePro может функционировать как в локальной сети, так и на отдельных компьютерах, не подключенных к сети. Кроме того возможно проведение тестирования с флеш-накопителей и/или компакт-дисков без установки программы на жесткий диск или сервер.

Завершая краткий обзор программных средств технологий тестирования, можно сделать вывод о том, что перспективным направлением их развития является адаптивное тестирование. Расширение сферы его  использования позволяет оперативно решать комплекс важных задач современной педагогической практики, а именно:

- формирование баз данных тестов по образовательным дисциплинам в разрезе их тем, разделов и модулей;

- разработка средств автоматизированной обработки результа­тов тестирования в разрезах от конкретного обучаемого до группы;

- разработка индивидуализированных форм и методов контроля уровня знаний обучаемых с корректированием траекторий их об­учения при необходимости;

- исполь­зование методов статистической обработки для наглядного представления результатов тестирования и их интеграции в различных разрезах.

Кроме того, развитие практики адаптивного тестирование способствует повышению качественных характеристик и эффективности разрабатываемых тестов, получению более достоверных (валидных) результатов контроля уровня знаний обучаемых, росту эффективности организации образовательного процесса в цело­м.

Заключение

В ходе проведенных исследований было уточнено определение результата образовательного процесса и показать значимость контроля уровня знаний обучаемых как его неотъемлемой составляющей. На основе анализа педагогической практики установлено, что в современных системах образования для проведения систематического контроля уровня знаний обучаемых целесообразно использовать СПТ, которые должны иметь функциональные возможности для его реализации. Формы, приёмы, методы и средства в рамках технологий тестирования для контроля уровня знаний обучаемых должны обладать достаточной гибкостью и повышенной вариативностью. Наличие в программных средствах технологий тестирования функциональных возможностей для организации контроля уровня знаний обучаемых способствует индивидуализации образовательного процесса. Поэтому проведение систематического контроля уровня знаний обучаемых путем использования адаптивного тестирования и программных средств технологий тестирования можно считать одним из перспективных направлений управления образовательным процессом.

Исследование выполнено при финансовой поддержке Российского фонда фундаментальных исследований, проект №17-06-00010а «Развитие инструментария тестирования уровня знаний обучаемых в условиях комплексного применения электронных образовательных ресурсов».

Список литературы / References

  1. Говорова И. Е. Применение тестовых технологий в рамках реализации требований ФГОС [Электронный ресурс] - URL: http://www.informio.ru/publications/id1967/Primenenie-testovyh-tehnologii-v-ramkah-realizacii-trebovanii-FGOS (дата обращения 29.04.2017)
  2. Государственная программа Российской Федерации «Развитие образования» на 2013-2020 годы. Утверждена Распоряжением Правительства РФ №2148-р от 22 ноября 2012 года.
  3. Грини В., Кэллаган Т., Мюррей С. Использование результатов национальной оценки учебных достижений // Серия «Национальная оценка учебных достижений», Книга 5. – Всемирный банк, 2011.
  4. Данные Единого портала тестирования в сфере образования [Электронный ресурс] - URL: http://i-exam.ru/node/56 (дата обращения 29.04.2017).
  5. Данные официального сайта системы дистанционного бизнес-образования малого и среднего предпринимательства [Электронный ресурс] - URL: http://www.businesslearning.ru/ (дата обращения 29.04.2017)
  6. Данные официального сайта SunRav TestOfficePro [Электронный ресурс] - URL: http://sunrav.ru/testofficepro.html?yclid=2256707428818360406 (дата обращения 29.04.2017)
  7. Данные официального сайта VeralSoft [Электронный ресурс]. URL: http://www.veralsoft.com/ (дата обращения 29.04.2017)
  8. 8. Крокер Л., Алгина Дж. Введение в классическую и современную теорию тестов. – М.: Логос, 2010. – 663 с.
  9. Ларин С. Н., Малков У. Х. Современные подходы к моделированию тестов: система требований, преимущества и недостатки, основные этапы разработки // Интернет-журнал «Мир науки», 2016, Том 4, № 1 [Электронный ресурс] - URL: http://mir-nauki.com/PDF/04PDMN116.pdf (дата обращения 29.04.2017)
  10. Печников А. Н., Печников Д. А. Решение задач текущего педагогического контроля на основе анализа результатов критериально-ориентированного тестирования // Образовательные технологии и общество. – 2015. – Т. 18. – № 2. – С. 489-513.
  11. Современные образовательные технологии: учебное пособие / коллектив авторов; под ред. Н. В. Бордовской. – М.: КНОРУС, 2011. – 432 с.
  12. Соколова Г. Ю., Саукова Н. М., Моркин С. А. Использование систем автоматизированного контроля знаний в профессиональной деятельности педагога. – М.: Прометей, 2013. – 140 с.
  13. Строгонова Е. И., Мокропуло А. А. Адаптивная модель контроля и оценки знаний, обучающихся в условиях компетентностного подхода // Конкурентоспособность в глобальном мире: экономика, наука, технологии, 2016. – №3.
  14. Сlarke M. Roadmap for building an effective assessment system. The World Bank, 2010.

Список литературы на английском языке / References in English

  1. Govorova I. E. Primenenie testovyh tehnologij v ramkah realizacii trebovanij FGOS [Application of test technologies in the framework of FGES requirements implementation] [Electronic resource] - URL: http://www. informio.ru/publications/id1967/Primenenie-testovyh-tehnologii-v-ramkah-realizacii-trebovanii-FGOS (accessed 29.04.2017). [in Russian]
  2. Gosudarstvennaja programma Rossijskoj Federacii «Razvitie obrazovanija» na 2013-2020 gody. Utverzhdena Rasporjazheniem Pravitel'stva RF № 2148-r ot 22 nojabrja 2012 goda [The State Program of the Russian Federation «Development of Education» for 2013-2020. Approved by the Order of the Government of the Russian Federation # 2148-r of November 22, 2012]. [in Russian]
  3. Grini V., Kjellagan T., Mjurrej S. Ispol'zovanie rezul'tatov nacional'noj ocenki uchebnyh dostizhenij [Using the results of the national assessment of academic achievements] // Serija «Nacional'naja ocenka uchebnyh dostizhenij», Kniga 5. – Vsemirnyj bank, 2011.
  4. Dannye Edinogo portala testirovanija v sfere obrazovanija [The data of the Single Portal for Testing in Education] [Electronic resource] - URL: http://i-exam.ru/node/56 (accessed 29.04.2017). [in Russian]
  5. Dannye oficial'nogo sajta sistemy distancionnogo biznes-obrazovanija malogo i srednego predprinimatel'stva [Data of the official site of the system of remote business education of small and medium-sized businesses] [Electronic resource] - URL: http://www.businesslearning.ru/ (accessed 29.04.2017). [in Russian]
  6. Dannye oficial'nogo sajta SunRav TestOfficePro [Data of the official SunRav site TestOfficePro] [Electronic resource] - URL: http://sunrav.ru/test- officepro.html?yclid=2256707428818360406 (accessed 29.04.2017). [in Russian]
  7. Dannye oficial'nogo sajta VeralSoft [Data of the official site VeralSoft] [Electronic resource]. URL - http://www.veralsoft.com/ (accessed 29.04.2017). [in Russian]
  8. Kroker L., Algina Dzh. Vvedenie v klassicheskuju i sovremennuju teoriju testov [Introduction to the classical and modern theory of tests]. – M.: Logos, 2010. – 663 p. [in Russian]
  9. Larin S. N., Malkov U. H. Sovremennye podhody k modelirovaniju testov: sistema trebovanij, preimushhestva i nedostatki, osnovnye jetapy razrabotki [Modern approaches to the modeling of tests: a system of requirements, advantages and disadvantages, the main stages of development] // Internet-zhurnal «Mir nauki» [Internet-journal «The World of Science»], 2016, Tom 4, #1 [Electronic resource] - URL: http://mir-nauki.com/PDF/04PDMN116.pdf (accessed  29.04. 2017). [in Russian]
  10. Pechnikov A. N., Pechnikov D. A. Reshenie zadach tekushhego pedagogicheskogo kontrolja na osnove analiza rezul'tatov kriterial'no-orientirovannogo testirovanija [The solution of the tasks of the current pedagogical control on the basis of the analysis of the results of criterion-oriented testing] // Obrazovatel'nye tehnologii i obshhestvo [Educational technologies and society]. – 2015. – T.18. – #2. – Pp. 489-513. [in Russian]
  11. Sovremennye obrazovatel'nye tehnologii: uchebnoe posobie / kollektiv avtorov; pod red. N. V. Bordovskoj [Modern educational technologies: textbook / team of authors; Ed. N. V. Bordovskaya]. – M.: KNORUS, 2011. – 432 p. [in Russian]
  12. Sokolova G. Ju., Saukova N. M., Morkin S. A. Ispol'zovanie sistem avtomatizirovannogo kontrolja znanij v professional'noj dejatel'nosti pedagoga [The use of automated knowledge control systems in the professional work of a teacher]. – M.: Prometej, 2013. – 140 p. [in Russian]
  13. Strogonova E. I., Mokropulo A. A. Adaptivnaja model' kontrolja i ocenki znanij, obuchajushhihsja v uslovijah kompetentnostnogo podhoda [Adaptive model of control and evaluation of knowledge, trained in terms of competence approach] // Konkurentosposobnost' v global'nom mire: jekonomika, nauka, tehnologii [Competitiveness in the global world: economy, science, technology], 2016. – #3. [in Russian]
  14. Slarke M. Roadmap for building an effective assessment system. The World Bank, 2010.