Адаптивное игровое тестирование реферат
Обновлено: 07.07.2024
Формирование требований к программному средству: требования, построение диаграммы вариантов использования. Описание входной и выходной информации, диаграммы потоков данных, архитетктура программного средства. Концептуальное и логическое проектирование.
| Рубрика | Программирование, компьютеры и кибернетика |
| Вид | курсовая работа |
| Язык | русский |
| Дата добавления | 28.08.2012 |
| Размер файла | 2,3 M |
Студенты, аспиранты, молодые ученые, использующие базу знаний в своей учебе и работе, будут вам очень благодарны.
Содержание
- Введение
- 1.Формирование требований к программному средству
- 1.1 Выявление требований. Документ "Видение"
- 1.2 Построение диаграммы вариантов использования
- 1.2.1 Выявление актеров
- 1.2.2 Выявление вариантов использования
- 2.1 Описание входной и выходной информации
- 2.2 Построение диаграммы потоков данных
- 3.1 Проектирование архитектуры ПС
- 3.2 Концептуальное и логическое проектирование структуры информационного обеспечения
- 3.3 Проектирование интерфейса
- 4.1 Выбор средств реализации
- 4.2 Реализация информационного обеспечения
- 4.2.1 Создание БД
- 4.2.2 Создание таблиц и полей. Заполнение БД
- 4.2.3 Создание связей. Построение диаграммы БД
Требования - это исходные данные, на основании которых проектируются и создаются автоматизированные информационные системы.
Наиболее подробно проанализировать и определить высокоуровневые требования для подсистемы адаптивного тестирования, и в результате получить хороший конечный продукт, можно путем составления документа Видение. Документ обращает внимание на то, как и почему данные потребности существуют в данной подсистеме. Остановимся на основных пунктах данного документа, которые помогут нам детально проанализировать подсистему.
Настоящий документ основан на теоретических данных об адаптивном тестировании, имеет взаимосвязь с проектом подготовки адаптивных тестирований и разрабатывается в рамках автоматизации адаптивных тестов в среду дистанционного образования (ДО).
Как уже говорилось ранее, адаптивное тестирование является эффективнее традиционной формы, однако и тут есть некоторые проблемы. Какие же проблемы существуют, и что получится в случае их успешного решения. Данную информацию представим в виде таблиц.
Таблица 1 - Проблема 1
Упрощение задачи, стоящей перед слушателем. Вместо самостоятельного формулирования полного и исчерпывающего ответа на поставленный вопрос требуется лишь выбрать правильный ответ из числа готовых вариантов ответа
Ее следствием является
возможность угадывания правильного ответа
увеличивается объем разнообразного учебного материала, который может быть проверен за определенный отрезок времени
Таблица 2 - Проблема 2
Необходимость высокой квалификации преподавателей и экспертов, составляющих задания.
Ее следствием является
необходимость дополнительного повышения квалификаций преподавателей
зато, отсутствует необходимость непосредственного участия преподавателя в самом проведении тестирования
Таблица 3 - Проблема 3
Невозможность оценки характера мышления (логика построения концепции, умения обосновать ее, используя для этого необходимые данные, логическое мышление и др.)
Ее следствием является
неоднозначность оценки ответа
возможность статистической обработки результатов контроля, и отсутствие предвзятого (личного) отношения пары преподаватель-студент
Теперь определим позицию данной подсистемы адаптивного тестирования.
Таблица 4 - Определение позиции подсистемы
Требуется оптимизировать процесс адаптивного тестирования
Продукт надежен и основан на БД
Существующей системы устной проверки знаний
Облегчает процедуру проверки знаний
Однако это не означает, что данная система создается исключительно для вузов. Целевым заказчиком, подсистемы адаптивного тестирования, позволяющей обеспечить современный уровень обучения на основе применения современных информационных технологий, вполне, могут являться еще и учебные центры, стремящиеся идти в ногу со временем.
При описании проблем были упомянуты пользователи данной системы. Опишем, кто к ним относится и какими правами обладает.
Система адаптивного тестирования обеспечивает надежную работу следующих групп пользователей:
- преподаватели - эксперты, составляющие задания
- студенты, тестирующиеся по конкретным дисциплинам
Преподаватели-эксперты имеют доступ к части программы, которая позволяет им создавать новые тесты и вносить изменения в старые.
Системный администратор должен контролировать исправность работы системы и устранение в случае необходимости возникших с программным средством ошибок.
Студенты являются непосредственно теми, кто проходит данное тестирование. В случае подсистемы адаптивного тестирования, которая создается в ходе проекта, студенты являются основными пользователями, поскольку подсистема направлена на генерацию адаптивных тестов из БД.
Таблица 5 - Профиль пользователя ПРЕПОДАВАТЕЛЬ
Пользователь системы, наделенный правами составления и редактирования тестов
Разрабатывает задания для тестов, вносит необходимые изменения в БД с заданиями, контролирует результаты прохождения теста
Наличие в БД достоверной информации, постоянное обновление БД
Таблица 6 - Профиль пользователя СТУДЕНТ
Пользователь системы, наделенный правами прохождения адаптивного тестирования, в соответствии, с выбранным уровнем трудности
Пройти тест и получить объективную оценку своих знаний
Хорошая подготовленность, сосредоточенность на прохождении заданий, исключение вариантов угадывания
Таблица 7 - Профиль пользователя СИСТЕМНЫЙ АДМИНИСТРАТОР
Пользователь системы, наделенный правами администрирования системы в целом
Следить за исправностью работы системы и БД, устранять возможные ошибки в системных кодах программы
Постоянный контроль состояния системы, оперативность устранения ошибок
Пользовательский интерфейс является своеобразным коммуникационным каналом, по которому осуществляется взаимодействие пользователя и компьютера. Но к интерфейсу мы обратимся немного позднее.
Для адаптивного тестирования наличие разделения заданий по уровням трудности является важным требованием. Прежде чем приступить к прохождению теста студент должен выбрать уровень, с какого он хочет начать. В данной подсистеме адаптивного тестирования "Тестирование" используется 8 уровней трудности (от 0 до 7). Самым нижним уровнем считается 0, ниже которого студент опускаться не будет. И если студент вновь и вновь не будет справляться с заданием 0 уровня трудности, то они ему будут предоставляться до тех пор, пока она не ответит правильно, или вопросы не закончатся. Распределение заданий происходит в соответствии с теоретическим представлением о системе адаптивного тестирования.
Если тестируемый успешно решил данное задание, то у него появляется желание решить задание труднее, если нет -- то им будет сделана еще одна попытка решения задания той же трудности. Если оно также не решено, то предъявляется задача пониженной трудности. Если сразу не решено менее трудное задание, то предлагается задача еще меньшей трудности. Аналогично происходит процесс повышения трудности заданий. В результате, если исключить этап обучения при решении задач, то испытуемый выберет для себя определенный уровень трудности, вокруг которого и будет размываться трудность заданий.
После прохождения теста будет указано количество набранных баллов. Рассчитываться баллы будут автоматически, следующим образом: правильный ответ - 1 балл, не правильный ответ - 0 баллов, при этом баллы будут умножаться на коэффициент трудности задания. Данный коэффициент добавляет баллы в соответствии с тем, к какому уровню относится вопрос, на который был дан правильный ответ. Так на 0 уровне за правильный ответ будет начислен 1 балл, умноженный на коэффициент 1, на 1 уровне коэффициент будет 2, на 2 - коэффициент 3 и так далее. В результате будет выведена сумма всех баллов.
В заключение следует указание еще ряд требований, а именно системных требований к программному средству.
Для создания системы адаптивного тестирования потребовались:
- Microsoft Windows XP Professional
- Microsoft Visual Studio. Net 2005
- Microsoft SQL Server Express
Каждая из этих систем, представленных выше, имеет свои минимальные аппаратные и программные требования. Для правильного функционирования системы адаптивного тестирования нужно так же выработать минимальные системные требования.
Компьютерное обучение (КО) может иметь большой потенциал, при надлежащем использовании в целях повышения качества обучения. Однако это качество может повышаться путём использованием компьютерного тестирования (КТ) и, более конкретно, с использованием компьютерного адаптивного тестирования (КAT). В целях данной работы автор описывает механизм и преимущества компьютерного адаптивного тестирования, а также каким образом оно может улучшить процесс обучения в предметной области науки. Педагогу предлагается принять к рассмотрению некоторые ограничения и проблемы в реализации, также будет обсуждаться естественнонаучное образование. КЛЮЧЕВЫЕ СЛОВА Компьютерное адаптивное тестирование, КАТ, компьютерное тестирование, компьютерное обучение, естественнонаучное образование, оценивание, формирование обратной связи.
ВВЕДЕНИЕ
Компьютерное обучение имеет крайне большой потенциал для улучшения обучения во многих областях и дисциплинах, в том числе и в предметной области науки. Однако, компьютерное обучение должно тесно и постоянно контролироваться, для обеспечения его эффективности. Это особенно верно, так как некоторые предварительные исследования показали, что использование компьютера отрицательно коррелирует с достижениями в области математики и науки (Papanastasiou и Фердиг, 2003). Хотя не ясно, при каких обстоятельствах эти негативные последствия развиваются, и если есть причинно-следственная связь между этими переменными, почему она все еще существует. Следовательно, эти отношения должны напомнить педагогу, что использование компьютера - не обязательно "панацея", и что он не должен использоваться безответственно и занимать внимание студентов, которым трудно иметь дело с ним. Также эта отрицательная связь между использованием компьютера и достижением результатов должна напомнить педагогам о существовании значительной потребности в непрерывной созидательной и итоговой оценки в науке. С помощью правильного оценивания, проблемы, которые возникают во время обучения, могут быть определены и, возможно, исправлены, если их обнаружили достаточно рано. Однако, оценка также должна использоваться с умом таким образом, чтобы она могла дополнять процесс обучения. Так как компьютерное обучение является целью этой конференции, эта статья будет связана с компьютерным оцениванием. Цель данной работы - выйти за рамки простого компьютерного обучения для описания компьютерного адаптивного тестирования, и обсудить его последствия, преимущества, и как оно может эффективно дополнять компьютерное обучение в данной области науки.
Описание
Преимущества компьютерных адаптивных тестов
Основными преимуществами компьютерного адаптивного тестирования связаны с тем, что они являются эффективными с точки зрения времени, а также используемых ресурсов. Эти преимущества будут обсуждены в следующем разделе с точки зрения испытуемых, с точки зрения педагога, который хочет определить уровень знаний студента, а также с точки зрения разработчика теста.
Эффективность
Обратная связь
Еще один из преимуществ компьютерного испытания в целом, а также компьютерных адаптивных тестов, является то, что они могут управлять прямой и непосредственной обратной связью студента и преподавателя (Wise & Plake, 1990). С типичным бумажным тестом, всегда возникает задержка по времени между преподавателем и тестируемым. Без формирования оценки, преподаватели не смогут определить призвано ли компьютерное обучение действительно помогать студенту в обучении или нет. Это особенно важно, потому что без надлежащего оценивания, некоторые студенты могут оказаться в невыгодном положении из компьютерного обучения. В дополнение к суммарной оценке, такой вид оценивания показывает, как каждый студент усвоил материал в целом, также возможно предоставление списка областей и предметов, вопросы по которым встречались у каждого студента, на основе его показателей в адаптивном тестировании. Однако у преподавателя может возникнуть такой вопрос, при непрерывном тестировании, возможно, что некоторые студенты запомнят тестовые вопросы и проинформируют других студентов о них. Однако, если адаптивный тест содержит относительно большую базу вопросов, такой проблемы не возникнет, особенно в свете того, что разные студенты должны получить разные задания, основанные на уровне их индивидуальных способностей.
Время
С точки зрения разработчика тестов, создание адаптивного теста отнимает много времени, но является более эффективным с точки зрения педагога. В частности, студенты при адаптивном тестировании должны ответить на меньшее количество вопросов, чем во время обыкновенного тестирования. Кроме того, обычное тестирование, как правило, проводится всей группой, определённое количество времени, которое может не устраивать некоторых студентов. Преподаватель и вся группа должна ждать, пока все студенты завершат тестирование, прежде чем они смогут перейти к другому виду деятельности. С компьютерным адаптивным тестированием, студенты могут сдавать экзамен, когда будут готовы, единственным условием является доступность компьютера, и они не должны ждать, пока вся группа будет готова приступать к тестированию, или пока вся группа закончит его. С точки зрения преподавателя, адаптивное тестирование является экономным по времени, а также ему больше не придется беспокоиться о создании тестов для группы до тех пор, пока КАТ в состоянии охватить изученный материал. Кроме того, преподаватель экономит время на проверке работ, так как тест оценивается компьютером.
Другие преимущества
Компьютерное адаптивное тестирование также имеет некоторые дополнительные преимущества. В компьютерном адаптивном тестировании высокий уровень безопасности, так как список вопросов больше не может быть украден, и списывание у соседей не выгодно, так как большинство вопросов теста для каждого индивидуально. Кроме того, при помощи КАТ могут быть собраны другие типы данных, такие как количество времени, затраченное для ответа на каждый вопрос или количество изменений, которые сделаны для студентов во время прохождения теста.
ЗАКЛЮЧЕНИЕ
Современные исследования в области тестирования и оценивания показали, что потенциал компьютер адаптивных тестов увеличился. Преимущества и возможности компьютерного адаптивного тестирования дают возможность шагнуть ещё дальше. Это заметно по количеству крупномасштабных тестирований (например, GRE, TOEFL, ASVAB), которые стали или становятся адаптивными (Papanastasiou, 2001). Тем не менее, на такой шаг всегда нужно идти с умом, чтобы такая процедура оценивания хорошо интегрировалась в процесс обучения для обеспечения его максимальной эффективности.
Ссылки
1.Bennett, R. E. (1999). Using new technology to improve assessment. RR99-6. Princeton, NJ: Educational Testing Service. 2. Lord, F. M. (1980). Applications of item response theory to practical testing problems. Hillsdale, NJ: Lawrence Erlbaum associates. 3. Meijer, R. R. & Nerling, M. L. (1999). Computerized adaptive testing: Overview and introduction. Applied psychological measurement, 23(3), 187-194. 4. O’Neill, K. (1995). Performance of examinees with disabilities on computer-based academic skills tests. Paper presented at the American educational research association, San Francisco, April, 1995. 5. Papanastasiou, E. C. (2001). A ‘Rearrangement Procedure’ for administering adaptive tests when review options are permitted. (Doctoral dissertation, Michigan State University, 2001). 6. Papanastasiou, E. (2002a). A ‘rearrangement procedure’ for scoring adaptive tests with review options. Paper presented at the National Council of Measurement in Education, New Orleans, LA. 7. Papanastasiou, E. (2002b). Factors that differentiate mathematics students in Cyprus, Hong Kong, and the USA. Educational Research and Evaluation, 8 (1), 129-146. 8. Papanastasiou, E. C. & Ferdig, R. E. (2003, January). Computer use and mathematical literacy. An analysis of existing and potential relationships. Paper presented at the third Mediterranean conference on mathematics education, Athens, Greece, January 3-5, 2003. 9. Parshall, C. G., Spray, J. A., Kalohn, J. C. & Davey, T. (2002). Practical considerations in computer- based testing. NY: Springer. 10. Parshall, C. G., Stewart, R. & Ritter, J. (1996). Innovations: Graphics, sound and alternative response modes. Paper presented at the National Council of Measurement in Education, April 9-11, 1996, New York. 11. The College Board. (2000, April). An overview of computer-based testing. RN-09. 12. Wainer, H. (2000). CATs: Whither and whence. Psicologica, 21(1-2), 121-133. 13. Wise, S. L. & Plake, B. S. (1990). Computer-based testing in higher education. Measurement and evaluation in counseling and development, 23, 3-10.
В статье рассматривается вопрос адаптивного тестирования, как нового вида объективного контроля знаний, умений и навыков обучаемых и одного из способов повышения качества образования. Приводятся примеры диаграмм адаптивного тестирования.
Ключевые слова
КОМПЬЮТЕРНОЕ АДАПТИВНОЕ ТЕСТИРОВАНИЕ, ОСНОВНОЙ ПРИНЦИП АДАПТИВНОГО ТЕСТИРОВАНИЯ, АДАПТИВНОЕ ТЕСТИРОВАНИЕ
Текст научной работы
В наши дни наблюдается повышенный интерес к проблеме компьютерного тестирования как нового вида объективного контроля знаний, умений и навыков обучаемых и одного из способов повышения качества образования. Среди различных подходов к тестированию наибольшее распространение получило адаптивное тестирование.
В связи с этим, в педагогических инновациях появилось отдельное направление — компьютерное тестирование, при котором предъявление тестирования, оценивание результатов обучаемых и выдача им результатов осуществляются с помощью компьютеров.
Использование компьютеризированного адаптивного тестирования существенно расширилось с тех пор, как оно было впервые сформулировано в 1970-х годах. В статье рассматриваются компьютеризированное адаптивное тестирование и выбор вопросов в нем.
Можно выделить три основных различных варианта адаптивных тестов. Но рассматривать все подробно не имеет смысла, так как все варианты состоят из двух основных этапов: отбор вопросов и оценка баллов. Оба повторяются каждый раз, когда вопрос, или набор вопросов, представлен и дан ответ. Первый шаг определяет наиболее подходящий вопрос, или набор вопросов, для управления тестом с учетом того, что в настоящее время известно об уровне успеваемости учащегося. Выбор осуществляется из набора вопросов, который содержит больше вопросов, чем задается любому студенту.
На втором этапе используется ответ на вопрос, на который ранее был дан ответ, для уточнения оценки или оценки ученика. Это позволяет заданным вопросам быть еще более уместным.
Этот цикл продолжается до тех пор, пока не будет задано определенное количество вопросов или пока не будет достигнут определенный показатель точности оценки. Процесс схематически представлен на рисунке 1.
![Адаптивный цикл тестирования.]()
Рисунок 1. Адаптивный цикл тестирования
Адаптивные тесты предназначены для максимизации эффективности измерений или точности результатов теста по отношению к длине теста. Это означает, что адаптивный тест может либо сэкономить время, будучи короче, чем обычный тест с равной точностью, либо улучшить качество оценки, будучи более точным, чем обычный тест равной длины. Учащиеся, которые больше всего выигрывают, — это те, кто находится на высоких или низких уровнях экстремума. Обычно они плохо оценивают обычными тестами, которые, как правило, разработаны, чтобы лучше всего соответствовать среднему студенту.
Ученые разработали и предложили многочисленные процедуры для реализации каждой из основных задач, необходимых для выбора и оценки адаптивного теста. Методы получили широкое распространение, поскольку ни один из них не идеален для всех ситуаций и обстоятельств тестирования. Что работает лучше, вместо этого зависит от уникальных характеристик данной программы тестирования. Содержание теста, форматы вопросов, характеристики учеников и даже субъективные ценности разработчиков теста и пользователей оценки — все это важные соображения. Процесс выбора различных возможностей и выбора наиболее подходящих для конкретной программы тестирования начинается с вопросов, предназначенных для точного определения того, как работает конкретная система компьютерного адаптивного тестирования.
![Двухэтапное многоступенчатое тестирование.]()
Рисунок 2. Двухэтапное многоступенчатое тестирование
Ближайшая аналогия — устный экзамен, где преподаватель последовательно задает вопросы, разбираясь в знаниях слушателя. При этом траектория, по которой обучаемый проходит тесты, индивидуальна. Чтобы полностью понять возможности и ограничения любой адаптивной системы тестирования, необходимо также рассмотреть эти системы, вопросы и алгоритмы оценивания.
Таким образом адаптивное тестирование — мощный инструмент, эффективно распределяющий временя при оценивании группы студентов, так и любых других учащихся.
Список литературы
Цитировать
Главным отличием адаптивного тестирования от классического является динамическое (в реальном времени), а не статическое определение списка вопросов, которые будут заданы тестируемому.
Траектория, по которой обучаемый проходит тесты, индивидуальна. Выбор следующего вопроса определяется индивидуальными особенностями каждого слушателя, а не общими правилами.
Адаптивное тестирование можно сравнить с устным экзаменом, на котором преподаватель последовательно задает индивидуальные вопросы, выясняя уровень знаний слушателя.
Преимущества адаптивного тестирования
1. Точность. Возможность оценить уровень подготовленности каждого испытуемого с минимальной погрешностью.
2. Качество. Измеряется уровень знаний каждого испытуемого по определенным темам.
3. Достоверность. Влияние дополнительных факторов (потеря интереса, отвлечение, утомление, беспокойство) на результаты теста уменьшается, поскольку тестируемые не тратят время и силы на задания, не соответствующие их уровню подготовки (слишком легкие или слишком трудные).
Адаптивное тестирование наиболее эффективно использовать при решении следующих задач
1. Самопроверка слушателей.
2. Быстрое и точное измерение результатов корпоративного обучения.
3. Прогнозирование результатов обучения через предварительное тестирование.
5. Предварительное тестирование с целью разделения учащихся на группы по уровням подготовки.
Пример адаптивного тестирования
Oxford Placement Test — это стандартизированный адаптивный тест для проверки уровня английского языка, который меняет набор вопросов по ходу выполнения теста (степень сложности и число заданий зависят от уровня студента). Тест продолжительностью 40–70 минут проходит в онлайн-формате и включает в себя такие задания, как поиск ошибок в предложениях или заполнение пропусков, выбор правильного варианта из нескольких или определение верности утверждения.
Методология разработки и проведения адаптивного тестирования 1
Разработка вопросов теста
Банк вопросов
Все вопросы, из которых будет составлен индивидуальный список вопросов для каждого участника тестирования. Минимальный размер банка вопросов рекомендуется определять по следующей формуле: банк вопросов = 15 х количество тем (тематических блоков теста). Например, если вопросы теста разделены на 3–5 тем, то рекомендуемый размер банка вопросов — 45–75 вопросов.
Число вопросов в индивидуальном тесте
Число вопросов в индивидуальном тесте определяется общим числом вопросов, задаваемых участнику тестирования. Оптимальное число вопросов теста рекомендуется рассчитывать по формуле: общее число вопросов = 5 х количество тем (тематических блоков теста).
Таким образом, в итоговом тесте участнику по каждой теме задается не менее 5 вопросов. Например, если вопросы теста разделены на 4 темы, то рекомендуемая длительность теста — 20 вопросов. Но не стоит увеличивать объем теста более чем до 20 вопросов, так как в этом случае снижается мотивация обучаемого. Лучше предложить ему несколько раз пройти тест. Это повышает точность оценки слушателя и проще для него самого. Если давать менее 5 вопросов, адаптивному алгоритму может не хватить информации для достаточно достоверного определения уровня знаний по теме.
Типы вопросов:
► с выбором одного правильного варианта ответа;
► с выбором нескольких правильных вариантов ответа;
► с вводом текстового ответа (где ответ — это число, слово, недвусмысленная фраза (словосочетание), возможные для автоматической проверки).
► все варианты ответа также могут быть правильными.
Уровни сложности
Вопросы в банке вопросов ранжируются по единым для всех тем уровням сложности. Количество уровней — не менее 3, оптимально — от 5 до 10. Наличие большого числа уровней сложности (например, 10) более требовательно к калибровке сложности на выборочной группе слушателей, но и обеспечивает более высокую точность итоговой оценки уровня знаний.
Внутри каждой темы (тематического блока) рекомендуется иметь вопросы разного уровня сложности, так как это прямо влияет на вариативность теста и адаптивные возможности технологии.
Внутри каждой темы лучше распределить вопросы группами не менее трех вопросов на каждом уровне. Чем больше вопросов на одном уровне сложности, тем больше вариативность теста, что важно для повторного прохождения или тестирования людей, которые могут помогать друг другу.
Варианты распределения вопросов
► Равномерное распределение — не менее 10 вопросов каждого уровня сложности.
Траектории тестирования
Результаты адаптивного тестирования и их трактовка
Сводные результаты группы
Распределение оценок в группе
Наиболее частые ошибки
Совокупность траекторий участников тестирования с переходами между вопросами и уровнями сложности
Данные результаты полезны для улучшения качества материалов и при построении индивидуальной траектории обучения. Учебную программу можно персонализировать для каждой группы слушателей на основе тех пробелов в знаниях, которые были обнаружены в ходе тестирования. Слушатели могут непосредственно в процессе тестирования провести самопроверку и восполнить выявленные пробелы (постепенно — от простого к сложному).
Коррекция адаптивного теста на основании аналитики
Примеры инструментов для разработки адаптивного тестирования
► Qualtrics ► Typeform Источники
Адаптивное тестирование может строиться на основе широкого множества процедурных моделей (DeWitt, & Weiss, 1974; Larkin, & Weiss, 1974; Weiss, 1974; Weiss, & Betz, 1973). Простой пример тестирования в две стадии приведен на рис. 10-1. В этом гипотетическом тесте все испытуемые проходят тест, состоящий из 10 заданий самой разной степени трудности, с целью определения маршрута дальнейшего обследования. В зависимости от успешности выполнения этого теста-маршрутизатора испытуемому предъявляется один из трех различных по трудности измерительных тестов, каждый из которых состоит из 20 заданий. Таким образом, испытуемый выполняет только 30 заданий, в то время как тест в целом содержит 70 заданий.
![]()
Рис. 10-1. Двустадийное адаптивное тестирование с тремя уровнями измерения. Каждый испытуемый проходит тест-маршрутизатор и один из трех измерительных тестов
Глава 10, Групповое тестирование
![]()
Рис. 10-2. Пирамидальная модель тестирования. Жирной линией показан маршрут обследования одного испытуемого, чьи результаты выполнения заданий приведены в верхней части рисунка
Часть 3. Тестирование способностей
Показатель конкретного испытуемого основывается не только на количестве правильно выполненных заданий, но отражает уровень трудности и другие психометрические характеристики этих заданий. Совокупный тестовый показатель выводится на основе оценок способности, соответствующих каждому выполненному заданию. Эта оценка способности исправляется и уточняется с добавлением каждого нового задания до тех пор, пока не достигается заданная точность измерения. Такие показатели будут сопоставимы у всех лиц, обследованных с помощью комплекта входящих в тест заданий, независимо от специфического набора заданий, предъявленных каждому испытуемому. Существующие на сегодняшний день процедуры конструирования инструмента КАТ можно существенно облегчить за счет использования ряда доступных компьютерных программ, таких как MicroCAГ, распространяемых ASC
Адаптивное тестирование особенно подходит для использования в индивидуализированных программах обучения, упоминавшихся в главе 3. В этих случаях учащиеся проходят учебный предмет в удобном для себя темпе и могут поэтому выполнять
1 Адрес дан в приложении Б. См. также Quan, Park, Sandahl, & Wolfe (1984) и Weiss, & Vale (1987)-
Глава 10. Групповое тестирование
значительно отличающиеся по трудности тестовые задания. Компьютеризованное тестирование позволяет прекращать проверку, как только ответы испытуемого дают достаточно информации для принятия решения об уровне овладения предметом. В настоящее время активно исследуются возможности применения компьютеризованного адаптивного тестирования в различных областях и соответственно разрабатываются технологии КАТ.В качестве одного из примеров можно привести разработанный совместно Службой тестирования в образовании и Советом колледжей компьютеризованный адаптивный тест для распределения поступивших в колледж студентов-первокурсников по группам для изучения английского языка и математики в соответствии с уровнем их подготовки по этим дисциплинам (Smittle, 1990; Ward, Kline, & Flaugher, 1986). Вследствие индивидуализированного подбора заданий этот тест почти не отнимает времени и позволяет сразу же получить оценку. Следовательно, его можно проводить в ходе регистрации поступивших и тут же распределять студентов по курсам или группам соответственно полученным результатам испытаний.
Еще одна важная область применения КАТ — крупномасштабные программы отбора и распределения персонала в промышленности, государственных учреждениях и армии. КАТ особенно хорошо подходит для этих целей, по меньшей мере, по трем причинам: 1) неуклонный рост потока кандидатов, которых необходимо испытать, и в связи с этим предотвращение тестирования очень больших групп, скапливающихся в одно время и в одном месте; 2) необходимость охватить широкий разброс уровня способностей и 3) лучшая защищенность теста, так как каждый кандидат получает разный набор заданий из большого банка заданий, хранящихся в памяти компьютера. Разработке КАТ версии Батареи профессиональной пригодности Вооруженных сил (ASVAB) предшествовало несколько лет поисковых исследований (McBride, & Martin, 1983; Moreno, Wetzel, McBride, & Weiss, 1984; Wiskoff, & Schratz, 1989). Постепенно разрабатываются КАТверсии всех важных групповых тестов, таких как Дифференциальные тесты способностей, 1 описанные в последнем разделе этой главы. Для многих практических приложений, равно как и для имеющих самостоятельное значение исследований природы и источников индивидуальных различий, КАТ дает бесспорные преимущества. Ясное и полезное изложение его перспектив для будущего тестирования можно найти в работе Embretson (1992).
Читайте также:
