Завдання множинного вибору

Завдання множинного вибору або об'єктивна відповідь — це форма об'єктивної оцінки[en], в якій респондентам пропонується вибрати тільки правильні відповіді з запропонованого переліку.[1] Формат з множинним вибором найчастіше використовується у навчальному тестуванні, дослідженні ринку та на виборах, коли людина вибирає між кількома кандидатами, партіями або політиками.

Хоча Едвард Лі Торндайк розробив перший науковий підхід до тестування студентів, саме його помічник Бенджамін Д. Вуд[en] розробив тест на множинний вибір.[2] Популярність завдань множинного вибору збільшилося в середині 20-го століття, коли були розроблені сканери та машини для обробки даних для перевірки результатів. Крістофер П. Соле створив перший тест, що вирішує завдання множинного вибору для комп'ютерів на апараті Sharp Mz 80 в 1982 році. Він був розроблений для допомоги в інженерії сільського господарства, де латинські назви рослин було важко зрозуміти і писати, і тому було розроблено для допомоги людям з проблемою дислексією.[джерело?] Перший повний іспит був розроблений в школі Сент-Едвардс в Ромсі[en], Хантс.[3]

СтруктураРедагувати

Елементи множинного вибору складаються з стовбура і декількох альтернативних відповідей, серед яких правильна («ключ») відповідь і один або кілька неправильних («дистрактор») відповідей. Стовбур є початковою частиною елемента, який представляє досліджувальний елемент як проблему, що підлягає вирішенню, запитання респондента або неповну заяву, яка має бути заповнена, а також будь-яку іншу відповідну інформацію. Варіантами є можливі відповіді, з яких випробуваний може вибирати, правильні відповіді називаються ключами, а неправильні відповіді називають дистракторами.[4] Тільки одна відповідь може бути вказана як правильна. Це відрізняється від тесту, який може мати кілька правильних відповідей.

Як правило, правильна відповідь заробляє задану кількість балів на загальну оцінку, а неправильна відповідь нічого не заробляє. Проте, комп'ютерні тести можуть також присуджувати частковий кредит на запитання без відповіді або карати учнів за неправильні відповіді, щоб перешкодити вгадуванню правильної відповіді. Наприклад, комп'ютерні тести SAT видаляють чверть балу з рахунку тестувальників за неправильну відповідь.

Для додаткових елементів, таких як прикладний елемент знань, стовбур може складатися з декількох частин. Стовбур може включати в себе розширений або допоміжний матеріал, такий як сценарій[en], кейс-аналіз, графік, таблиця або докладний опис, який має кілька елементів до нього. Все може бути включене до тих пір, поки це необхідно для забезпечення максимальної достовірності та автентичності елементу. Стовбур закінчується питанням, що пояснюється тим, як респондент повинен відповісти. У медичній сфері в питаннях з множинним вибором, проблема може бути сформульована в такому вигляді: «Який найбільш вірогідний діагноз?» або «Який з патогенів є найбільш вірогідною причиною?» на прикладі, який раніше був представлений.

Елементи тесту з множинним вибором часто називають «питаннями», але це неправильне визначення, оскільки багато пунктів не формулюються як питання. Наприклад, вони можуть бути представлені як неповні висловлювання, аналогії або математичні рівняння. Таким чином, більш загальний термін «предмет» є більш відповідним означенням. Елементи зберігаються в банку елементів[en].

ПрикладиРедагувати

Насправді, питання множинного вибору слід задати як «стовбур», з правдоподібними варіантами, наприклад: Якщо a=1 та b=2, скільки буде a+b?

  1. 12
  2. 3
  3. 4
  4. 10

Рівняння  , потрібно розв'язати відносно x.

  1. 4
  2. 10
  3. 0.5
  4. 1.5
  5. 8

Місто, відоме як «ІТ-столиця» Індії це

  1. Бангалор
  2. Мумбай
  3. Мехіко
  4. Гідерабад

Правильні відповіді B, C та A відповідно.

Добре написане питання з декількома виборами дозволяє уникнути явно неправильних або дурних дистракторів (наприклад, Мехіко в наведеному вище прикладі), так що питання має сенс, коли читається як з кожним з дистракторів, так і з правильною відповіддю.

Більш складним і добре написаним питанням множинного вибору буде такий: Розгляньте наступне:

  1. Дошка для шахів розміром вісім на вісім
  2. Дошка для шахів розміром вісім на вісім з двома видаленими протилежними кутами
  3. Дошка для шахів розміром вісім на вісім з усіма чотирма видаленими кутами

Яка з них може бути викладена доміно з формою 2:1 (щоб не було перекриття або пробілів, і кожне доміно повинно знаходитись на дошці)?

  1. Тільки I
  2. Тільки II
  3. Тільки I та II
  4. Тільки I та III
  5. I, II, та III

ПеревагиРедагувати

Існує декілька переваг тестів з множинним вибором. Якщо автори статей добре підготовлені і якість гарантовано, це може бути дуже ефективною методикою оцінки.[5] Якщо учні проінструктовані про те, як працює елемент тестування та міфи навколо тестів, вони будуть краще виконувати завдання.[6] На багатьох оцінках, було показано, що надійність поліпшується з більшою кількістю елементів присутніх на тестуванні, і з хорошим відбором зразків і доглядом за конкретною справою, загальна надійність тесту може бути додатково збільшена.[7]

Для тестування задач множинного вибору часто потрібно менше часу для адміністрування певної кількості матеріалу, ніж на тести, що вимагають письмових відповідей.

Питання множинного вибору піддаються розробці об'єктивних оцінювальних предметів, але без підготовки автора питання можуть мати суб'єктивний характер. Оскільки цей стиль тестування не вимагає від вчителя інтерпретувати відповіді, тестувальники оцінюються виключно за їхніми виборами, створюючи меншу ймовірність упередженості вчителів[en] у результатах.[8] Фактори, які не мають відношення до оцінюваного матеріалу (наприклад, почерк і ясність подання), не вступають у гру в оцінці з множинним вибором, і тому кандидат оцінюється виключно на основі їх знань з даної теми. Нарешті, якщо учасники тесту знають про те, як використовувати листи відповідей або онлайн-галочки, їх відповіді можна роз'яснити правильно. В цілому, тести з множинним вибором є найсильнішими предикторами загальної продуктивності студентів у порівнянні з іншими формами оцінювання, такими як участь у класі, екзамени, письмові завдання та симуляційні ігри.[9]

НедолікиРедагувати

Найбільш серйозним недоліком є обмежені типи знань, які можна оцінити за допомогою тестів з множинним вибором. Тести з множинним вибором найкраще пристосовані для тестування чітко визначених або низьких навичок. Навички розв'язування проблем і вищого рівня міркувань краще оцінюються за допомогою коротких відповідей і тестів або есе. Проте часто вибирають тести з множинним вибором не через тип оцінюваних знань, а тому, що вони є більш доступними для тестування великої кількості студентів. Особливо це стосується Сполучених Штатів та Індії, де тестування з множинний вибір є кращою формою тестування на високі ставки, і розмір вибірки тестувальників є великим відповідно.

Іншим недоліком тестів з множинним вибором є можлива неоднозначність в інтерпретації досліджуваного предмета. Неможливість інтерпретувати інформацію так, як це запланував виробник тесту може призвести до «неправильної» відповіді, навіть якщо відповідь людини, яка проходить тест є потенційно правильною. Термін «множинне припущення» використовується для опису цього сценарію, оскільки люди, що беруть участь у тестуванні можуть спробувати вгадати, а не визначити правильну відповідь. Тест "Анонімний відгук"[en] дозволяє учаснику тесту зробити відповідь на користь своєї точки зору та потенційно отримати очікуваний результат.

Крім того, навіть якщо студенти мають певні знання з галузі, вони не отримують переваг за знання цієї інформації, якщо вони вибирають неправильну відповідь, а предмет розбивається дихотомічно. Проте, тести анонімного відгуку можуть дозволити випробуваному продемонструвати часткове розуміння предмета і отримати частковий результат. Крім того, якщо буде створено більше запитань щодо конкретної предметної області або тем, та буде запропоновано створити більший досліджуваний зразок, то статистично їхній рівень знань для цієї теми буде більш точно відображений у кількості правильних відповідей і кінцевих результатів.

Іншим недоліком іспитів із множинним вибором є те, що студент, який не в змозі відповісти на конкретне питання, може просто вибрати випадкову відповідь і мати шанс отримати оцінку за нього. Якщо випадково відгадувати відповідь, то, як правило, 25 % шансів отримати правильну відповідь на запитання з чотирьох відповідей. Загальноприйнята практика для студентів, які не мають часу, щоб дати відповіді на всі питання що залишилися, дати випадкові відповіді в надії, що вони отримають принаймні деякі бали за них. Багато іспитів, таких як Австралійський конкурс математики[en] та SAT, мають системи для того, щоб запобігти цьому, в конкретному випадку, роблячи менш корисним вибрати випадкову відповідь, ніж не відповісти взагалі.

Іншою системою заперечення наслідків випадкового вибору є скоринг формули, в якому оцінка пропорційно зменшується на основі кількості неправильних відповідей і кількості можливих варіантів. У цьому методі оцінка зменшується на кількість неправильних відповідей, поділених на середнє число можливих відповідей на всі запитання, w/(c — 1) де w це кількість помилкових відповідей на тесті і c це середня кількість можливих варіантів вибору для всіх питань на тесті.[10] Всі іспити, отримані за допомогою трипараметричної моделі теорії відповіді[en], також враховують припущення. Це, як правило, не є великою проблемою, більше того, оскільки шанси студента отримувати значні оцінки шляхом вгадування дуже низькі, коли доступні чотири або більше виборів.

Крім того, важливо відзначити, що питання, сформульовані неоднозначно, можуть заплутати учасників тестування. Загальновизнано, що питання множинного вибору дозволяють лише одну відповідь, де одна відповідь може інкапсулювати набір попередніх варіантів. Однак, деякі творці тесту не знають про це і можуть очікувати, що учень вибере кілька відповідей, не отримавши явного дозволу, або надавши опції завершення інкапсуляції.

Критики, філософ і пропагандист освіти Жак Дерріда, сказав, що, хоча попит на дозування і перевірку базових знань є дійсним, є й інші засоби реагувати на цю потребу, ніж вдаватися до шпаргалок.[11]

Незважаючи на те, що інколи цей метод оскаржується, формат залишається популярним завдяки його корисності, надійності та економічності.[джерело?]

Відповіді, що змінюютьсяРедагувати

Теорія про те, що студенти повинні довіряти своїм першим інстинктам і залишатися з їхньою початковою відповіддю на тесті з множинним вибором, є міфом, який варто розвіяти. Дослідники виявили, що, хоча деякі люди вважають, що зміна відповідей є поганою, вона, як правило, призводить до вищої оцінки. Дані за двадцятьма окремими дослідженнями показують, що відсоток «правильних на неправильні» змін становить 20,2 %, тоді як відсоток «неправильних на правильні» становить 57,8 %, що майже втричі перевищує попередній показник.[12] Зміна з «правильної на неправильну» може бути більш болючою і запам'ятовується надовго (ефект фон Ресторф), але, мабуть, хороша ідея змінити відповідь після додаткового роздуму, що вказує на кращий вибір. Насправді, перша увага людини до конкретної відповіді цілком може випливати з поверхневої правдоподібності, яку автор тесту навмисно вбудував у дистрактор (або неправильний вибір відповідей). Автори тестових завдань доручені зробити дистрактори правдоподібними, але явно неправильними. Привернення уваги тестувальників до дистрактора часто є реакцією, яка, ймовірно, має бути переглянута у світлі ретельного розгляду кожного вибору відповіді. Деякі дослідники, які беруть участь у тестуванні, можуть мати точні перші враження, щодо конкретного елемента тестування, але це не означає, що всі дослідники повинні довіряти першому інстинкту.

АвтоматизаціяРедагувати

Знайти додаткову інформацію щодо автоматизування завдань для множинного вибору можна використовуючи Питально-відповідна система[13]

Корисні тести на вибірРедагувати

Див. такожРедагувати

ПосиланняРедагувати

  1. Визначення багатофункціонального вибору. www.merriam-webster.com. Архів оригіналу за 29 жовтня 2016. Процитовано 24 лютого 2019. 
  2. Комунікації Еммі, 1973, с. 36.
  3. Витоки та цілі задач множинного вибору [Архівовано 21 березня 2016 у Wayback Machine.], Державний університет Сан-Франциско, доступ від 2016-04-02
  4. Kehoe, Jerard (1995). Написання пунктів тестування з множинним вибором [Архівовано 2 грудня 2017 у Wayback Machine.] Практична оцінка та дослідження, 4(9). Отримано в Лютому 12, 2008.
  5. Посібник з написання тестів [Архівовано 29 вересня 2007 у Wayback Machine.] за Національною радою медичних експертів
  6. Бекерт, Л., Вілкінсон, Т. Дж., та Сеінсбурі, Р. (2003). Навчальний та екзаменаційний курс, що базується на потребах, підвищує продуктивність студентів Медична освіта 37 (5), 424—428. DOI:10.1046/j.1365-2923.2003.01499.x
  7. Стівен М Даунінг (2004) Надійність: на відтворюваність даних оцінки, Медична освіта 38 (9), 1006—1012. DOI:10.1111/j.1365-2929.2004.01932.x
  8. ДеПальма, Ентоні (1 Листопад 1990). Поправки, внесені під час вступних тестів до коледжу. New York Times. Архів оригіналу за 17 квітня 2017. Процитовано 22 Серпень 2012. 
  9. Бонтіс, Н., Харді, Т., & Серенко, А. (2009). Методи оцінювання навичок та знань у класі бізнес-стратегії [Архівовано 9 серпня 2017 у Wayback Machine.] Міжнародний журнал викладання і прикладів, 2, 2, 162—180.
  10. Архівна копія. Архів оригіналу за 21 липня 2011. Процитовано 20 травня 2011. 
  11. Жак Дерріда (1990) pp.334-5 Ще раз з верху: права на філософію, інтерв'ю з Робертом Маккгілорі для Ліберасьйон, Листопад 15, 1990, опубліковано в Points (1995).
  12. Бенджамін, Л. Т., Кевелл, Т. А., & Шаленергер, В. Р. (1984). Залишок з початковими відповідями на об'єктивні тести: це міф? Вчення психології, 11, 133—141.
  13. «Різноманітні системи відповіді на питання: бачачи в синтезі [Архівовано 1 лютого 2016 у Wayback Machine.]», Mittal et al., IJIIDS, 5(2), 119—142, 2011.

ДжерелаРедагувати

  • Комунікації Еммі (Травень 1973). Алькада. Комунікації Еммі. ISSN 1535-993X. Архів оригіналу за 30 вересня 2020. Процитовано 24 лютого 2019.