Разделы презентаций
- Разное
- Английский язык
- Астрономия
- Алгебра
- Биология
- География
- Геометрия
- Детские презентации
- Информатика
- История
- Литература
- Математика
- Медицина
- Менеджмент
- Музыка
- МХК
- Немецкий язык
- ОБЖ
- Обществознание
- Окружающий мир
- Педагогика
- Русский язык
- Технология
- Физика
- Философия
- Химия
- Шаблоны, картинки для презентаций
- Экология
- Экономика
- Юриспруденция
Критерії якості методу вимірювання
Содержание
- 1. Критерії якості методу вимірювання
- 2. Оцінювання (assessment) це процес оперування (систематизація, аналіз,
- 3. Тестування (testing) це метод вимірювання певних властивостей
- 4. нструмент ехнологіяроцедури ТІП Метод2. Основні категорії вимірювання
- 5. Метод вимірювання – це категорія, яка визначає
- 6. Нормо-орієнтоване вимірювання:Основна задача: розрізнити (диференціювати) екзаменованих між
- 7. Критеріально-орієнтоване вимірювання (домено-орієнтоване вимірювання):Основна задача: встановити абсолютний
- 8. Критерії якості методу вимірювання
- 9. Термін "валідність" (від англійського "valid”) - обґрунтований,
- 10. Валідність - це комплексна характеристика, яка визначається
- 11. Класифікація валідності за функціональною ознакоюВалідність змісту (змістова)Валідність
- 12. Валідність змісту - змістова характеристика тесту, що
- 13. Валідність відповідності - це відповідність результатів вимірювання
- 14. Використання методу відомих груп для валідизації тестуВисока
- 15. Розрахунок найпростішої кореляції між тестом і критерієм
- 16. Використання методу відомих груп для валідизації тестуа
- 17. Використання методу відомих груп для валідизації тестуПри
- 18. Виявлення валідності тесту через обрахунок простої кореляції з використанням F – коефіцієнту Гілфорда
- 19. Надійність - це ступінь стійкості результатів.Надійність методу
- 20. Надійність методу вимірювання– це міра стійкості результатів,
- 21. Під надійністю контрольного завдання розуміють ступінь точності,
- 22. Параметри надійностіНадійність тесту залежить від кількості тестових
- 23. Виміри є об'єктивними, якщо вплив суб'єктивних дій
- 24. Об'єктивність вимірювання вимагає дотримання однакових умов проведення
- 25. Точність методу визначає мінімальну або систематичну похибку,
- 26. Критерії якості методу
- 27. Інструмент вимірювання — це категорія, яка визначає
- 28. Інструмент вимірювання – Тест
- 29. Тест (test) це сукупність тестових завдань
- 30. Класифікація тестів: За рівнем уніфікації (тести стандартизовані,
- 31. Стандартизований тест має комплексну характеристику, яка визначається
- 32. Довжина тесту – кількість тестових завдань, з яких складається тест ТестДовжина400 ТЗ100 ТЗ25 ТЗТочність 5% 10% 20%
- 33. Критерій I Критерій II Критерій IIIКритерій
- 34. “Вимірювання - права рука навчання. Без вимірювання
- 35. Скачать презентанцию
Оцінювання (assessment) це процес оперування (систематизація, аналіз, узагальнення тощо) чисельними показниками, які виміряні відповідно до певних правил.
Слайды и текст этой презентации
Слайд 1Критерії якості методу вимірювання
1. Валідність і надійність тесту.
2.Складність тестового завдання.
3.
Об'єктивність як показник якості тесту.
Слайд 2Оцінювання (assessment) це процес оперування (систематизація, аналіз, узагальнення тощо) чисельними
показниками, які виміряні відповідно до певних правил.
Слайд 3Тестування (testing) це метод вимірювання певних властивостей особи за допомогою
тесту.
Тест (test) це сукупність тестових завдань (item), які підібрані
за певними правилами для вимірювання певної властивості. 
Слайд 5Метод вимірювання – це категорія, яка визначає яким чином здійснюється
визначення показника, що вимірюється.
Методи вимірювання, які розглядатимуться:
метод тестування,
письмові методи
Метод
вимірювання
Слайд 6Нормо-орієнтоване вимірювання:
Основна задача: розрізнити (диференціювати) екзаменованих між собою
Домен: великий; вимірюється
в “ширину”, інформація про загальні риси оволодіння великими доменами
Тестові
завдання: середньої складності Результат: відносний (порівняння із norm-group)
Сфера використання: відбір, ранжування, порівняння індивідуумів між собою, оцінювання програм, порівняння освітніх інституцій
Типи вимірювання
Слайд 7 Критеріально-орієнтоване вимірювання (домено-орієнтоване вимірювання):
Основна задача: встановити абсолютний рівень досягнень індивідуума
(незалежний від інших)
Домен: вузький; вимірюється в “глибину”, інформація про оволодіння
конкретними елементами доменуТестові завдання: складність відповідає складності оцінюваного домену
Результат: абсолютний (порівняння з критерієм, стандартом)
Сфера використання: сертифікація, ліцензування, оцінка мінімальної компетентності
Типи вимірювання
Слайд 9Термін "валідність" (від англійського "valid”) - обґрунтований, дійсний, придатний, той,
що має силу.
Термін "валідність" використовується для загальної характеристики тесту
в аспекті відповідності меті та вимогам оцінювання.Валідність тесту це — “поняття, яке визначає, що тест вимірює та наскільки якісно це здійснюється” (А.Анастазі) .
Валідність
Слайд 10Валідність - це комплексна характеристика, яка визначається як параметрами інструменту
та процедури вимірювання, так і властивостями ознаки, що діагностується.
Валідність методу
- це відповідність того, що вимірюється даним методом, тому, що він повинен вимірювати. Критерій валідності встановлює сферу дійсності, для якої метод дає статистично достовірні результати.
Валідність
Слайд 11Класифікація валідності за функціональною ознакою
Валідність змісту (змістова)
Валідність відповідності
Валідність прогнозу (прогностична)
Валідність
методу
Валідність тестових завдань
Валідність процедури тестування
Валідність процедури оцінювання
Валідність тесту
Слайд 12Валідність змісту -
змістова характеристика тесту, що відображає ступінь упевненості,
що завдання тесту досить повно охоплюють зміст певної сфери знань,
тест точно визначає істотні для цієї діяльності навички, але водночас не перевіряє другорядні для даної теми знання і навички
Слайд 13Валідність відповідності -
це відповідність результатів вимірювання та оцінювання, здобутих
різними методами.
Валідність змісту і відповідності може бути кількісно визначено через
коефіцієнт валідності, що становить собою коефіцієнт кореляції між результатами тестування та результатами інших вимірювань в одній і тій самій групіКоефіцієнт кореляції більший за 0,6 свідчить про валідність тесту
Слайд 14Використання методу відомих груп для валідизації тесту
Висока група за критерієм
– наприклад, найбільш успішні учні за результатами поточного оцінювання
Низька група
за критерієм – учні, чиї оцінки виявилися найнижчимиУчні з середніми показниками в тестуванні участі не беруть
Слайд 16Використання методу відомих груп для валідизації тесту
а – кількість тестованих,
які потрапили до високої групи за тестом і критерієм;
b –
кількість тестованих, які потрапили у високу групу за тестом, але в низьку за критерієм;с – кількість тестованих, які мають найнижчі оцінки за тестом, але високо оцінені за результатами поточного контролю;
d – кількість тестованих, які мають низькі бали за тестом і низькі поточні оцінки
Слайд 17Використання методу відомих груп для валідизації тесту
При повній валідності тесту
елементи b та с таблиці повинні дорівнювати нулю, тобто тест
не повинен давати помилок(навряд чи продемонструє найвищий бал по тесту учень, який має найнижчі поточні оцінки, якщо тест неякісний – такий учень може виявити найкращий результат)
Слайд 18Виявлення валідності тесту через обрахунок простої кореляції з використанням F
– коефіцієнту Гілфорда
Слайд 19Надійність - це ступінь стійкості результатів.
Надійність методу залежить від:
об'єктивності методу
параметрів
засобу вимірювання
стабільності характеристики, що вимірюється.
Коефіцієнт надійності (R) дорівнює коефіцієнту
кореляції між результатами, які отримані однаковим методом за однакових умов і показує, на скільки співпадають результати вимірів. Надійність
Слайд 20Надійність методу вимірювання
– це міра стійкості результатів, що впливає на
точність, з якою можна виміряти ту чи іншу конкретну ознаку.
Перевірка надійності методу стосується насамперед відновлення результатів при повторних вимірюваннях.
Слайд 21Під надійністю контрольного завдання розуміють ступінь точності, з якою може
бути визначена та чи інша ознака. Тобто визначено, наскільки можна
довіряти результатам даного тесту.Про надійність тестів іноді роблять висновки за такою ознакою: якщо в усіх випадках перевірки тесту чи його варіантів виявиться, що учні в розподілі за показниками успішності
займуть ті самі місця, то такий тест можна вважати надійним.
Слайд 22Параметри надійності
Надійність тесту залежить від кількості тестових завдань.
Тому для достатньої
надійності підсумкового контролю тест має містити не менше ніж 40
завдань.
Слайд 23Виміри є об'єктивними, якщо вплив суб'єктивних дій тих, хто вимірює,
мінімальний і результати максимально незалежні від дослідників.
Мінімізація впливу суб'єктивних
факторів, забезпечується стандартизацією умов проведення (процедур) вимірювання, оцінювання та аналізу результатів. Стандартизація умов вимірювання:
об'єктивність проведення вимірювання
об'єктивність обробки даних
об'єктивність інтерпретації результатів
Об’єктивність
Слайд 24Об'єктивність вимірювання вимагає дотримання однакових умов проведення вимірювання. Для цього
стандартизується процес вимірювання шляхом відповідних інструкцій і регламентів (опис як
має бути).Об'єктивність обробки даних стосується фіксації даних, накопичення, їх аналізу та збереження.
Об'єктивність інтерпретації результатів - однаковість інтерпретації одних й тих же самих результатів вимірювання різними екзаменатори.
Об’єктивність
Слайд 25Точність методу визначає мінімальну або систематичну похибку, з якою можна
провести вимірювання даним методом.
З теорії похибок випливає положення:
при усуненні
інших систематичних похибок, коливання результатів вимірювання підпорядковуються статистичним закономірностям. Це дозволяє кількісно розрахувати міру точності та враховувати її надалі.
Точність
Слайд 27Інструмент вимірювання — це категорія, яка визначає засіб за допомогою
якого здійснюється вимірювання.
Наприклад,
при усному опитуванні та письмовій роботі
інструментом вимірювання є білет або структуровані завдання;
при тестуванні - це тест, складений з тестових завдань.Інструмент вимірювання
Слайд 29
Тест (test) це сукупність тестових завдань (item), які підібрані за
певними правилами для вимірювання певної властивості.
Метод тестування передбачає, що:
інструментом вимірювання є тест, складений з тестових завдань,
процедурою вимірювання є тестування,
методом оцінювання є шкалювання.
Тестологія - напрям наукових досліджень у галузі теорії й практики вимірювання та оцінювання якісних характеристик притаманних людині, в якому методом вимірювання є тестування.
Тест. Визначення
Слайд 30 Класифікація тестів:
За рівнем уніфікації (тести стандартизовані, нестандартизовані)
За рівнем впровадження
(національні, навчального закладу, вчительські)
За статусом використання (обов’язкові, пілотні, дослідницькі)
За
співвідношенням із нормами або критеріями (тести досягнень, тести порівняння або тести відбору) За видом тестового завдання (тести з закритими завданнями, тести з відкритими завданнями)
Класифікації
Слайд 31Стандартизований тест має комплексну характеристику, яка визначається властивостями тесту, процедурою
вимірювання та процедурою шкалювання, а також чіткою регламентацією процедури та
логістики процесу тестуванняТест
Слайд 32Довжина тесту – кількість тестових завдань, з яких складається тест
Тест
Довжина
400 ТЗ
100 ТЗ
25 ТЗ
Точність
5%
10%
20%
Слайд 33Критерій I
Критерій II
Критерій III
Критерій IV
Критерій V
“результати об’єктивні”
– валідний тест
“результати завищені -
дії з боку викладачів
або студентів” “результати завищені”
“результати занижені”
“результати занижені - порушення умов
тестування”
Критерії кількісного аналізу
Валідність результатів
Слайд 34“Вимірювання - права рука навчання.
Без вимірювання не може бути
оцінювання.
Без оцінювання не може виникнути зворотний зв’язок з навчанням.
Без зворотнього зв’язку не має інформації про досягнуті результати.
Без інформації про досягнуті результати не може виникнути систематичного навчання.”
1973, Парнелл
