105 subscribers
55 photos
10 files
18 links
Download Telegram
У меня есть еще пара тройка заданий из военно-патриотического теста в загашнике.
Но сегодня пятница, и мне кажется на этой неделе кринжа и ужаса уже достаточно.
Поэтому вот вам полезные советы по тому, как выпекать задания матипл чойс, которые мы с Дианой Колесниковой подготовили для нашего курса
👍31
Как разработать тест с нуля

В этот раз рассказываем о 8 этапах разработки теста. Их последовательность условна. И, конечно, не все эти этапы нужны, если вы работаете над небольшим квизом для онлайн-курса. Но вдруг вы уже давно мечатаете создать аналог ЕГЭ? Или тест по измерению чувства юмора?

Ловите новые карточки от меня и Ирины Брун. Много терминов и словечек: конструкт, операционализация, спецификация, апробация, валидизация 😂 Если расшифровки на карточках не хватит, приходите к нам во вторник, 5 декабря, 18:30 мск на вебинар о процессе разработке и о важности спецификации.
4🔥2
И я шкала
🔥3👍2❤‍🔥1
Я думаю, что уже все слышали новость о том, что ученица Алина из Брянска пронесла в школу дробовик и убила как минимум одного человека, помимо себя.
Эта трагедия начинает обрастать интересными для нас подробностями. Сегодня в утреннем эфире дождя рассказали, что Алина за 2 недели до стрельбы "успешно прошла тест на депрессию" (это примерно 11-12 минута эфира).

Вот, подумала я, невероятно яркий и печальный пример важности НОРМАЛЬНОЙ разработки тестов. Если бы школьный психолог использовал валидизированную методику, возможно, общество бы получило маркер, что ученице нужна помощь и поддержка.
К сожалению, у нас очень халатно относятся к качеству тестов и почему-то считают, что 10 вопросов, сделанных на коленке неизвестно кем, измеряют то, что они заявляют. В качестве примера этой мысли вот вам ссылка на департамент труда и соц защиты населения города Москвы, где размещен "тест" (извините, без кавычек тут никак не могу) на депрессию. Обратите внимание на колонку справа страницы: в разделе "о тесте" написан какой-то буллшит о депрессии вместо свидетельств валидности результатов этого теста.
😢3
Как справедливо заметил один из моих подписчиков (и по совместительству друзей) в ссылке на хуевый тест на депрессию департамента труда и соц защиты Москвы есть такая вот фраза:
наш опросник, составленный на основе знаменитой шкалы Бека…


Давайте обсудим, почему она не делает тест менее хуевым и не должна вызывать у нас доверия.

Здесь у нас могут появиться аргументы из двух групп:
1) сам тест Бека хуевый
2) что-то не так с переводом этого теста на русский

1) Сама шкала Бека была разработана давно и довольно хорошо изучена. Например, вот тут можно про нее прочитать: https://www.sciencedirect.com/topics/medicine-and-dentistry/beck-depression-inventory#:~:text=The%20Beck%20Depression%20Inventory%20(BDI,the%20BDI%20is%20also%20available.
У этой шкалы даже есть версия на 13 вопросов, прям как на нашем сайте!

2) Достаточно ли нам этого, чтобы считать этот «тест» на сайте труда и соц защиты не хуевым? НЕТ, не достаточно! Как только любой инструмент измерения (тест или опросник) начинает использоваться в новой культурной среде или на новом языке, нужно убедиться, что измеряемый конструкт остался тем же самым, перевод вопросов корректен и подходит новой целевой аудитории, а также что на эмпирических данных опросник ведет также.

Вот именно аргументов из второй группы нам и не хватает на сайте труда и соц защиты. А без них тест превращается в тыкву!
3🔥3🤗1
ITC Guidelines - Translating and Adapting Tests - v2 3.pdf
697.5 KB
Ну а собственно подробно про то, как надо адаптировать тесты для использования на новом языке или в новой культурной среде можете почитать с Гайдлайнах по адаптации тестов.
Они лежат в открытом доступе.
Пользуйтесь, котики
6👍3🔥2
test-retest pinned a file
test-retest pinned a file
Завтра, 19 декабря, с 18:30 до 20:10 по московскому времени заключительная встреча нашего с Ирой Брун вводного курса о разработке заданий. Будем говорить о технологиях, современных веяниях.

Большую часть вебинара посвятим компьютерному адаптивному тестированию (CAT) и адаптивному обучению (ITS, HEAS), коснемся и технологически усовершенствованных заданий (TEI), и ChatGPT. Впрыгнуть в последний вагон, купив билет, можно здесь.

А выше соответствие этапов разработки заданий и тех самых «современных веяний». Хотя, конечно, некоторые темы исследуются уже больше 50 (!!!) лет — а сегодня они обретают новое звучание.

⭐️
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5
IMG_2167.jpg
174.7 KB
Хотела сегодня поделиться с вами смешными заданиями из теста на знание конституции РФ, а там такой корявый сайт, что не дает тест пройти и выкидывает обратно на главную страницу (ну или может закрыли прохождение уже🤷‍♀️)

Поэтому вот вам тоже смешное, но не про конституцию, а про жизнь
😁3🥴1