Способы установления валидности методики
Чаще всего понятие «валидность» обсуждается в контексте конкретных методик или экспериментов. При этом может быть поставлен вопрос и о валидности определенного метода в целом (например, метода тестирования или ассессмент центра). Подобные исследования проводятся с помощью мета-анализа.
Существуют три основных способа установления валидности методики.
I. Оценка содержательной валидности.
Содержательная валидность — степень соответствия содержания заданий методики той реальной деятельности, в которой проявляется измеряемое в методике свойство. Частным случаем содержательной валидности является так называемая очевидная (лицевая или фейс) валидность — степень соответствия методики ожиданиям оцениваемых. Для большинства методик считается важным, чтобы для участника оценки была очевидна связь между содержанием процедуры оценки и той реальной деятельностью, которая является объектом оценки (профессиональная, учебная, семейная и т. п.).
- II. Оценка конструктной валидности.
Конструктная валидность — это степень обоснованности того, что методика действительно измеряет заданные и при этом научно обоснованные конструкты. Существуют, как минимум, две стратегии установления конструктной валидности.
Подход первый — «конвергентная валидизация» — это проверка ожидаемой связи результатов конкретной методики с показателями других методик, измеряющих сходные характеристики. Например, если для измерения какой-либо черты существует несколько методик, целесообразным было бы провести эксперименты по хотя бы двум, и тогда при обнаружении высокой положительной корреляции их результатов между собой можно говорить о валидности. Основной целью конвергентной валидизации является определение того, будут ли оценки теста варьироваться в соответствии с ожиданиями.
Подход второй — . Проверка валидности здесь заключается в том, что тест не должен измерять никакой черты, с которой он теоретически и не должен быть связан.
- III. Оценка критериальной валидности.
Критериальная валидность — это определенная статистическими методами степень соответствия результатов методики и определенных заранее внешних критериев. В качестве подобных критериев могут выступать:
- независимые от результатов методики непосредственные меры исследуемого качества (такие как уровень достижения в какой-либо деятельности, степень развития способности, выраженность определенного свойства личности и т. д.),
- показатели социально- или оргазизационно-значимых результатов деятельности (ключевые показатели эффективности (КПЭ или KPI), успеваемость, устойчивость семейных отношений и т. п.)
Одним из видов критериальной валидности является т. н. «прогностическая» валидность. Этот вид валидности используется, когда методика призвана давать определенный прогноз поведения человека. Соответственно, если прогноз оправдывается с течением времени, это говорит о том, что методика является прогностически валидной.
Профессиональные разработчики методик должны обосновывать все перечисленные виды валидности и вести постоянный сбор свидетельств в пользу валидности их инструментов.
4 типа внешних критериев:
- критерии исполнения (в их число могут входить такие, как количество выполненной работы, успеваемость, время, затраченное на обучение, темп роста квалификации и т. п.);
- субъективные критерии (они включают различные виды ответов, которые отражают отношение человека к чему-либо или к кому-либо, его мнение, взгляды, предпочтения; обычно субъективные критерии получают с помощью интервью, опросников, анкет);
- физиологические критерии (они используются при изучении влияния окружающей среды и других ситуационных переменных на организм и психику человека; замеряется частота пульса, давление крови, электросопротивление кожи, симптомы утомления и т.д.);
- критерии случайностей (применяются, когда цель исследования касается, например, проблемы отбора для работы таких лиц, которые менее подвержены несчастным случаям).
Виды валидности методов исследования
Выбор методов научного исследования зависит от ряда фактов: области наук (гуманитарные или прикладные), необходимость проведения анализа с расчетной частью или простое сопоставление фактов, наличие конкретных данных для анализа и пр.
Следует отметить, что в одном исследовании выбранный метод может быть валидным, а в ином – вовсе неэффективен. Поэтому валидность выбранной методики следует оценивать в рамках конкретной научной работы, а не в сравнении с иными исследованиями.
В науке выделяют несколько разновидностей валидности методов исследования:
Виды валидности
Теоретическая валидность.
Данный вид определяется сопоставлением показателей, рассчитанных с помощью выбранной методики, с аналогичными показателями, рассчитанными по другому методу
Важно, чтобы рассчитанные параметры были теоретически зависимы, то есть оценивали один и тот же предмет, учитывали одни и те же факторы или схожие факторы влияния, демонстрировали теоретическую зависимость (то есть имели принадлежность к конкретному объекту или суждению)
Этот показатель определяют с помощью корреляции одно и того же показателя или свойства, рассчитываемого с помощью разных методов исследования
При этом важно соблюдение: обе методики должны быть связаны с одной и той же гипотезой или теорией
Эмпирическая валидность.
Данный критерий рассчитывается или проявляется благодаря действию опытно-логического метода исследования. В частности, он находит отражение на реакции, мышлении, эмоциях, поведении испытуемых объектов. Данный способ применим больше в психологической отрасли, когда требуется оценить реакцию или психологическое состояние человека в конкретной ситуации.
Эмпирическая валидность методов исследования будет выше тогда, когда выбранная методика продемонстрирует тот факт, что полученные данные соответствуют реальным данным испытуемого, то есть во время проведения «чистого» или «естественного» эксперимента: когда поведение объекта в рамках исследования будет полностью совпадать с поведением в реальной жизни.
Возникли сложности?
Нужна помощь преподавателя?
Мы всегда рады Вам помочь!
дипломные магистерские диссертации
Внешняя валидность.
Данный критерий имеет сходства с эмпирической валидность
Его особенностью является то, что здесь важно установить связь между конкретными параметрами выбранного метода исследования с внешними проявлениями испытуемого (поведением) в реальной жизни
Внутренняя валидность.
Этот показатель проявляется в том, что выбранная методика позволяет достичь поставленной цели исследования, доказывает или опровергает эффективность выдвинутой гипотезы. Фактически, внутренняя валидность демонстрирует соответствие методики исследования его содержанию. Валидность выбранного метода выше тогда, когда он показывает, что все коэффициенты и действия измеряют именно то, что требуется, связывая эти проявления с внешними признаками проблемы (ее симптомами).
Поджелудочная железа проблемы : симптомы и лечение
Поджелудочная железа имеет огромное значение для слаженной работы всего организма. Ее можно назвать дирижером, управляющим сложным оркестром — пищеварительной и эндокринной системами.
Строение поджелудочной железы и ее основные функции
Личная информация
Деятельность
скрыта или не указана
Можно редактировать:
да
Обязательно к заполнению:
нет
Можно скрыть настройками приватности:
да
Интересы
скрыты или не указаны
Можно редактировать:
да
Обязательно к заполнению:
нет
Можно скрыть настройками приватности:
да
Любимая музыка
скрыта или не указана
Можно редактировать:
да
Обязательно к заполнению:
нет
Можно скрыть настройками приватности:
да
Любимые фильмы
скрыты или не указаны
Можно редактировать:
да
Обязательно к заполнению:
нет
Можно скрыть настройками приватности:
да
Любимые телешоу
скрыты или не указаны
Можно редактировать:
да
Обязательно к заполнению:
нет
Можно скрыть настройками приватности:
да
Любимые книги
скрыты или не указаны
Можно редактировать:
да
Обязательно к заполнению:
нет
Можно скрыть настройками приватности:
да
Любимые игры
скрыты или не указаны
Можно редактировать:
да
Обязательно к заполнению:
нет
Можно скрыть настройками приватности:
да
Любимые цитаты
скрыты или не указаны
Можно редактировать:
да
Обязательно к заполнению:
нет
Можно скрыть настройками приватности:
да
Валидатор — это…
Так же, как и с проверкой грамотности языка, HTML-код можно проверять вручную — своими глазами и мозгами, а можно пользоваться и автоматическими помощниками. Это может быть отдельный целостный сервис, а может быть дополнение к браузеру. Первое лучше. Инструменты валидации HTML-кода онлайн облегчают жизнь разработчика, которому не нужно самому вычислять, например, парность скобок.
Как пользоваться валидатором
Рассказываем на примере «родного» валидатора W3C. Этот валидатор используется потому, что его сделали авторы правил, которым должен соответствовать код. Вы можете пройти по ссылке и провести валидацию кода на своём любимом сайте. Будет интересно.
За вами выбор способа проверки. Можно проверять код по ссылке, можно загрузить в сервис HTML-файл, а можно фрагмент кода. В третьем варианте как раз и идёт речь о написанном в окне сервиса коде или скопированной части из разметки всей страницы.
Цепочка действий в два шага. Первый — предоставить исходный код, а второй — нажать на кнопку проверки.
Вы можете пойти дальше и задать дополнительные параметры валидации. Они нужны, чтобы структурировать и детализировать результаты.
Интерпретация результатов валидации
Инструмент валидации оценивает синтаксис, находит синтаксические ошибки типа пропущенных символов и ошибочных тегов и т.д. И отлавливает одну из частых ошибок вложенности тегов.
Часто в результате сервисы валидации разметки, как и компиляторы в разработке, выдают список, разделённый на предупреждения и ошибки. Разница в критичности. Ошибки с максимальной вероятностью могут создать проблемы в работе кода. Это опечатки (да, техника любит точность), лишние или недостающие знаки. А вот к предупреждениям относятся неточности, которые с минимальной вероятностью навредят работе страницы, но не соответствуют стандартам. Это избыточный код, бессмысленные элементы и другие «помарки».
Так выглядит результат валидации HTML-кода на очень простой странице, созданной за пару часов в конструкторе сайтов.
Ошибки и предупреждения собраны в список. В каждом элементе списка указаны значение, атрибут и элемент, которые не устроили валидатор, а также приведена цитата кода с ошибкой.
Сами валидаторы могут ошибаться. То, что не пропускает валидатор, может быть корректно обработано браузером. Так что не обязательно исправлять абсолютно все ошибки в своей разметке
Обращать внимание и уделять время проверке надо при серьёзных ошибках, которые мешают корректной работе сайта и отображению страниц
Подробнее о валидаторе, правилах построения HTML-разметки, а также другие интересные и важные вещи мы разбираем на интенсивных курсах.
Валидность методики это
Валидность методики определяет соответствие того, что изучается данной методикой, тому для изучения чего именно она предназначена.
Например, если психологическая методика, которая основана на осведомленном самоотчете, назначена для исследования некого качества личности, такого качества, которое не может быть верно, оцененным самим человеком, то такая методика не будет валидной.
В большинстве случаев ответы, которые дает испытуемый на вопросы о наличии или отсутствии развитости в нем этого качества, может выражать то, как сам испытуемый воспринимает себя, или каким бы ему хотелось быть в глазах других людей.
Валидность также является основным требованием к психологической методике изучения психологических конструктов. Существует масса разных видов данного критерия, и нет пока единственного мнения о том, как правильно назвать эти виды и неизвестно каким именно видам методика обязана соответствовать. Если же методика оказывается невалидной внешне или внутренне, не рекомендуется ее использовать. Существуют два подхода к валидизации методики.
Теоретический подход выявляется в том, чтобы показать насколько действительно методика измеряет именно то качество, которое, как придумал исследователь, и обязана измерять. Это доказывается через составление с родственными показателями и теми, где связей не могло бы быть. Поэтому для подтверждения теоретического валидного критерия нужно определить степень связей с родственной методикой, имеется в виду конвергентный критерий и отсутствие такой связи с методиками, которые имеют иную теоретическую базу (дискриминантная валидность).
Оценивание валидности методики может быть количественной или качественной. За прагматическим подходом оценивается эффективность и практическая значимость методики, и для ее проведения используется независимый критерий извне, как показатель встречаемости данного качества в повседневной жизни. Таким критерием, например, может быть успеваемость (для методик на достижения, тестов на интеллект), субъективные оценки (для личностных методик), специфические способности, рисование, моделирование (для методик специальных особенностей).
Для доказательства валидности внешних критериев, выделяется четыре типа: критерии исполнения – это критерии такие, как количество выполненных заданий, время, потраченное на обучение; субъективные критерии получают вместе с опросниками, интервью или анкетами; физиологические – частота пульса, давление, физические симптомы; критерии случайности – используются, когда к цели имеет касательство или влияние определенного случая или обстоятельств.
При выборе методики исследования имеет теоретическое и практическое значение определение охвата изучаемых характеристик, как важной составляющей валидности. Информация, которая содержится в названии методики практически всегда не является достаточной для суждения об области ее применения
Это просто имя методики, но под ним всегда кроется еще много чего. Хорошим примером будет методика корректурной пробы. Здесь в сферу изучаемых свойств включаются концентрация внимания, устойчивость и психомоторная скорость процессов. Такая методика дает оценку выраженности этих качеств в личности, хорошо соотноситься со значениями, полученными из других методов и обладает хорошей валидностью. Вместе с тем полученные в результате проведения корректурной пробы значения подвержены большему влиянию других факторов, относительно которых методика будет неспецифичной. Если применить корректурную пробу, чтобы измерить их, то валидность будет невысокая. Выходит,что определяя область применения методики, валидный критерий отображает уровень обоснованности результатов исследования. При небольшом количестве сопровождающих факторов, которые имеют влияние на результаты, достоверность оценок, полученных в методике будет выше. Еще достоверность результатов определяется с помощью набора измеряемых свойств, их важностью при осуществлении диагностики сложной деятельности, существенностью отображения в материале методики предмета измерения. Например, для удовлетворения требований достоверности и надежности, методика, назначенная на профотбор, должна иметь анализ большого круга различных показателей, которые наиболее важные при достижении успеха в профессии.
Клуб Здорового Сознания
Внешняя валидность (англ. external validity) — вид валидности, определяющий то, насколько результаты конкретного исследования можно распространить на весь класс подобных ситуаций/явлений/объектов. Данное понятие можно рассматривать как междисциплинарное: оно широко применяется в экспериментальной психологии, а также в других сферах науки.
Общие сведения
Внешняя валидность определяет то, в какой мере результаты, полученные в эксперименте, могут соответствовать тому типу жизненной ситуации, которая была исследована, и то, насколько возможно обобщить эти результаты на все подобные жизненные ситуации. Например, критику психологов-экспериментаторов в том, что о студентах-второкурсниках и белых крысах они знают очень много, а обо всём остальном — очень мало, можно рассматривать как критику внешней валидности.
Как и в отношении любой другой валидности, о внешней валидности в исследовании, вероятно, невозможно сказать, что она абсолютно соблюдена, можно указать только на её нарушение.
Абсолютным соблюдение внешней валидности считалось бы тогда, когда результаты исследования можно обобщить на любые популяции при любых условиях и в любое время, поэтому учёные говорят не о соблюдении либо несоблюдении внешней валидности, а о степени её соблюдения.
Критерии внешней валидности
Чтобы исследование обладало наивысшей степенью валидности, должна существовать возможность генерализации его результатов на
- другие популяции,
- другие условия,
- другое время.
Пример нарушения внешней валидности
Исследование Лоренса Колберга, посвящённое изучению нравственного развития детей, было подвергнуто критике за низкую степень внешней валидности. В 1963 году Колберг предложил мальчикам-подросткам разрешить различные коротко сформулированные дилеммы. На основании полученных ответов он разработал теорию о шести стадиях морального развития.
Критика внешней валидности этого исследования в частности состояла в том, что учёный не учитывал половых различий в особенностях мышления способах принятия моральных решений и, следовательно, неправомерно генерализовал свою модель на представителей обоих полов.
Колберг также исходил из предпосылки о том, что существуют некие «универсальные принципы справедливости и соблюдения прав личности», однако он не учёл межкультурных различий, следовательно, выводы, которые он сделал, не могут восприниматься как универсальные.
Соблюдение внешней валидности
Чтобы увеличить степень внешней валидности, в исследованиях могут не ограничиваться лишь экспериментальным методом, но также использовать и другие — например, наблюдение, межкультурные исследования и т. д.
При современном научном подходе в психологии соблюдение внешней валидности в исследованиях играет ведущую роль, так как наиболее ценным считается создание общих теорий, моделей и алгоритмов, применимых к психике в целом, независимо от контекста, — то есть моделей, обладающих крайне широкими предсказательными возможностями; поэтому исследования, результаты, которых можно применить только к какой-то определённой ограниченной ситуации, обладают нисходящей ценностью.
Основные виды: операциональная и конструктная
Позволяют оценить содержательное планирование исследования.
Операциональная валидность показывает соответствие методик и экспериментального плана проверяемой гипотезе. Определяет степень соответствия исследуемых утверждений теоретическим положениям, лежащим в основе организации и проведения данного эксперимента. Ее оценка связана с удачностью перехода от формулирования гипотез к выбору методики.
Конструктная валидность включает в себя поиск факторов, которые объясняют поведение при выполнении теста. Связана с теоретическим конструктом самим по себе. Является частью операциональной валидности.
В первую очередь нужно насколько можно полно описать конструкт, который будет измеряться. Это делается при помощи формулирования гипотез о нем, которые предписывают, с чем он может коррелировать, а с чем нет. Потом эти гипотезы проверяются.
Можно ли счастливо выйти замуж после 40 и как это сделать: все секреты успешного замужества
Специфика и задачи психологического эксперимента
Эксперимент в психологии проводится с целью получить новые научные сведения путем исследования жизнедеятельности испытуемого.
Специфика состоит в том, что:
- о деятельности психики можно получить сведения, лишь основываясь на ее проявлениях (например, в виде определенного поведения), ибо как конструкт ее нельзя объективно наблюдать;
- невозможно выделить какой-то один из психических процессов, изучая их, так как воздействие происходит всегда на психику в целом;
- происходит активное взаимодействие между испытуемым и экспериментатором (в проведении исследований с людьми и, например, с приматами), что делает необходимым инструктаж (для более точного понимания требований).
В эксперименте выделяют 3 вида переменных:
- независимая;
- зависимая;
- дополнительные (внешние).
Общей задачей психологического эксперимента является установление наличия связей между ними.
Понятие валидности является здесь краеугольным камнем. Она дает некоторую уверенность ученым в том, что они измерили то, что хотели. Предпринимая множество мер для соблюдения всех ее видов, все равно невозможно быть абсолютно уверенным в следовании им до конца ввиду недостижимости безупречного эксперимента.
Психометрические свойства методик психодиагностики
К ним относятся надежность, валидность и репрезентативность.
Надежность методики – это количественно-статистический показатель устойчивости результатов, который измеряется при помощи различных коэффициентов корреляции. Он, однако, не отвечает на вопрос, какое психическое свойство измеряется.
Такую информацию можно узнать, изучив показатель валидности
Он также измеряется при помощи коэффициентов корреляции, только принимается во внимание большее количество теоретических и практических соображений
В психологии валидность — это соответствие поставленным задачам разработанных методик и результатов их исследования.
Ее важная особенность – невозможность разового установления и использования этого доказательства конечным аргументом «за» качество методики или эксперимента. Рассматривая соответствие результатов исследования поставленным задачам, можно судить о степени валидности. Но она не измеряется ни в каких условных единицах.
Проверку репрезентативности часто сводят к нормальному распределению тестовых баллов. Но это можно считать ее частным случаем, достаточным условием, но необязательным.
На сегодняшний день психометрические характеристики рассматривают как главный признак научной обоснованности. В мировой психодиагностике это является обязательным условием для получения сертификата в национальных комиссиях по тестированию в качестве пригодной для практического использования методики.
Так что означают слова верификация и валидация простым языком
По-сути, в жизни чаще всего так и бывает, и если вы не работаете с технологиями, а встретились с этими словами в интернете, то, скорее всего, вас просят пройти именно проверку. Однако считать, что эти слова обозначают одно и то же будет в корне неверно, ведь разница в их определениях кардинальна.
Давайте попробуем разобраться с определениями этих слов. Верификация означает проверку, или лучше сказать прохождение теста. В своем изначальном понятии, то есть, относящимся к технологиям, оно означает проверку правильности изготовления чего-либо.
Например, вы собираете раскладной диван. Наверняка вы делаете это в несколько этапов, верификация как раз и будет проверкой каждого этапа сборки этого дивана. Она нужна для того, чтобы удостовериться, что он был собран по правилам и соответственно инструкции. Также она проверяет, вся ли документация была оформлена правильно, если, конечно, она существует.
После того, как этот заказчик опробует диван, то есть посидит, полежит на нем и попробует расправить его, он может признать диван валидным, но только если он удовлетворил требования заказчика. Это общая оценка объекта, к тому же, здесь может звучать субъективное мнение о нем.
Объект оценивается исключительно со стороны его использования заказчиком, от его потребностей. Можно сказать, что все отличие заключается в том, что верификация – это проверка до передачи объекта заказчику на то, что он соответствует всем условиям, которые прописаны на бумаге, а валидация – это проверка на наличие всех необходимых функций, причем эту проверку проводит уже сам заказчик.
Конечно, данные определения являются слишком упрощенными, однако, для точного понимания обычным человеком они являются самыми правильными.
Безусловно, суть не в том, что вы должны пройти проверку на наличие функций. Если у вас всплывает подобное сообщение при входе в социальную сеть, то вы занесли на свой компьютер вирус и отправлять никакие сообщения не нужно, ведь это мошенники. Таким образом, вас пытаются обмануть на деньги, потому что смс-сообщения будут платными.
В итоге, отправив их, вы и в социальную сеть не зайдете, и деньги потеряете. Если у вас всплывает сообщение о том, что вы должны пройти валидацию, то вам необходимо почистить свой компьютер от вирусов. Слово «верификация» вы можете встретить в случае регистрации в в платежной системе, это просят сделать с вашей картой.
Итак, слова валидация и верификация, в общем и целом обозначают проверку. Однако если вы не занимаетесь технологиями, то скорее всего вы встречаете эти слова не в том смысле, который дается в словарях.
В любом случае, скорее всего,вас просят пройти какую-либо проверку, но не всегда стоит это делать. Прежде всего разберитесь, точно ли система просит вас пройти проверку, или это мошенники пытаются выманить у вас денежные средства.
В любом случае, если вы встречаете эти слова в интернете, то не стоит переживать по этому поводу, но стоит внимательно отнестись к ним.
