ВУЗ: Не указан
Категория: Не указан
Дисциплина: Не указана
Добавлен: 09.10.2024
Просмотров: 56
Скачиваний: 0
Оценка надежности теста (устойчивости результатов к действию случайных факторов, внешних и внутренних). Наи- более часто оценивается надежность ретестовая (соответствие результатам повторного тестирования, обычно через несколько месяцев), надежность частей теста (устойчивостьрезультатов отдельных задач или групп задач, например, по методу «четное – нечетное») и надежность параллельных форм, если таковые существуют.
Методика признается надежной, если коэффициент корреляции результатов (первичного и повторного тестирования; одной и другой частей теста; одной и другой параллельных форм) составляет не менее 0,75. При более низком показателе надежности производится корректировка заданий теста, переформулировка вопросов, снижающих надежность.
Проводится стандартизация теста, т. е. приведение процедуры и оценок к общепринятым нормативам. Стандартизация оценок подразумевает преобразование нормальнойили искусственно нормализованной шкалы первичных оценок (эмпирических значений изучаемого показателя) воценки шкальные (отражающие место в распределении результатов выборки испытуемых). Виды шкальных оценок:стены (1–10), станайны (1–9), Т-оценки (10–100) и др.
По возможности определяется прогностическая валид-ность, т. е. информация о том, с какой степенью точностиметодика позволяет судить о диагностируемом психологическом качестве спустя определенное время после измерения. Также определяется по внешнему критерию, но данные по нему собираются спустя некоторое время послетестирования.
Таким образом, надежность и валидность – это собирательные понятия, включающие в себя несколько видов показателей, отражающих направленность методики на предмет исследования (валидность) и объект исследования (надежность). Степень надежности и валидности отражают соответствующие коэффициенты, указываемые в сертификате методики. Создание методики – трудоемкая работа, требующая развитой системы заказа на методики с соответствующей оплатой труда разработчиков. В настоящее время ввиду низкой платежеспособности основной массы психологов сфера профессиональной разработки отечественных тестов развита весьма слабо, что ведет к массовому использованию методик устаревших, не прошедших оценку валидности и надежности, либо переведенных с иностранного языка без проведения процедуры полноценной адаптации. Процедуру разработки тестовых методик часто именуют конструированием тестов, а теорию (науку) конструирования – тес-тологией. Источники более подробной информации о тестоло-гии приводились в начале этой главы.
-
Психологическое исследование включает в себя ряд логически завершенных фрагментов, или этапов. У каждого этапа свои цели, задачи и стратегии их решения.
1. Организационно-подготовительный этап. Его главное назначение - формулировка цели, задач (проблемы) объекта и предмета исследования. Формулировка проблемы должна привести к осознанию того, что между объективно возникающей в ходе развития психологического знания потребностью и существующими средствами ее достижения имеются противоречия. Задачи исследования представляют собой последовательность фрагментов в общем процессе решения проблемы.
В формулировке цели (или целей) должны просматриваться ожидаемые результаты исследования. Цель - это опережающее отражение действительности, модель будущего результата. Четкость целевой формулировки исключает разбросанность исследования, концентрирует усилия на актуальных вопросах, устанавливает границы исследования, привлекает все наиболее важное и отбрасывает несущественное. Цель - это маяк исследователя в многомерном бушующем океане человеческой психики. По словам Гете, тот, кто хочет достичь многого, должен уметь себя ограничивать.
Пример формулировки цели исследования: «Разработать концепцию групповой готовности операторов к сложным видам совместной деятельности и использовать методические средства этой концепции для оптимизации механизма влияния феномена групповой готовности на успешность совместной деятельности». Из этой формулировки следуют два ограничения: - из всего спектра проблем совместной деятельности исследованию подлежит лишь один феномен - групповая готовность к деятельности; - приоритет в исследовании отдается изучению механизмов взаимосвязи групповой готовности с успешностью деятельности.
Объектом исследования выступает какой-либо фрагмент психической реальности (психические процессы, феномены, состояния и др.), например групповая деятельность операторов сложной системы управления, адаптация личности к условиям социальной изоляции и т. п.
Предмет исследования требует погружения в детали, ограничивающие научный поиск рамками выбранного объекта (для групповой деятельности это может быть, например, динамика межличностных отношений в условиях конфликта; для адаптации личности к психологически сложным условиям — механизмы формирования стратегий психологической защиты личности от депрессивных состояний).
2. Этап разработки рабочей гипотезы. Рабочая гипотеза - выраженное в словесной форме утверждение (наиболее вероятный вариант решения задачи), которое еще не имеет достаточного обоснования. У рабочей гипотезы характер рисковый, отчаянный. Ее удел - заглядывать в будущее, балансируя на ниточке, связывающей истину и умозаключение. Поэтому гипотеза как инструмент исследования вызывала бурное негодование И. Ньютона («Гипотез не измышляю!») и И. Канта («Все, что имеет хотя бы малейшее сходство с гипотезой, есть товар запрещенный!»). Но по иронии судьбы именно гипотетические приемы проложили дорогу открытиям, сделанным этими великими мыслителями. Гипотеза - это поводырь исследователя в хитроумном лабиринте психических процессов. Да, она хрупка и наивна, неуклюжа и робка. Но именно она позволяет делать первые шаги к истине. «Гипотезы - это леса, которые возводят перед зданием и сносят, когда здание построено» (И. Гете).
Выдвижение гипотезы - ответственный этап, требующий от психолога не только научной интуиции, но порой и мужества для противостояния своим оппонентам. «Все во всем!» - воскликнул Дж. Бруно, подчеркивая единство мира, и после 8-летнего тюремного заточения был сожжен на костре. Современный психолог, выдвигая гипотезы, не рискует жизнью. Но неверно сформулированная гипотеза может завести в тупик. Все придется начинать сначала, с новой гипотезы.
Научная гипотеза - это карта местности в хитроумном лабиринте психических явлений. Именно она позволяет психологу делать первые шаги в незнакомом мире истин.
Пример гипотезы исследования: «Процесс формирования групповой готовности операторов к сложным видам совместной деятельности заключается в движении совокупного субъекта деятельности к такому активно-действенному состоянию, которое служит регулятором целесообразного и эффективного его поведения в напряженных ситуациях и одновременно уравновешивает требования со стороны совместной деятельности».
3. Методический этап. В соответствии с целью и задачами исследования производится выбор или разработка методического инструментария. Особое внимание уделяется свойствам надежности, валидно-сти и репрезентативности. Здесь же строится общая схема проведения исследования: планируется последовательность процедур, обдумываются возможности по привлечению технических средств и др.
4. Экспериментальный этап предусматривает: - сбор материала для конкретизации причин появления самой проблемы; - проведение поисковых (пилотажных) экспериментов для уточнения некоторых деталей; - подтверждение выдвинутой рабочей гипотезы, т.е. того факта, что исследуемый психический процесс будет развиваться сог ласно принятым гипотетическим положениям.
К этому этапу у психолога особое отношение. Ведь психология - наука преимущественно экспериментальная. Энциклопедическая формулировка эксперимента звучит так: «Это метод познания, при помощи которого в контролируемых и управляемых условиях исследуются явления действительности». Вроде бы строго и лаконично. Но к термину «действительность» следует относиться с позиций здравого смысла. Истинный эксперимент имеет место там, где снимается неопределенность знаний или получаются новые факты и знания.
5. Аналитический этап. Это этап научных размышлений о том, что удалось выявить в ходе исследования. Здесь осуществляется обработка материала методами математической статистики. Наиболее ответственным моментом этого этапа является интерпретация полученных данных. Психолог должен призвать себе на помощь все свои аналитические и синтетические способности, привлечь математические приемы извлечения полезной информации из полученных результатов. Наконец, сделать выводы и рекомендации в соответствии с целями и задачами исследования.
Опыт показывает, что в процессе интерпретации теряется 20-40 % информации, значимой относительно разрабатываемой проблемы. Основные причины такого положения заключаются в следующем. Во-первых, как подчеркивалось, в недооценке роли математики в психологии. Многие психологи еще не осознали очевидного парадокса: самый сложный объект в мире (человек) изучается самыми древними методами (умозаключениями). Во-вторых, психические закономерности пытаются выстроить на одном-един-ствениом испытуемом или на многих, но без статистической оценки доверия к результатам. В-третьих, психология, как выразился один ученый, это невеста без приданого, не имеющая ни своих собственных единиц измерения, ни специфического аппарата обработки данных. «Чужие» же приемы обработки подвергаются критике со стороны психологов, чаще справедливо, но и нередко по причине абсолютной математической неподготовленности и даже бравирования своей математической неграмотностью.
-
Гипотезы научного исследования: требования к выдвижению и виды. Формулировка гипотезы.Уяснение конкретных задач осуществляется в творческом поиске частных проблем и вопросов исследования, без решения которых невозможно реализовать методический замысел, решить главную проблему.
В этих целях изучается специальная литература, анализируются имеющиеся точки зрения, научные позиции; выделяются те вопросы, которые можно решить с помощью уже имеющихся научных данных, и те, решение которых представляет прорыв в неизвестность, новый шаг в развитии науки и, следовательно, требует принципиально новых подходов и знаний, предвосхищающих основные результаты исследования. Гипотезы бывают: а) описательные (предполагается существование какого-либо явления); б) объяснительные (вскрывающие причины его); в) описательно-объяснительные. К научной гипотезе предъявляются следующие определенные требования: – она не должна включать в себя слишком много положений. Как правило, одно основное, редко больше по особой специальной необходимости; – в нее нельзя включать понятия и категории, не являющиеся однозначными, не уясненные самим исследователем; – при формулировке гипотезы следует избегать ценностных суждений, гипотеза должна соответствовать фактам, быть проверяемой и приложимой к широкому кругу явлений; – требуется безупречное стилистическое оформление, логическая простота, соблюдение преемственности. Научные гипотезы с различными уровнями обобщенности, в свою очередь, можно очевидно отнести к инструктивным или дедуктивным. ^ Дедуктивная гипотеза, как правило, выводится из уже известных отношений, положений или теорий, от которых отталкивается исследователь. В тех случаях, когда степень надежности гипотезы может быть определена путем статистической переборки количественных результатов опыта, рекомендуется формулировать нулевую или отрицательную гипотезу. При ней исследователь допускает, что нет зависимости между исследуемыми факторами (она равна нулю). Например, при изучении структуры деятельности специалиста в какой-либо сфере нас интересует зависимость этой структуры от уровня образования, рабочего стажа, возраста, уровня профессиональной квалификации. ^ Нулевая гипотеза состоит из допущения, что такой зависимости не существует. Можно ли в таком случае в проводимом научном исследовании получить результаты, противоречащие нулевой гипотезе? Если мы такие факты получим, то можно ли будет их рассматривать как случайные? ^ Предполагается, что при такой постановке вопросов исследователю легче уберечься от ложной интерпретации итоговых результатов опыта. Формулируя гипотезу, важно отдавать себе отчет в том, правильно ли мы это делаем, опираясь на формальные признаки хорошей гипотезы: а) адекватность ответа вопросу или соотнесенность выводов с посылками (иногда исследователи формулируют проблему в определенном, одном плане, а гипотеза с ней не соотносится и уводит исследователя от проблемы); б) правдоподобность, т.е. соответствие уже имеющимся знаниям по данной проблеме (если такого соответствия нет, новое исследование оказывается изолированным от общей научной теории); в) проверяемость.
Возможны ли в социальной теоретической науке получение и накопление положительных знаний?
Под положительным знанием здесь понимается суждение (совокупность суждений), которое: а) подкреплено эмпирически (принцип корреспондентности); б) согласуется с ранее принятыми теориями (принцип когерентности); в) используется в последующих исследованиях в качестве основания (принцип превращения в основание); г) принимается большинством специалистов, либо же доля принимающих это положение быстро растет при смене поколений (принцип монотонного роста согласия, или просто принцип согласия); д) фиксируется в профессиональных учебных пособиях в качестве не частного мнения, но достигнутого практически общепринятого знания (принцип образовательной трансляции).
Заметим, что при действительных крупных успехах многих социальных наук в XX в., особенно, экономики, истории, социологии, антропологии, политологии, психологии, статус положительного знания, выдерживающего все требования а-д может быть присвоен лишь некоторым эмпирическим открытиям (результатам экспериментов, обобщений данных, надежно подтвержденных фактов). Придание статуса положительного знания практически каждому теоретическому суждению в социальных науках (кроме самых общих и банальных), как правило, остро оспаривается самими же теоретиками, особенно принадлежащими другим школам мысли.
Сказанное означает, что социальные науки в своем теоретическом аспекте так и не вырвались из рамок действия "закона малых чисел" Р.Коллинза, согласно которому в каждом поколении сохраняется (или обновляется) от трех до шести позиций по каждой актуальной теме споров и исследований.
Существование положительного знания в естествознании и математике с XVI-XVII вв. означает сокращение числа позиций до одной по каждому значимому вопросу. Иными словами, новое поколение исследователей в данных областях предпочитает согласиться с доминирующей и отвечающей текущим критериям достоверности позицией и, основываясь на ней, продвигаться дальше, а не цепляться за старые споры, "втискиваясь" в 3-6 возможных позиций, как это происходит в философии, социальных т гуманитарных науках [1]. Таким образом в математике и естествознании достигается научный консенсус об открытиях (доказана ли теорема, происходит ли определенный естественный феномен при заданных экспериментальных условиях) и появляется быстро сдвигающийся передовой фронт исследований.
Заметим, что направленность на получение положительных теоретических знаний в социальных науках вовсе не означает стремления "подогнать" их под образцы точных наук, скорее такая направленность соответствует общим принципам рационального познания и самому понятию науки как деятельности по получению надежных знаний, а не разнообразия произвольных мнений.