Полезная информация

Сайт Ежегодника - http://yearbook.psytest.ru/ru.

Идея создать первый в России Ежегодник профессиональных рецензий психодиагностических методик была предложена одним из авторов этих строк полтора года назад на форуме сайта НТ – Гуманитарных технологий.

            Сразу же на форуме у идеи возникла «группа поддержки», которая в будущем вошла в редакционную коллегию и секретариат «Ежегодника» и осуществляла реализацию проекта на протяжении всего этого времени.

У ежегодника есть прообраз – американское издание «Ежегодник ментальных измерений» (Mental Measurements Yearbook, MMY, www.unl.edu/buros), первый том которого вышел еще в 1938 году в США. На сегодняшний день выпущено 17 томов этого ежегодника. Автором идеи издания MMY был Оскар К. Бьюрос, именем которого сейчас назван институт, создающий и выпускающий MMY, а также другое связанное с ним издание – компендиум «Издаваемые тесты» – Tests in print (сейчас вышли уже восемь выпусков). За десятилетия своего существования MMY создал традицию, по которой каждый пользователь тестов хорошо знает, где и как найти независимую и компетентную оценку-рецензию на интересующий их инструмент, а каждый тест-девелопер или издатель еще лучше знает, что самый надежный путь к коммерческому успеху их продукта – через репутацию в ММY.

Аналогичное издание на русском языке было задумано с тем, чтобы стать и форумом для разработчиков, и каталогом для пользователей, и общим ориентиром качества русскоязычной психометрической продукции. Работа над выпуском отечественного «Ежегодника» рецензий постепенно превратилась в общероссийский проект. Несмотря на изначальный скепсис и сомнения, она укрепила наше убеждение в том, отечественная психодиагностика созрела для открытого обмена мнениями и для конструктивного освоения энергии разногласий. Результат этих «пионерских» усилий – первый выпуск «Ежегодника» – перед вами.

            Двадцать психодиагностических методик, которые авторы или издатели рискнули предъявить на суд профессионалов, представлены из девяти городов: Москвы, Санкт-Петербурга, Екатеринбурга, Челябинска, Ярославля и других. А также два международных проекта: Москва-Торонто и Минск-Словения. Из фирм-издателей психодиагностической продукции в проекте приняли участие: «Психологический центр ПсиХРОН» (Челябинск), «Психодиагностика» (Ярославль), «Гуманитарные технологии» и «Когито-центр» (Москва). Издателями остальных методик являются сами авторы-разработчики.

            В рецензировании методик принимали участие 40 высококвалифицированных специалистов – членов коллегии рецензентов, из которых 20 докторов психологических наук, остальные 20 – кандидаты наук, все без исключения опытные и квалифицированные специалисты в области психодиагностики. В целом они представляют почти полную географию России: от Санкт-Петербурга до Омска – всего из 14 городов России. Многие из них являются сотрудниками ведущих психологических организаций России: ИП РАН, ПИ РАО, МГУ, ВШЭ, СПбГУ, ЮУрГУ, ОмГУ, ППГУ и др. Кроме того, среди рецензентов и членов редколлегии есть и наши соотечественники, живущие в различных странах мира (Австралии, Англии, Германии), что, по нашему мнению, добавляет стереометричности в критический взгляд на отечественную психодиагностику.

            Даже сам по себе состав коллегии рецензентов и редакционной коллегии является хорошим свидетельством качества и всесторонности представленных в рецензиях точек зрения.

            Если проанализировать состав методик, поданных на рецензирование, то не трудно заметить, что в ежегоднике под одной крышей оказались самые разноплановые методики:

-        по «возрасту» разработки – от «стареющих», 1986 года издания до самых свежих, изданных в 2010 г.;

-        по «происхождению»: 12 методик – отечественные,  8 являются адаптацией зарубежных;

-        по полу среди авторов и соавторов методик – 14 женщин и 23 мужчины;

-        по тематике: 10 методик – для исследования личности, из которых 3 проективные, 2 методики – на способности (интеллект), 4 – по межличностным и социальным отношениям и 5 – разноплановых методик, предназначенных для профориентации, готовности к обучению в школе и активности школьников.

            Надо сказать, что участие в работе ежегодника было рискованным предприятием как для авторов/издателей психодиагностического инструментария, так и для рецензентов. И для первых, и для вторых на кон были поставлены репутации разработчика качественного инструментария и репутация квалифицированного специалиста в области психодиагностики, способного написать профессиональную рецензию.

            Очевидно, что каждый испытывал беспокойство: а как там отнесутся к его методике? А сколько критических «баллов» она наберет? Как редколлегия оценит качество рецензии?

            Да, они рисковали, кое-кто, возможно, даже в какой-то момент пожалел о своем решении, получив в представленных им первых вариантах рецензий много замечаний. Многие разработчики воспользовались правом дать разъяснения рецензентам по поводу тех замечаний, с которыми они были не согласны. В чем-то им удалось убедить рецензентов, и они внесли коррективы в окончательный текст, но в большинстве своем рецензенты отстаивали свое право на собственную точку зрения. Многие рецензии остались с большим количеством замечаний. И, несмотря на это, ни один автор и ни один издатель не воспользовались своим правом, представленным ему «Положением о Ежегоднике», отказаться от публикации рецензий на свою методику.

            Честь и хвала авторам и издателям методик, которые первыми рискнули участвовать в этом проекте. Их имена навсегда останутся в истории отечественной психодиагностики.

            Особое слово о тех, кто не рискнул участвовать в проекте, отказавшись от предложенной возможности оценить свой инструментарий «со стороны». Как это сделала фирма «Иматон», которая не подала ни одной заявки. Такая осторожность, по всей видимости, говорит о неуверенности фирмы в качестве своей продукции.

            Сейчас, когда процесс работы завершен, и вы держите в руках первый том «Ежегодника рецензий», можно с уверенностью сказать, что и авторы, и рецензенты продемонстрировали свою квалификацию. Также можно сказать, что возникает уверенность, что психодиагностика России сможет преодолеть системный кризис, в котором она находится по многим причинам.

            От многих рецензентов редколлегия получила отзывы о том, что подготовка рецензий заставила их самих задуматься над разными проблемами разработки методик. Будем надеяться, что публикация рецензий будет стимулировать авторов к улучшению показателей своих методик, что они проведут «работу над ошибками». Кроме того, авторы тех методик, которые не попали еще под грозное око рецензентов, проанализировав чужие ошибки, постараются заблаговременно исправить подобные в своих методиках. Думаем, что, уже читая рецензии, отечественные разработчики тестов начали прикидывать, какие коррективы нужно внести в новые версии своих методик. И во что хотелось бы верить – так это в то, что сам факт издания рецензий в ежегоднике повлияет на процесс еще только разрабатываемых методик, так сказать профилактически.

            Надеемся, что, как мы и задумывали, «Ежегодник» постепенно станет своеобразной школой для отечественных разработчиков тестов, и критический разбор достоинств и недостатков инструментария будет восприниматься как стимул к его дальнейшему развитию. Можно убедиться, читая рецензии ежегодника, насколько возросли требования к методикам со стороны клиентов, в роли которых выступали рецензенты. Тем более что значительная часть рецензентов сами являются не только разработчиками тестов и их методики параллельно рецензировались другими специалистами. Это позволяет сравнить, насколько психодиагност как рецензент более или менее критичен, оценивая чужую методику, и как он реагирует, когда другие рецензенты применяют эти же требования к его собственной продукции. Это тоже послужит уроком и разработчикам, и рецензентам.

            То, что в большинстве рецензий содержатся замечания, с одной стороны, указывает на реальные серьезные недоработки и ошибки при создании методик, а с другой  – свидетельствует о серьезном и критическом настрое почти всех участников проекта. По крайней мере, ожидания, существовавшие в период обсуждения проекта «Ежегодник», что рецензии будут «заказными», «согласованными» и в основном «хвалебными», как это принято в большинстве отечественных процедур рецензирования, не оправдались. Может быть, опыт такого рецензирования позволит изменить в целом практику, сложившуюся в отечественной психологии. Когда всякая публичная дискуссия, и тем более критика, вытеснена со страниц научных журналов. Рецензии по содержанию почти все как одна напоминают бочку с медом, в которую рецензентом очень осторожно и очень дозированно добавлена ложечка касторки. Кому и что дают такие рецензии, написанные зачастую самими авторами рецензируемых работ в виде «заготовок» рецензий или так называемой «рыбы», вообще непонятно. И уж точно они ничего не изменяют в отечественной психологии.

            Особенно отрадно отметить, что обоснованная критика рецензентов очень редко вызывала у авторов защитные реакции. Об этом свидетельствуют благодарные отзывы авторов на очень критичные рецензии. Многие авторы удовлетворены тем, что их методику наконец-то проанализировали специалисты, провели с ними своеобразную супервизию. С его методикой теперь знакомы не только пользователи, которые, кстати говоря, еще не привыкли критически смотреть на измерительные инструменты, считая, что раз методика опубликована, то, значит, ей можно пользоваться, а результатам – доверять. К сожалению, это далеко не всегда так.

            Надо сказать, что отечественные авторы-издатели еще не до конца осознали то, что хорошо понимают зарубежные: любая рецензия, даже содержащая критические замечания, является очень эффективной рекламой. Она привлекла и будет долгие годы, пока на полках библиотек будут стоять тома ежегодника, привлекать внимание пользователей тем, что профессионально отрецензированная методика – это не просто методика, напечатанная в каком-то издании и в каком-то смысле являющаяся темной лошадкой. Она критически проанализирована специалистами. Отмеченные ими недочеты позволяют пользователям учитывать их в своих исследованиях, обследованиях, вносить соответствующие коррективы в интерпретацию результатов, а возможно, и добавлять в свои исследовательские планы задачи по улучшению инструментария.

            Остается надеяться, что с ростом интереса к активному, двустороннему взаимодействию с рецензионной литературой улучшится  качество вкладов и появится спокойная уверенность авторов в том, что «мы не хуже других», а критичность обратной связи на психометрические разработки будет не отпугивать, а привлекать.

            Еще одно важное событие, сопровождающее выход первого тома «Ежегодника рецензий» – то, что по сути дела заложена основа грядущей сертификации психодиагностических методик. Наличие двух профессиональных рецензий может рассматриваться сертификационной комиссией как база для принятия решений о качестве методики. Кроме того, в процессе подготовки ежегодника фактически сложился и прошел проверку коллектив будущей общероссийской комиссии по сертификации психодиагностических методик, создание которой запланировано в структуре Национального института сертификации практических психологов (НИСПП).

            В завершение хотелось бы выразить благодарность большому числу рецензентов ежегодника – настоящим профессионалам в области психодиагностики. Они не пожалели своего времени и труда на подготовку рецензий, и мы, члены редколлегии, сами выступив в роли рецензентов, понимаем это. Нужно бы перечислить здесь имена многих: тех, кому достались очень объемные методики, потребовавшие больших затрат; тех, кому явно не хватало опыта, но они преодолели этот барьер, справившись с проблемами. Но тогда надо перечислить почти всех. Почти каждая рецензия – это персональная история!

            От имени редакционной коллегии «Ежегодника рецензий» мы выражаем благодарность всем участникам проекта за самоотверженный труд – и авторам, и издателям, и рецензентам, а также тем, чьими стараниями был подготовлен к изданию первый том «Ежегодника». Отдельная благодарность координатору всех наших усилий – А.В. Пичуговой, а также заведующей лабораторией психодиагностики ЮУрГУ Е.С. Первухиной.

            Авторы проекта и редакционная коллегия выражают надежду, что на следующий год подготовка второго тома «Ежегодника» будет проходить с меньшим количеством неизвестных и в более размеренном режиме, привлечет как новых авторов и издателей, заинтересованных в рецензировании своих методик, так и новых специалистов в коллегию рецензентов. А главное – «Ежегодник рецензий» станет нужным и полезным источником в руках широкого круга читателей.

                                Главный редактор – профессор Е.В. Эйдман (Австралия)

          Заместитель главного редактора – профессор Н.А. Батурин (Россия)