Тест на дополнение Трэбью также оказался ценным при определении способностей стенографисток. Самым важным тестом, вероятно, для стенографистки является тест на ее способность принимать и расшифровывать диктовку. Тесты проводились по возможности со скоростью, которая была лучше всего адаптирована к способностям претендента. Результаты затем оценивались на основе общего затраченного времени и объема правильно выполненной работы.
В экспериментах по определению способностей операторов вычислительных машин использовались различные тесты. Одним из самых важных был тест на ментальную арифметику. Он был разработан для определения фундаментальных знаний претендента в арифметике. Другим был тест на числовую подстановку. В каждом из проведенных тестов результаты претендентов сравнивались с рейтингами, составленными ранее руководителями отделов, и в большинстве случаев наблюдалось согласие достаточной степени приближения, чтобы указать на ценность тестов.
Хотя научный метод измерения интеллекта все еще находится, так сказать, в зачаточном состоянии, насколько это касается его практического применения в промышленности, везде и всегда, когда он применяется в соответствии с истинными психологическими принципами и по стандартам и методам, разработанным подготовленными психологами, он настолько полно продемонстрировал свою экономическую ценность и социальную полезность, что его всеобщее принятие, по мере того как эти факты становятся более широко известными, кажется неизбежным.
ГЛАВА IX КАК ИСПОЛЬЗОВАТЬ ТЕСТЫ «МЕНТИМЕТР»
Тесты «Ментиметр» отличаются от тестов «Альфа» или от теста «Бета» армии Соединенных Штатов, от теста Отиса или от любой другой системы тестов, доступной в настоящее время, главным образом своей гибкостью. Вместо того чтобы представлять публике определенную фиксированную и неизменную группу из восьми или десяти тестов, которые должны использоваться везде, где необходимо применить измерение общего интеллекта, как это делалось в других случаях, нынешние авторы решили представить широкий спектр тестов, из которых каждый читатель может выбрать для своего использования те, которые действительно дают наилучшие результаты.
Маловероятно, что для отбора людей с высоким интеллектом для аспирантуры университета потребуются точно такие же тесты, как для отбора интеллектуальных людей в лесозаготовительном лагере в диких районах Канады или на нашем собственном Северо-Западе. Нынешние авторы не претендуют на то, чтобы знать, сколько именно каждой умственной черты требуется для формирования идеального превосходного интеллекта, и по этой причине они не пытались предложить какую-либо единую группу тестов в качестве лучшего измерения интеллекта. Читателю предлагается «испытать» такие тесты из серии «Ментиметр», которые, по его мнению, обещают наибольшую полезность, а затем составить свою собственную «команду тестов» таким образом, чтобы наилучшим образом выявить тот вид интеллекта, который его интересует.
В интересах тех, кто желает получить некоторые предложения относительно тестов, которые, вероятно, были бы наиболее полезны в основных направлениях работы, к которым могут быть применены тесты интеллекта, авторы здесь предлагают некоторые предварительные или рекомендательные списки, которые, по их мнению, обещают большой успех при использовании. Для классификации канцелярских работников в бизнесе и промышленности следует, по крайней мере, провести тщательное испытание следующих тестов:
MENTIMETER NO. TITLE
6. Completion of Form Series
7. Checking Identity of Numbers
8. Digit-Symbol Substitution
9. Completion of Number Relation Series
16. Naming Opposites
23. Completion of Sentences
24. Analogies
28. Arithmetic Reasoning
Возможно, конечно, что какой-нибудь работодатель, который проведет испытание, найдет полдюжины других тестов, которые покажут более точные результаты при классификации канцелярских работников, чем любой тест из приведенного выше списка, но такое, вероятно, не произойдет, ибо тип теста, который был полезен в подобных ситуациях, вероятно, окажется полезным снова. Если бы такое все же произошло, однако, работодатель был бы глуп и ненаучен, если бы сохранил список, предложенный выше, зная о лучшем списке.
При классификации интеллекта рабочих авторы предложили бы провести справедливое испытание следующих тестов:
MENTIMETER NO. TITLE
2. Pictorial Absurdities
3. Maze Threading
5. Dividing Geometric Figures
6. Completion of Form Series
9. Completion of Number Relation Series
18. Range of Information
28. Arithmetic Reasoning
29. Practical Judgment
Для классификации учеников государственных школ в соответствии с их общей интеллектуальной силой и способностью к обучению авторы предлагают использовать следующие тесты до тех пор, пока не будет доказано, что другой выбор является более предпочтительным:
MENTIMETER NO. TITLE
2. Pictorial Absurdities
3. Maze Threading
8. Digit-Symbol Substitution
16. Naming Opposites
20. Reading Directions
23. Completion of Sentences
28. Arithmetic Reasoning
29. Practical Judgment
Как более строго образовательные тесты, а не тесты на интеллект, внимание читателя приглашается к следующему списку:
MENTIMETER NO. TITLE
10. Addition
17. Spelling
19. Reading: Vocabulary
21. Reading: Interpretation
25. Handwriting
26. English Composition
27. Poetic Discrimination
28. Arithmetic Reasoning
Наиболее выгодным списком с точки зрения социального развлечения кажется следующий:
MENTIMETER NO. TITLE
2. Pictorial Absurdities
3. Maze Threading
5. Geometrical Figures
6. Completion of Form Series
18. Range of Information
20. Reading Directions
22. Disarranged Sentences
23. Sentence Completion
24. Analogies
27. Poetic Discrimination
29. Practical Judgment
30. Logical Conclusions
Независимо от цели, для которой должны использоваться тесты, наилучшие результаты могут быть получены только путем получения от первоначальных издателей тщательно напечатанных бланков, подготовленных авторами тестов. Мимеографированные копии бланков тестов или частным образом напечатанные бланки наверняка будут настолько отличаться от истинной формы, что полученные с их помощью результаты не могут быть напрямую сопоставлены с официальными результатами.
Длительный опыт также довольно ясно продемонстрировал, что наилучшие результаты в любой промышленной организации или образовательном коллективе будут получены, если возложить на одного человека главную ответственность за надлежащее администрирование интеллектуальных и образовательных измерений. Если под рукой есть директор по персоналу, который может изучать свои тесты так же научно, как он изучает своих людей, прогресс и улучшение методов и результатов неизбежны.
Измерения интеллекта отнюдь не являются единственными или окончательными критериями, с помощью которых успешный менеджер по персоналу добивается успеха в своей работе и экономит деньги для своих работодателей. Он использует любую информацию о своих людях, которую только может собрать где угодно. Профессиональные тесты, в частности, предлагают широкое поле, в котором измерения интеллекта могут быть дополнены и сделаны более полезными. Из двух людей, которые сегодня работают по одной специальности, получают одинаковую заработную плату и получают одинаковый балл в своих профессиональных тестах, более перспективным является тот, у кого выше балл интеллекта. С другой стороны, из двух одинаково интеллектуальных людей, измеренных с помощью тестов интеллекта, тот, кто достиг за определенное время более высокого мастерства в своей профессии, является превосходящим.
Главная ценность групповых тестов интеллекта, вероятно, всегда будет заключаться в классификации больших групп людей на более мелкие, четко определенные группы, члены которых затем могут быть изучены более тщательно и с помощью более точных методов в руках подготовленного психолога, если это необходимо. До тех пор, пока не был разработан метод группового тестирования, позволяющий проверять интеллектуальные способности каждого сотрудника без огромных затрат времени и денег, было бы крайне глупо говорить о поддержании постоянной инвентаризации умственной силы организации, и все же такая инвентаризация теперь возможна — так же возможна, как запись состояния и мощности каждой машины, принадлежащей компании.
Потенциальным пользователям «Ментиметров» необходимо помнить, что умственные способности гораздо менее постоянны в своих величинах, чем размеры и измерения куска стали или пиломатериала. Даже длина стального рельса варьируется между зимой и летом, но изменение, которое происходит в силе умственных связей изо дня в день или из часа в час, гораздо больше, чем изменения стального рельса. За исключением случайности, нельзя получить точно такой же балл второй раз при прохождении теста «Ментиметр» или любого другого теста умственных способностей. Будучи по большей части построенными по плану «возрастающей сложности», однако, «Ментиметры» окажутся гораздо менее подверженными влиянию недавней тренировки и близости обеденного перерыва, чем большинство других тестов, особенно меньше, чем те тесты на скорость, которые измеряют, сколько простых задач можно выполнить за определенный лимит времени. Идеал «Ментиметра» — проверять силу, а не скорость.
Ни один отдельный набор тестов не должен использоваться как окончательный и решающий в государственных школах в отношении того вида работы, за который должен взяться данный мальчик или девочка. Тесты «Ментиметр» могут быть использованы в качестве первой «сети», но те, кто попал в эту сеть, должны затем быть тщательно изучены с помощью самых утонченных методов, известных психологам, прежде чем их будут рекомендовать для определенных типов специального обучения или направлять в специальные школы. Одним из самых обнадеживающих признаков во всей образовательной сфере является количество городов, которые нанимают психологов для отслеживания результатов групповых экзаменов в школах. Многие университеты штатов создали бюро для обслуживания местных сообществ [1] в таких вопросах. Самые лучшие измерения бесполезны, если ничего не делается в отношении выявленных результатов.
1. В Педагогическом колледже Колумбийского университета в Нью-Йорке недавно было создано Бюро образовательных услуг, директор которого будет рад ответить на вопросы или проконсультировать любого, кто интересуется измерением интеллекта или образовательных результатов, независимо от штата или сообщества, в котором человек может жить.
Для каждого из тестов «Ментиметр» авторы классифицировали возможные баллы на пять общих групп: Превосходный, Высокий средний, Средний, Низкий средний и Низший. Эта классификация очень грубая и не должна быть неправильно истолкована. Не следует ожидать, что индивид, который тестируется с помощью трех, четырех или более тестов «Ментиметр», получит одинаковую классификацию в каждом тесте. В тесте на почерк, например, вполне можно ожидать, что человек получит рейтинг «Превосходный» по качеству письма, в то время как по скорости письма он получит только «Низкий средний». Тот же человек вполне может получить балл в тесте на поэтическую проницательность, который классифицирует его как «Низший». Хотя существует тенденция к тому, что люди, превосходящие в одной области, обладают высокими способностями в других областях, это лишь общая тенденция, которая не будет верна во всех случаях и в отношении всех разновидностей способностей.
Для наиболее точной научной работы читатель, вероятно, полностью проигнорирует пятикратную классификацию баллов, упомянутую выше. Будут изучены более тонкие различия, сделанные числовыми баллами, и интерпретации будут сделаны для конкретных целей экзаменатора. Вероятно, например, что сравнительно немногие дети в возрасте восьми лет были бы классифицированы как лучшие, чем «Низший», если бы эти грубые общие классификации были единственной записью, сохраняемой о результатах этих тестов. С другой стороны, очень немногие канцелярские работники с доказанными способностями и успехом получили бы классификацию столь низкую, как «Средний», за исключением, возможно, нескольких тестов на специализированные способности. Важный момент, который должен быть рассмотрен учителем класса второго уровня, или работодателем канцелярских работников, или любым другим лицом, которое желает серьезно использовать эти тесты, — это отношение баллов в тесте к относительным способностям лиц в специальной протестированной группе. Предварительная классификация баллов, сделанная в конце каждого раздела главы, которая следует за этой, предназначена для людей в целом и не будет хорошо подходить для любой специализированной группы лиц.
Чтобы помочь читателям, не имеющим статистической подготовки в оценке для своих специальных целей любого конкретного теста «Ментиметр», несколько страниц будут посвящены элементарному изложению того, как научно испытать связь между тестом, с одной стороны, и продемонстрированной способностью в любой специальной области деятельности, с другой. Здесь можно еще раз заявить, что не все черты ума важны в каждой задаче, которую необходимо выполнить в жизни. Некоторые должности требуют лишь небольших интеллектуальных способностей, в то время как другие требуют очень больших, а некоторые задачи требуют очень большого развития нескольких черт, которые могут быть очень мало востребованы в других, столь же важных задачах. Авторы использовали свое лучшее суждение относительно того, какие тесты, вероятно, отберут тип людей, необходимых для определенного типа должности, но суждения других столь же опытных людей были бы такими же хорошими. Окончательное доказательство надежности теста может прийти только путем фактического испытания этого теста на людях с различной степенью продемонстрированных способностей в соответствующей торговле или профессии. Ниже приводится изложение того, как измерить это соответствие между продемонстрированной степенью успеха и баллом в тесте, или между баллами одних и тех же лиц в двух или более различных тестах.
Никакое измерение связи между успехом в жизни и успехом в тесте не может быть более точным, чем первоначальные меры успеха, из которых производится расчет. Если меры успеха в жизни ненадежны, то мера их связи с успехом в тесте будет еще более ненадежной. Чем более определенным и уверенным можно быть в своих мерах успеха, тем более надежной будет мера их связи.
В производительном труде, особенно там, где оплата основана на количестве стандартных изделий, произведенных за день, или на количестве стандартных операций, выполненных за определенное время, записи фактической производительности, вероятно, являются лучшими мерами успеха, доступными в качестве стандарта, по которому можно судить о надежности теста. Запись за один день или за одну неделю была бы обычно менее надежной, чем запись за месяц или более длительный период.
Во многих бизнес-организациях и отраслях нет такого удовлетворительного стандарта успеха, как индивидуальные производственные записи, и в таких случаях необходимо использовать суждения мастеров, супервайзеров или управляющих. Это гораздо менее удовлетворительные записи эффективности, и они подвержены грубым ошибкам и предрассудкам, но они являются единственными доступными мерами многих работников. Если рейтинг способностей является консенсусом суждений двух или более супервайзеров, каждый из которых делает свою оценку без какой-либо ссылки на ту, что сделана другим лицом, результат гораздо более надежен, чем рейтинг любого отдельного супервайзера.
Очень серьезные ошибки проникают в рейтинг эффективности, когда рейтинги делаются разными супервайзерами, каждый из которых оценивает лишь нескольких человек. Даже там, где перечислен подробный график качеств, каждому из которых придается определенный вес или важность при составлении общего рейтинга, как в Армейской рейтинговой шкале, степень способностей, которую опыт одного человека заставляет его называть «Средней», вызовет рейтинг «Превосходный» у другого столь же способного супервайзера, чей опыт был с немного другими людьми. Если индивиды A, B и C оцениваются первым супервайзером, а индивиды D, E и F — вторым, совсем не безопасно предполагать, что C оценен справедливо по отношению к D. Только когда два индивида оцениваются одними и теми же супервайзерами по одной и той же шкале и в одних и тех же условиях, законно или безопасно предполагать, что их относительные способности хорошо отражены рейтингами.
Предполагая, что читатель получил надежный порядок заслуг для индивидов, которых он использует в качестве проверки ценности тестов «Ментиметр», никакой тест не должен считаться полезным, если он не приводит примерно к тому же порядку заслуг. Тесты, конечно, настолько коротки и настолько грубы, что не следует ожидать, что какой-либо тест, за исключением случайности, покажет точно такой же порядок способностей, какой предоставляют производственные записи или рейтинги супервайзеров, но некоторые тесты покажут гораздо более близкое соответствие, чем другие. Те тесты, которые соответствуют наиболее близко, должны быть использованы, в то время как те тесты, которые не соответствуют вовсе, не должны быть использованы, независимо от любого заявления авторов или любых предвзятых идей читателя относительно того, какие тесты должны предсказывать способности в любой конкретной линии работы. Доказательство теста или любого метода прогнозирования заключается в степени, в которой он фактически расставляет людей в порядке их относительной эффективности в задачах, для которых стремятся предсказать успех.
Простой взгляд на запись, подобную той, что показана ниже для двадцати восьми учеников шестого класса, показал бы, что существует реальная связь между оценками успеваемости, оценкой интеллекта учителем и результатами образовательных измерений, проведенных посторонним лицом.
SCORES AND RATINGS OF SIXTH-GRADE CLASS
NAME OF PUPIL EDUCATIONAL MEASUREMENTS SCORE
(NO. OF ERRORS) TEACHER’S RANKING OF INTELLIGENCE
(1 IS BRIGHTEST) SUMMARY OF TEACHER’S MARKS IN SCHOLARSHIP
Adelaide 36. 19 85
Ruth 16.5 15 90
Alexander 25.5 7 93
LaMonte 46.5 6 93
Earl 76.5 18 77
Joseph 20.5 20 85
Amadeo 75. 14 85
Leo 48. 3 93
William 53.5 9 82
Isabel 25. 21 76
Ida 36.5 4 94
Hazel 15. 10 90
Frederick 65. 26 86
Charles 58.5 13 85
Edward 30. 1 95