Разработка критериев и показателей. Оценка персонала: разрабатываем критерии Разработка системы критериев

Система оценки, действующая в организации, призвана повысить эффективность деятельности всех сотрудников. Оценка труда позволяет установить соответствие рабочих показателей установленным требованиям и нормативам, помогая выявить те аспекты работы персонала, которые нуждаются в улучшении. Процесс оценки позволяет выявить как индивидуальные проблемы работника, так и общие, характерные для всего коллектива. С одной стороны, он позволяет собрать необходимую информацию для планирования и организации обучения работников, а с другой - повысить их мотивацию, скорректировать производственное поведение сотрудников и получить основания для их материального поощрения 1.

Оценивая работу, мы в той или иной степени оцениваем и рабочее поведение персонала. Оценка рабочего поведения основывается на том положении, что существуют эффективные и неэффективные виды поведения, определяющие успех выполнения той или иной работы (или мешающие достижению установленных показателей) При этом основным показателем эффективности рабочего поведения являются результаты, к которым оно приводит. Для продавца, например, результатом будет достигнутый им уровень продаж, для руководителя - основные показатели работы возглавляемого им подразделения и т.п.

При разработке системы оценки работника необходимо решить, на основании каких критериев будет производиться оценка, иными словами, что именно в деятельности работника нам надо оценить. Говоря о критерии, мы исходим из следующего определения: «Критерий - это такие характеристики работы и рабочего поведения, которые, по мнению квалифицированных наблюдателей, составляют необходимые «стандарты совершенства», которые необходимо достигнуть, чтобы как организация, так и индивид могли реализовать свои цели» 2. Проще говоря, критерии - это те показатели, те характеристики (рабочие, поведенческие, личностные), основываясь на которых можно судить о том, насколько хорошо работник выполняет свою работу.

Критерии оценки деятельности разделяются по разным основаниям, среди которых можно выделить следующие группы критериев.

Общеорганизационные и специализированные критерии.

Общеорганизационные или корпоративные: наличие и соответствие им одинаково для всех сотрудников. Например: качество, своевременность, полнота выполнения обязанностей и др. Критерии, соответствующие определенному рабочему месту, виду деятельности (или специализированные). Эта группа критериев закрепляется в отдельных документах - методиках оценки деятельности, разработанных для каждой отдельной должности.

Количественные и качественные критерии.

В зависимости от того, что будет предметом оценки в первую очередь, можно выделить количественные и качественные критерии или показатели эффективности деятельности того или иного сотрудника 3.

Количественные показатели являются наиболее распространенными критериями оценки работы персонала. Это самый понятный, самый объективный и самый прямой способ оценки, при котором работники оцениваются на основе достигнутых результатов. Для руководителя главным результатом его работы являются производственные показатели, достигнутые его подчиненными, и своевременность выполнения установленных планов.

При проведении оценки следует учитывать действие факторов, оказывающих влияние на оцениваемые рабочие результаты. К качественным критериям оценки относят:

Качество работы. Очень часто качество работы бывает важнее, чем производительность труда. Как и при оценке количественных показателей, здесь могут действовать факторы, «зашумляющие» результаты оценки качества работы. Например, устаревшее оборудование, низкое качество сырья могут привести к ухудшению качества работы;

Индивидуальные характеристики работника оцениваются с помощью различных оценочных шкал, вопросников или тестов, позволяющих оценить личные и деловые качества, а также особенности рабочего поведения, оказывающие влияние на эффективность работы. При оценке личных качеств работника на первый план выходят те качества, которые имеют наибольшее значение для достижения высоких результатов: коммуникабельность, личностная зрелость, эмоциональная устойчивость и др. При оценке деловых качеств, как правило, определяется степень проявления у работника качеств, характеризующих его отношение к порученной работе. В первую очередь речь идет о таких качествах, как самостоятельность, ответственность, инициативность, надежность, настойчивость и др. Оценка рабочего поведения, как правило, призвана определить, в какой степени работнику свойственны те виды поведения, которые способны внести позитивный вклад в достижение высоких рабочих результатов: поведение в трудных ситуациях, особенности рабочего поведения при взаимодействии с руководителем, коллегами по работе и клиентами.

Объективные и субъективные критерии.

Наиболее широкое распространение получили объективные критерии оценки рабочих показателей: стандарты, нормативы качества и производительности, которые могут быть установлены практически для любой работы. Наиболее приемлемо использование объективных критериев для оценки деятельности менеджеров и топ-менеджеров, поскольку эти сотрудники либо определяют стратегию развития компании, либо оказывают реальное влияние на ход событий. Часто говорят, что критерии обязательно должны быть объективными, считаемыми и проверяемыми. Но процесс может оцениваться и по субъективным критериям. К субъективным критериям относятся такие показатели и характеристики, которые оцениваются на основании мнений и оценок экспертов. Такая категория критериев используется, в частности, при оценке деятельности специалистов-исполнителей. Объективность здесь всегда будет относительной. Главное в этом случае, чтобы менеджеру было удобно достигать поставленных целей при помощи специалистов, находящихся в его подчинении. Соответственно, только субъективное мнение коллег, и в первую очередь непосредственного руководителя, может служить мерилом правильности производственного поведения сотрудника.

Интегральные и простые критерии.

Практически для любого работника не составляет труда собрать информацию об уровне его производительности, о качестве его работы и об основных особенностях его рабочего поведения, таких как трудовая дисциплина, уровень конфликтности. Кроме того, с помощью экспертов, в качестве которых могут выступить непосредственный руководитель оцениваемого или его коллеги, может быть оценена степень выраженности у него тех или иных деловых качеств, важных для работы: ответственность, инициативность, самостоятельность в принятии решений и т.п.

Если при оценке эффективности работы сотрудника в одном показателе учитывается, комбинируется или сочетается информация, полученная в результате оценки различных характеристик работы и рабочего поведения оцениваемого, то такой показатель является интегральной оценкой. Если же оцениваются отдельные аспекты работы или рабочего поведения, например, такие, как уровень производительности или отсутствие опозданий на работу, то данные показатели могут рассматриваться как простые критерии. Совокупность простых критериев дает возможность получить дифференцированную оценку работы и рабочего поведения данного сотрудника, которая в некоторых случаях оказывается предпочтительнее интегральной.

Еще один вопрос, связанный с использованием интегральных и простых показателей, - это компенсаторные возможности различных оцениваемых показателей. К примеру, не слишком высокая профессиональная компетентность руководителя может быть с успехом компенсирована его высокими организаторскими способностями. При этом следует помнить, что для многих профессий существуют такие области, где человек не может восполнить дефицит в одной области за счет хорошей работы в другой.

Критерии оценки работы персонала призваны оценить вклад работника в достижение целей организации, что дает возможность руководству организации принимать верные административные решения. Выбор конкретных критериев оценки (личностные качества, рабочее поведение или рабочие результаты) зависит от категорий оцениваемых работников и от того, как предполагается использовать получаемые результаты.

ПРОЦЕСС РАЗРАБОТКИ КРИТЕРИЕВ ОЦЕНКИ ДЕЯТЕЛЬНОСТИ

Критерии оценки - это письменные нормативы того, как должна выполняться та или иная работа. Критерии, если это возможно, разрабатываются совместно с сотрудниками и обязательно доводятся до каждого вновь принятого работника компании.

Критерии оценки - это ключевые параметры, по которым будет оцениваться деятельность сотрудника. В то время как должностная инструкция содержит в себе перечень основных функций и задач, которые должны выполняться на каждой конкретной позиции, критерии оценки определяют то, каким образом должна выполняться каждая функция и каждое действие, чтобы отвечать требованиям компании и клиентов.

Во многих компаниях степень соответствия деятельности критериям оценки разделяют на пять уровней. Эти уровни зависят от работы каждого сотрудника в сравнении с его должностной инструкцией.

E- exceptional. Работа превосходит ожидания - 5-й уровень.

A- above Expectations. Работа также в той или иной степени превосходит все ожидания - 4-й уровень.

S- solid performance. Выполняются все требования и иногда даже более -3-й уровень.

Improvement needed. Работа не всегда отвечает требованиям - 2-й уровень.

Unsatisfactory Работа ниже ожиданий. Трудности должны быть обсуждены во время оценки -1-й уровень.

Критерии оценки помогают ответить на вопрос: каким образом руководитель и сотрудник могут узнать, насколько хорошо сотрудник справляется со своими обязанностями?

Когда разработаны критерии оценки, и руководитель, и сотрудники компании знают, что ожидается от их работы. Это понимание обеспечивает основу для установления обратной связи руководителя с его подчиненными, что в свою очередь способствует эффективной деятельности каждого сотрудника.

Существует несколько подходов к разработке критериев оценки. Критерии оценки, как правило:

Разрабатываются руководителем и специалистом службы персонала;

Разрабатываются совместно с сотрудниками, которые выполняют соответствующую работу.

Один из основных подходов предполагает, что менеджер разрабатывает критерии оценки совместно со своим руководителем и специалистом службы персонала. «От специалистов кадровой службы совместно с руководителем... требуется тщательно проработать систему критериев оценки и проводить в последующем ревизию и корректировки по мере необходимости. Отобраны должны быть наиболее важные и максимально применимые к конкретной должности или группе должностей» 4. Затем критерии оценки обсуждаются с сотрудниками, учитываются их комментарии и вопросы.

Следующий подход предполагает совместную работу сотрудников и руководителя по выработке критериев оценки деятельности сотрудника. Преимущества этого подхода существенны. И руководитель, и сотрудник вносят значимую информацию в процесс разработки критериев оценки, в результате чего разработанные критерии имеют больше шансов быть принятыми работниками.

Когда критерии оценки работы разрабатываются совместно с сотрудниками, которые выполняют эту работу, скорее всего, эти критерии:

Будут более соответствовать особенностям конкретной работы;

Отражать, учитывать условия и содержание работы;

Будут понятны и для руководителя, и для сотрудников;

Будут приняты сотрудниками.

Понимание того, что от тебя хотят, ведет к лучшему выполнению работы.

Руководитель принимает окончательное решение после обсуждения разработанных критериев с высшим руководством и специалистами службы персонала. Совместная разработка критериев оценки с сотрудниками желательна, но не всегда возможна. Однако общее признание и осознание критериев оценки необходимо.

К процессу совместной разработки критериев оценки той или иной деятельности привлекаются все те сотрудники, для работы которых разрабатываются эти критерии. Для прозрачности и постоянства имеет смысл объединяться с представителями других отделов, которые выполняют подобные функции.

Перед встречей каждому участнику необходимо объяснить, что такое критерии оценки, почему они важны и как будут использоваться в процессе оценки деятельности сотрудника. Необходимо, чтобы все сотрудники понимали и знали процесс оценки. Важно, чтобы сотрудники осознали значимость совместной работы по разработке критериев оценки для оценки их деятельности, что их рекомендации важны и будут приниматься во внимание. Кроме того, важно заметить, что окончательное решение все-таки принимает руководитель.

Описание критериев необходимо для того, чтобы в организации все одинаково понимали, о чем идет речь. Зачастую в одно и то же понятие и словосочетание разные сотрудники организации вкладывают разный смысл. То есть при отсутствии единого понимания может случиться, что каждый аттестующий оценивает сотрудников по своей собственной системе оценок. Письменное описание критериев служит лишь как инструмент для достижения единого понимания. Оно выступает в качестве «словаря» принятых в организации терминов. Кстати, не только в отношении процедуры оценки многие организации обзаводятся такими словарями, в которые включают термины и выражения, принятые в организации, зачастую не

совсем понятные постороннему человеку или новому сотруднику.

При разработке критериев каждый участник должен располагать следующими документами:

Копия должностной инструкции (критерии должны соответствовать содержанию работы, для этого необходимо провести анализ соответствия содержания работы должностной инструкции);

Копия миссии и целей отдела (критерии должны соответствовать целям организации, при этом они могут изменяться в связи с изменением целей и приоритетов организации);

Форма для оценки деятельности.

Важно отметить, что необходимо разрабатывать критерии к целой рабочей функции, а не к конкретным задачам. Поэтому важно сосредоточиться на том, что действительно важно для конкретной должности, и определить тот приемлемый минимум заданий и результатов, который необходимо достигать, занимая эту должность. Деятельность, которая будет удовлетворять этим критериям, получит рейтинг хорошо выполненной, успешной работы. Кроме того, можно также сформулировать то поведение и те результаты, которые будут превосходить ожидания, или, наоборот, не оправдывать их. В последнем случае это так называемые отрицательные критерии: неудовлетворительные отзывы клиентов и коллег, конфликты и т.д.

Критерии должны быть написаны четким ясным языком, учитывая специфическое поведение и действия, которые будут отвечать требованиям той или иной деятельности, а также превосходить ожидаемые результаты.

При выработке критериев, которые можно было бы использовать для оценки рабочих результатов персонала, следует придерживаться определенных правил.

Отбор показателей, которые наиболее точно характеризуют рабочие результаты оцениваемых категорий персонала. К этой работе следует привлекать самих работников и руководителей подразделений, поскольку именно эти люди лучше других знают содержание оцениваемой деятельности и могут определить, в какой степени достигнутые результаты отвечают установленным требованиям, какие способы оценки рабочих показателей подойдут лучше других.

Набор критериев оценки, для каждого из которых известны его достоинства и недостатки, полезнее, чем выработка одного общего, но имеющего определенные ограничения критерия оценки рабочих показателей.

Совокупность критериев, используемых для оценки рабочих результатов сотрудника, должна отражать тот вклад, который внес данный работник в работу подразделения (организации), и служить основой для установления различий между работниками, имеющими разный уровень рабочих показателей.

Желательно, чтобы оценочные критерии опирались не только на экспертную оценку руководителей, но и на доступные объективные показатели работы (например: производительность, отсутствие претензий со стороны клиентов и др.).

При оценке степени успешности работников важно выбирать такие показатели, которые позволяют выявлять различия в уровне их профессиональной успешности. Различительная способность критериев оценки может зависеть от разных факторов: специфики профессиональной деятельности, стажа работы и др. Так, один показатель, например обучаемость, может хорошо разделять кандидатов на вакантную должность или новичков и плохо разделять работников, уже адаптировавшихся к работе в организации. В качестве критериев следует выбирать такие показатели, которые позволяют установить значимые различия между работниками по характеристикам, прямо или косвенно связанным с показателями их профессиональной успешности: производительность и качество труда, необходимость дополнительного обучения или переобучения, возможность повышения в должности и др.

Критерии оценки пишутся для конкретной должности, а не для человека. Критерии должны быть объективными и обоснованными и не зависеть от того, кто их выполняет. Выделяют несколько параметров, которые должны учитываться при разработке критериев оценки деятельности сотрудника.

1. Критерии оценки зависят от времени (сроки выполнения задания), затрат (бюджет, ограничения), качества (субъективные и объективные оценки качества, особенно при обслуживании клиентов), количества (как много и другие количественно измеряемые оставляющие).

2. Критерии привязаны к критическим показателям в работе. Очень редко, когда устанавливают показатели отлично от работы. Трудно спрогнозировать, каких результатов можно достичь.

3. Критерии должны учитывать специфические особенности (показатели), на основе которых будет сделан вывод о том, что работа успешно завершена и достигла поставленных перед ней целей. Среди таких показателей можно выделить: «необходимая информация была предоставлена вовремя»; «работа была сделана вдвое быстрее» и т.д.

4. Критерии оценки должны относиться к должностным обязанностям и рабочим функциям сотрудника.

5. Критерии оценки должны учитывать любую количественно измеряемую функцию.

6. Критерии оценки должны соответствовать целям организации, при этом достижение целей организации должно учитывать: сокращение издержек, повышение эффективности, производительности, реализации проекта, реорганизацию процесса или общественную полезность.

«Действенность критериев - это степень, до которой отборочная техника способна выполнять свою функцию предсказания важных элементов поведения на работе или коррелировать с ними» 5.

Критерии оценки являются основой для анализа соответствия деятельности сотрудника необходимым стандартам. Для того, чтобы критерии действительно работали, они должны быть достижимыми, выполнимыми, реалистичными, а самое главное - существенными для данного рабочего места. Например, для сотрудника отдела продаж основным критерием является объем продаж, а для сотрудника отдела поставок - соблюдение сроков поставок. Правильно выбранный критерий оценки дает сотруднику возможность верно расставить приоритеты в своей работе. На практике же иногда встречается, что в компании существует несколько противоречивых официальных и неофициальных критериев. «При разработке критериев необходимо помнить, что они должны стимулировать сотрудника на лучшее выполнение своей работы, а не вносить сумятицу в систему его приоритетов» 6.

После того как критерии оценки написаны, необходимо определить, соответствуют ли они следующим требованиям.

1. Реалистичны ли критерии? Критерии оценки должны быть достижимы и постоянны, что является необходимым для выполнения работы. Критерии оценки деятельности, которые отвечают ожиданиям, представляют собой тот приемлемый минимум необходимой работы для всех сотрудников, занимающих эту должность.

2. Специфичны ли критерии оценки деятельности? Критерии оценки деятельности должны информировать сотрудника о том, какие конкретные действия и результаты ожидаются от него. Критерии должны соответствовать содержанию работы. Для этого первоначально необходимо провести анализ соответствия содержания работы должностной инструкции. Облегчить эту задачу могут тарифно-квалификационные справочники.

3. Основываются ли критерии оценки деятельности на измеряемых параметрах, проверяемой информации? Деятельность может быть оценена в зависимости от сроков реализации, издержек, количества и качества. Критерий оценки является действенным (эффективным), если с его помощью можно максимально точно оценить эффективность работы конкретной категории персонала. Эффективность критерия, используемого при оценке рабочих показателей, будет низкой, если для оценки выбирают те показатели, которые слабо или совсем не связаны с эффективностью работы исполнителя. Эффективность оценочного показателя определяется через установленные связи результатов оценки с рабочими показателями. Можно выделить два подхода к повышению эффективности критериев оценки:

Объективный,

Субъективный.

Объективный подход к повышению эффективности критериев основан на сравнении работников с высокой и низкой эффективностью работы и выделении тех критериев, которые отличают эффективных работников от неэффективных.

При субъективном подходе к повышению эффективности критериев оценки следует начать с выделения показателей, подлежащих оценке. При этом может быть проведен анализ работы, положений и инструкций, регламентирующих данный вид работы. После этого эксперты оценивают соответствие выделенных характеристик и показателей профессиональной эффективности работников.

Если предполагаемый критерий никак не связан с рабочими результатами, то его следует отбрасывать, даже если есть какие-то выгоды от его использования.

4. Соответствуют ли критерии оценки деятельности организационным целям? Критерии оценки деятельности каждого конкретного сотрудника не должны противоречить целям данной организации. Успех каждого отдельного отдела зависит от стратегии всей организации. Критерии компании должны соответствовать целям организации. Если цель организации - снижение издержек, значит, оцениваться должны затраты, производимые сотрудником, и (или) коэффициент, отражающий отдачу на затраты. Некоторые измеримые критерии сложно применять для оценки деятельности отдельных сотрудников, например исполнение бюджета. В этом случае можно использовать критерии оценки деятельности отдела или подразделения. Необходимо помнить, что критерии могут изменяться в связи с изменениями целей и приоритетов организации.

5. Поощряют ли критерии оценки к успешной деятельности? Критерии оценки раскрывают деятельность, которая превосходит ожидания. Описание деятельности, которая будет превосходить ожидания, является хорошим стимулом к повышению производительности для сотрудников. Критерии должны удовлетворять стремление сотрудников быть «хорошими», «успешными». Конечно, сотрудники хотят знать, как организация оценивает их работу, но в большинстве случаев они хотят иметь представление и о перспективах дальнейшей работы в компании. Поскольку контракт между компанией и сотрудником носит двусторонний характер, критерии выполняют двойную функцию: они не только позволяют определить, насколько сотрудники подходят организации, но и установить обратное - насколько организация соответствует ожиданиям сотрудника.

6. Ясны ли и понятны критерии? Сотрудники, чья работа будет оцениваться по определенным критериям, должны знать и понимать эти критерии. Критерии оценки должны использовать профессиональный язык. Необходимо лишь выявить подходящий критерий и установить требуемые стандарты. Они должны быть четко увязаны с важнейшими характеристиками рабочего поведения и/или важнейшими результатами работы (имеющими наибольшее значение для достижения целей подразделения или организации в целом).

7. Динамичны ли критерии оценки? Как и организационные цели, и технологии, и действия, критерии оценки должны эволюционировать.

8. Надежны ли критерии? Для того, чтобы в полной мере соответствовать поставленным целям, критерий оценки работы должен обеспечивать постоянство результатов измерения. Выделяют несколько видов надежности.

1. При оценке работы сотрудников важно, чтобы повторные оценки одних и тех же показателей давали сходные результаты.

2. Однородность или согласованность оценок, даваемых работе одного и того же сотрудника разными людьми.

3. При оценке определенной стороны работы или поведения работника могут использоваться несколько показателей. Важно, чтобы все показатели давали согласованную, непротиворечивую информацию.

Показатели, используемые в качестве критериев при оценке работы, могут характеризоваться разной степенью надежности, что необходимо учитывать при принятии административных решений.

В последнее время в компаниях особенно важное значение приобретает оценка деятельности руководителей. Ориентация на качество побуждает высшее руководство компании совершенствовать менеджмент, вследствие чего основой принимаемых решений о распределении полномочий и функций, назначений и ротаций должна являться объективная оценка руководителей. Основная цель оценки деятельности руководителей - выявление существующих проблем в менеджменте.

При оценке руководителя необходимо разработать критерии оценки деятельности руководителя, которые будут учитывать специфику этой работы. В этом случае можно выделить следующие параметры, по которым будет проходить оценка: лидерство, принятие решений, взаимодействие с подчиненными. Критерии оценки могут разрабатываться с разной степенью подробности. Учесть все особенности той или иной работы достаточно трудно.

Критерии оценки - это система индикаторов, которая должна позволить оценить эффективность деятельности сотрудника. Важно иметь в виду, что для каждой должности приоритетными являются свои критерии.

1 -1

Бизнес-процессы. Моделирование, внедрение, управление Репин Владимир Владимирович

6.4. Разработка показателей для управления процессом

Для оперативного управления процессами нужна система показателей. Для определения показателей рассмотрим общую схему (рис. 6.4.1), показывающую различные потоки информации, которые получает руководитель.

Рис. 6.4.1. Оперативное управление процессами

В первую очередь руководитель получает оперативную информацию о выполнении самого процесса и его результатах. Для аналитических целей можно выделять две категории: показатели процесса и показатели продукта/услуги. Однако зачастую эти показатели очень близки по смыслу. Поэтому с практической точки зрения важно создать единую систему показателей для управления процессом – без искусственного дробления показателей на процессные и продуктовые.

Третий поток, который получает руководитель, – это информация об удовлетворенности клиентов процесса, причем как внешних, так и внутренних.

Еще один поток – информация, поступающая от вышестоящего руководителя или из органа управления.

Итак, руководителю (владельцу процесса) требуются показатели о нескольких объектах управления: процессе, продукте/услуге, клиенте и в некотором смысле о вышестоящем руководителе.

Владелец процесса может разработать различные показатели, но они обязательно должны включать следующие четыре категории (см. рис. 6.4.2):

1. Результат выполнения процесса.

2. Затраты ресурсов на выполнение процесса.

3. Время выполнения процесса.

4. Количество дефектов (несоответствий) в продуктах/услугах, полученных в результате выполнения процесса.

Рис. 6.4.2. Показатели для управления процессом

Учет этих четырех категорий при разработке обеспечивает сбалансированность системы показателей. На практике это означает, например, что при сокращении затрат на выполнение процесса или времени его выполнения уровень несоответствий готовой продукции не будет повышаться (как минимум он будет находиться под управлением). Можно много говорить об односторонней псевдооптимизации процессов, когда при росте одного из показателей существенно ухудшаются значения других, например:

Снижение затрат – увеличение длительности;

Снижение затрат – увеличение количества дефектов;

Сокращение времени выполнения – увеличение количества дефектов и т. п.

Дело в том, что независимо от наличия у компании четко сформулированной стратегии измерять результативность и эффективность ее процессов необходимо. Для этого можно использовать следующие определения:

Под результативностью понимается отношение полученного фактического результата деятельности к планируемому.

Эффективность определяется как отношение полученного фактического результата деятельности к использованным для его достижения ресурсам.

В табл. 6.4.1 показаны различные возможные отношения четырех категорий: результата процесса, затрат, времени и дефектов.

Таблица 6.4.1. Показатели результативности и эффективности

В табл. 6.4.2 и 6.4.3 – примеры показателей. В столбце «Тип» буква «Р» означает, что соответствующий показатель относится к категории «Результативность», а буква «Э» – к категории «Эффективность».

Таблица 6.4.2. Показатели процесса «Управление развитием розничной сети»

Таблица 6.4.3. Показатели процесса «Закупка товара»

Отмечу, что распределение всех показателей по категориям «Результативность» и «Эффективность» не самоцель. С практической точки зрения важно, чтобы процесс находился под контролем с точки зрения как результативности, так и эффективности.

К сожалению, эффективность процесса измеряется и становится целью управления гораздо реже, чем результативность. В некоторых компаниях при управлении процессами эффективность вообще не измеряется или измеряется несистемно, то есть нет необъективной информации о состоянии процесса. В результате потери, возникающие при выполнении процесса, не устраняются. Низкая эффективность компенсируется за счет цены на продукты/услуги. В итоге от этого страдает внешний потребитель.

Для каждого показателя, который предполагается использовать для мониторинга и управления процессом, нужно собрать и систематизировать информацию, которая позволит его идентифицировать и рассчитать. В нее входят:

Наименование и код показателя в системе показателей компании;

Перечень должностных лиц и организаций, получающих показатель в составе планов (отчетов);

Должность сотрудника, ответственного за достижение целевого значения показателя;

Должность сотрудника, ответственного за расчет показателя;

Периодичность расчета и отчетный период;

Определение показателя;

Единица измерения показателя;

Методика расчета показателя;

Перечень документов, содержащих информацию, необходимую для расчета показателя;

Перечень плановых (отчетных) форм, включающих показатель.

Наименование и код показателя в системе показателей компании

У каждого показателя должны быть четкое наименование и код, однозначно идентифицирующий его в системе показателей компании. Желательно определиться с принципами идентификации заранее, до построения системы показателей для процессов. Для идентификации следует разработать и утвердить систему кодирования показателей. Возможны различные варианты кодирования. Руководство компании может выбрать наиболее удобный способ.

Финансовые;

Рыночные;

По процессам;

По персоналу;

По инновациям.

В этом случае их можно привязать к так называемым перспективам, которые используются в методике BSC. Замечу, что иметь определения категорий показателей необязательно.

Перечень должностных лиц, получающих показатель в составе планов (отчетов)

Для каждого показателя определяют круг должностных лиц компании, которые будут получать его значение – плановое и/или фактическое – в составе планов и/или отчетов. Критерий включения показателя в документ – принятие решений на его основе. Если руководитель получает значение показателя в отчете, но никогда не принимает с его помощью управленческих решений, то стоит проанализировать, нужен ли ему такой показатель.

Должность сотрудника, ответственного за достижение целевого значения показателя

Ряд показателей в системе показателей компании служит для измерения достижения какой-либо цели. Некоторые показатели могут использоваться для мониторинга и анализа процессов.

Целевые (нормативные) значения показателей должны устанавливаться в соответствующих плановых документах организации. Для каждого показателя следует определить должностное лицо, отвечающее за достижение его целевого значения. Предполагается, что этот сотрудник, по сути, владелец процесса с определенным набором полномочий.

Должность сотрудника, ответственного за расчет показателя

На практике часто встречается ситуация, когда руководитель, отвечающий за достижение целевого значения показателя, по объективным причинам не может рассчитать этот показатель. Например, руководитель управляет производственными процессами на основании данных производственного учета, но у него нет нужной информации для оценки эффективности процессов с использованием расчета затрат. Эти данные может дать только финансовая служба (или бухгалтерия). В этом случае необходимо назначать отдельное должностное лицо, ответственное только за расчет значения показателя, но не за достижение его целевого значения. В ряде случаев сотрудник, рассчитывающий показатель, может одновременно являться и ответственным за достижение его целевого значения.

Периодичность расчета и отчетный период

Каждый показатель должен рассчитываться с определенной периодичностью и включаться в соответствующие отчетные формы, например ежемесячно или ежеквартально.

Кроме периодичности расчета, для каждого показателя целесообразно указывать отчетный период, например: «Ежемесячно до 2-го числа месяца, следующего за отчетным».

Определение показателя

Определение показателя означает краткую формулировку, дающую четкое и полное понятие о показателе. Как правило, определение показателя должно давать возможность разработать конкретную формулу для его расчета.

На практике попытки четко определить показатель часто приводят к тому, что его название и смысл корректируются.

Для корректной формулировки определения показателя необходимо участие руководителей и специалистов, связанных с выполнением соответствующего процесса.

Единица измерения показателя

Недопустима ситуация, когда один и тот же показатель в разных документах измеряется с помощью различных единиц, например: килограммы и тонны, метры кубические и тонны, количество и рубли, проценты и доли и т. п. Важно, чтобы для каждого показателя была принята одна единица измерения и она использовалась во всех документах, которые включают плановые или фактические значения показателя.

Методика (формула) расчета показателя

Методика расчета показателя может быть определена с разной степенью детализации. Как минимум она должна содержать формулу расчета показателя. Другие используемые в ней показатели, значения которых нужны для расчета, должны быть четко определены. Вообще любые источники данных для расчета показателя следует четко определить, а доступность и корректность исходных данных заранее проверить.

Перечень документов, содержащих информацию, которая необходима для расчета показателя

Информация для расчета показателя может содержаться в нескольких документах (бумажных или электронных), а также в электронных базах данных. Все эти источники должны быть определены и проверены. Сведения о них следует зафиксировать, они должны стать частью информации о соответствующем показателе.

Перечень плановых (отчетных) форм, включающих показатель

Каждый показатель включается в одну или несколько плановых и отчетных форм. Необходимо выявить эти документы и указать в соответствующем разделе при описании показателя.

Отмечу, что сейчас на рынке представлена целая линейка программ, помогающих структурировать показатели в виде иерархического справочника, вводить плановые и фактические значения, получать различного рода отчеты. В некоторых программах, относящихся к классу BPM, можно разрабатывать панели управления и т. п.

Если в компании используется среда моделирования бизнес-процессов (например, Business Studio), то ее можно использовать для:

Ведения иерархического справочника целей и показателей;

Хранения полной информации о показателе (ответственный, определение, формула расчета и т. д.);

Установления связей целей и показателей с процессами, должностями и бизнес-ролями;

Планирования показателей и формирования отчетных форм;

Формирования отчетов по показателям процессов;

На рис. 6.4.3 показан фрагмент справочника целей и показателей в Business Studio, а на рис. 6.4.4 – несложная панель управления, которую можно использовать для мониторинга изменения значений показателей по бизнес-процессам.

Рис. 6.4.3. Справочник целей и показателей в Business Studio

Рис. 6.4.4. Панель управления показателями в Business Studio

Из книги Делегирование полномочий автора Кинан Кейт

Наблюдение за процессом Представление о делегировании как о чудесной возможности сплавить кому-то задание, на выполнение которого у вас нет ни времени, ни особого желания, и тут же забыть о нем, крайне ошибочно. Делегирование подразумевает поручение выполнения основной

Из книги Решение проблем автора Кинан Кейт

Контроль над процессом Когда ваши планы начнут воплощаться в жизнь, возникнет необходимость контролировать процесс для уверенности в том, что вы в курсе всех событий и что ваше решение воплощается в жизнь. Если не следить за тем, как продвигается дело, может возникнуть

Из книги Инновационный менеджмент: учебное пособие автора Мухамедьяров А. М.

Из книги Бизнес-процессы. Моделирование, внедрение, управление автора Репин Владимир Владимирович

1.2.8. Показатели для управления процессом Чтобы управлять процессами, нужны показатели. В рамках процессного подхода для каждого процесса определяется группа показателей, которые необходимы владельцу процесса для управления. Показатель – количественный или

Из книги HR-инжиниринг автора Кондратьев Вячеслав Владимирович

1.6.5. Разработка системы показателей Этап разработки системы показателей исключительно важен для внедрения процессного управления. С моей точки зрения, значимость разработки и практического использования показателей для управления процессами многократно превышает

Из книги Управление проектами для "чайников" автора Портни Стэнли И.

2.4.3. Возможность управления сквозным процессом Представим себе, что мы выделили сквозной процесс, в котором участвуют шесть крупных структурных подразделений одной организации и два подразделения – другой. Всего в процессе участвуют около 150 сотрудников, находящихся

Из книги Должностная инструкция руководителя, или «Управленческая восьмёрка» автора Кувшинов Дмитрий

6.5. Оперативное управление процессом 6.5.1. Планирование процессов Оперативное управление осуществляется на всех уровнях иерархии менеджмента компании. Различие состоит только в масштабе управляемой деятельности.Планированием процессов занимаются их владельцы

Из книги Управление на основе ценностей. Корпоративное руководство по выживанию, успешной жизнедеятельности и умению зарабатывать деньги в XXI веке автора Гарсия Сальвадор

2.4. Разработка идеологии и стратегии управления человеческими ресурсами (стратегический HR-инжиниринг) Рис. 2.4.1. Вариант логики сценария стратегической разработки Анализ (рис. 2.4.1) является классическим первым шагом стратегического мышления. К сожалению, в УЧР этот шаг

Из книги Быстрее, лучше, дешевле [Девять методов реинжиниринга бизнес-процессов] автора Хаммер Майкл

2.14. Практикум. Разработка стратегии управления человеческими ресурсами При разработке стратегии следует исходить из того, что стратегия всегда специфична, поскольку является результатом уникального соединения уникальных объективных и субъективных условий. Эта

Из книги Глобальный кризис. За гранью очевидного автора Долан Саймон

Разработка стратегии управления рисками Для управления рисками можно выбрать один из предлагаемых подходов. Минимизируйте вероятность события риска. Примите меры по уменьшению шансов возникновения нежелательного события. Допустим, новому работнику поручено

Из книги Исполнение: Система достижения целей автора Боссиди Ларри

2.8. Разработка показателей эффективности и постановка отчётности Надо сразу отметить, что разработка показателей (их формализация) иногда не требуется, например, на временных работах. Достаточно чётко поставить задачу, описать требования по количеству работы и её

Разработка контрольных заданий, зачетных и экзаменационных вопросов, заданий для тестирования - важная часть работы преподавателя по разработке учебного курса. Содержание и характер этих заданий определяются программой учебного курса, целями и задачами, которые ставит преподаватель. В процессе этой работы может оказаться полезным уже существующий опыт других преподавателей (Турусова, 1994; Полякова, 1995; Контрольные работы по психологии, 1998; Климов, 1999; Каган, 1999).

При подготовке курса важно заранее спланировать некоторые аспекты оценочной системы.

1. Общий принцип оценивания: по «кривой нормального распределения» или в соответствии с определенными заранее заданными критериями.

2. Из каких проверочных процедур (тестов, контрольных заданий, письменных самостоятельных работ, зачета, экзамена) будет складываться общая оценка успешности изучения студентами курса.

3. Значение, которое будет придаваться различным заданиям и экзаменационным процедурам в оценивании успешности освоения студентом курса в целом.

4. Критерии в оценке успешности выполнения проверочных заданий и сдачи экзамена.

5. Какие «премиальные» и «штрафные» баллы будут начисляться в процессе учебных занятий, выполнения самостоятельных заданий, при сдаче экзамена.

6. Какие «штрафы» будут предусмотрены за более позднюю сдачу заданий, тестов?

7. Каковы минимальные критерии для получения удовлетворительной отметки по курсу?

8. Какие требования существуют в отношении сроков и способов пересдачи неудовлетворительно выполненных заданий?

Подробнее о разработке оценочной системы, проверке и оценке знаний по психологии мы говорили выше.

Рабочая программа, тематический план, критерии оценки знаний студентов необходимы для методического обеспечения работы преподавателя. Однако не менее важно, чтобы они были известны студентам с самого начала учебного курса (желательно с первого дня занятий). В этом случае они будут служить им руководством в изучении курса, напоминанием об основных сроках и заданиях, которые они должны выполнить.

Общий обзор целей, содержания и организации учебного курса, детальное разъяснение рабочей программы, ответы на вопросы студентов дают им отличное введение в курс и обычно занимают значительную часть времени на первом занятии.

8. Планирование отдельных учебных занятий и составление конспектов

Следующей задачей преподавателя является подготовка учебных занятий - лекций, семинаров, практических занятий, уроков, а также разработка заданий для самостоятельной работы. Методика проведения каждого из перечисленных видов занятий имеет свою специфику, что, естественно, отражается и на подготовке к ним. Об этом речь шла в предыдущих главах.

Здесь мы остановимся на некоторых общих моментах. Задачами подготовительной работы преподавателя к занятию являются:

Ø определение целей занятия;

Ø выбор знаний и умений, которые должны быть изучены в ходе занятия;

Ø подбор методов и приемов обучения;

Ø разработка методов контроля и оценки успешности занятия;

Ø планирование этапов занятия;

Ø подготовка конспекта (плана) занятия.

При этом важно обратить внимание на следующие вопросы:

1. Какие цели ставятся на занятии? Что должны узнать студенты (учащиеся), что изучить, какими знаниями овладеть, какие умения приобрести? Какие ценности, личностные (или профессиональные) качества будут развиваться благодаря участию в занятии?

2. Какие знания приобретут студенты (учащиеся)? Какие психологические феномены, эмпирические факты, теории, понятия, связи, закономерности будут изучаться на занятии?

3. Какие примеры и иллюстрации будут использоваться для объяснения данного учебного материала? Будут ли это данные эмпирических исследований, практической психологической работы или примеры из жизни?

4. Каким образом будут демонстрироваться возможности практического применения психологических знаний?

5. Какие умения оперирования психологическими знаниями будут формироваться на занятии?

6. Какие методы учебной работы наиболее подходят для достижения поставленных целей занятия?

7. Какие методические приемы будут способствовать усвоению определенных знаний и умений?

8. Какие раздаточные и демонстрационные материалы потребуются?

9. Какие критерии и процедуры будут использоваться для контроля и оценки успешности занятия?

10. Какие основные этапы будет включать занятие? Каковы цели каждого этапа? Какова их ориентировочная длительность? Какие виды деятельности преподавателя, с одной стороны, и студентов (учащихся), с другой стороны, планируются на каждом этапе?

Заключительным этапом подготовки к занятию является составление его конспекта, в котором обычно отражаются ответы на все вышеперечисленные вопросы. Его полезно писать (или печатать) достаточно четким и крупным шрифтом, чтобы он был читабельным и удобным в использовании в любых условиях учебного занятия. Оформление конспекта может быть разным в зависимости от вида занятий (лекция, семинар, практическое занятие, урок), однако его расположение на листе бумаги должно помогать преподавателю быстро и четко выделять наиболее важные методические аспекты занятия.

Важными задачами при разработке преподавателем заданий для самостоятельной работы студента являются:

1. формулировка цели задания, а также знаний и умений, которые должны быть усвоены при его выполнении;

2. постановка задач, которые должны быть решены при выполнении задания;

3. характеристика средств выполнения задания;

4. характеристика источников, которыми можно пользоваться при выполнении задания;

5. примерная оценка времени, которое потребуется для выполнения задания;

6. определение срока, к которому задание должно быть выполнено, и места, куда оно должно быть сдано;

7. формулировка штрафных санкций за сдачу задания позже назначенного срока;

8. разработка и формулировка критериев оценки выполненного задания.

В соответствии с вышеперечисленными задачами должна быть подготовлена четкая (желательно письменная) методическая разработка указаний по выполнению задания для студентов.

Даже если стратегия компании представляется совершенно ясной ее руководителю, этого недостаточно для того, чтобы она успешно выполнялась. стратегия должна быть понятна всем членам управленческой команды и сотрудникам, необходимы средства управления реализацией стратегии, позволяющие направлять и отслеживать траекторию движения фирмы к ее стратегическим целям. Статья посвящена методике построения сбалансированной системы показателей, которая является инструментом стратегического управления компанией.

Сбалансированной системе показателей (ССП) посвящено немало статей и книг. Однако часто те, кто хочет разобраться в этой методологии, испытывают разочарование даже после прочтения значительного количества публикаций на данную тему. Остается неясным, с чего следует начать и в какой последовательности действовать, чтобы построить работающую ССП. Данная статья является попыткой преодоления этой проблемы. В ней изложена пошаговая методика разработки ССП, хорошо отработанная на многих проектах.

В предыдущей статье автора “Разработка стратегии – первый шаг к ССП” подчеркивалась необходимость ясного определения стратегии до начала работы по созданию сбалансированной системы показателей. Действительно, прежде чем заниматься разработкой формализованной системы управления стратегией, которой является ССП, необходимо уделить особое внимание созданию самой стратегии и четкому определению ее основных положений. Только на этой прочной основе можно построить здание сбалансированной системы показателей. в настоящей статье мы будем исходить из того, что такой фундамент создан.

В качестве иллюстрации излагаемой методологии продолжим начатое в предыдущей статье рассмотрение примера разработки ССП генподрядной строительной компанией “Монолит” из Екатеринбурга. В основе этого примера лежит проект, в котором авторы выступали в качестве консультантов. Материалы проекта адаптированы для целей публикации; изменены название и местонахождение компании.

Организация проекта

Первый этап разработки ССП организационный. Нужно определить состав команды проекта, составить план работы, установить сроки, назначить ответственных исполнителей. Каждая стадия проекта должна принести конкретные результаты. Не завершив один этап, нельзя переходить к следующему.

Команда проекта – это люди, относящиеся к стратегическому уровню руководства компании, те, кто отвечает за определенные направления стратегии. В компании “Монолит” в команду проекта вошли:

  • генеральный директор;
  • заместитель генерального директора по производству;
  • директор по маркетингу;
  • директор по персоналу;
  • финансовый директор;
  • пять директоров проектов, каждый из которых руководит строительством группы объектов определенного типа (торговые центры, офисные помещения, производственные предприятия и др.).

Оптимальная численность команды – семь-десять человек. При большем числе участников сложнее организовать коллективную работу. Кроме того, в средней компании не должно быть большого количества стратегов. В крупной организации в разработке стратегии участвует значительно большее число людей, поэтому создаются несколько команд в соответствии с управленческой иерархией.

Необходимо подчеркнуть, что разработка ССП – это коллективная работа. Если ее выполнит один человек, например генеральный директор, то результат не будет иметь никакой ценности.

После того как команда сформирована, необходимо назначить руководителя проекта, администратора и архитектора системы. Руководитель отвечает за результаты проекта, имеет в своем распоряжении все необходимые ресурсы для его выполнения, принимает все ключевые решения в ходе проекта. Обычно руководитель такого проекта – это первое лицо компании.

Администратор проекта выполняет технические управленческие функции: информирование членов команды, обеспечение коммуникаций, ведение документации, контроль исполнения принятых решений и др.

Архитектором системы необходимо выбрать такого члена команды, который лучше других знаком с методологией ССП, обладает аналитическими способностями, умеет управлять дискуссией. Архитектор направляет усилия команды на протяжении всего проекта, формулирует вопросы для обсуждения, оформляет результаты каждого этапа.

В компании “Монолит” руководителем проекта стал генеральный директор, администратором – директор по персоналу. Выполнять функции архитектора было поручено консультантам.

В тех случаях, когда компания разрабатывает ССП без участия консультантов, необходимо провести предварительное обучение специалиста, который выдвигается на роль архитектора. Этот сотрудник должен изучить литературу по данной теме и посетить тренинги, на которых вырабатываются практические навыки, требующиеся для решения подобных задач. Как показывает опыт различных компаний, архитектором системы нередко становится директор по персоналу, директор по маркетингу или финансовый директор.

После того как команда проекта сформирована и ключевые роли определены, нужно обсудить и зафиксировать цели проекта. Это важно по следующим причинам:

  1. все участники проекта должны осознавать, к чему стремится команда, и это понимание должно быть единым;
  2. необходимо установить критерии успеха проекта, по которым в дальнейшем можно судить, осуществилось ли то, что планировалось сделать.

Члены команды проекта компании “Монолит” поставили следующие цели:

  • представить стратегию в виде, понятном всем сотрудникам компании;
  • четко разделить ответственность за выполнение стратегии между участниками вплоть до исполнителей;
  • создать механизм стратегического контроллинга, позволяющий отслеживать выполнение стратегии.

Когда цели зафиксированы, следует приступить к разработке плана проекта. Проекты данного типа обычно включают следующие этапы:

  1. разработка стратегических целей;
  2. составление карты стратегии;
  3. создание показателей;
  4. установление целевых значений показателей;
  5. разработка стратегических мероприятий;
  6. внедрение ССП.

На организационном этапе необходимо также определить график работы команды – установить дни, в которые она будет собираться для коллективной работы. Оптимальный вариант – проведение рабочих сессий продолжительностью четыре часа один раз в две недели. Уплотнить график обычно не получается по причине высокой занятости руководителей. Однако длительные паузы между сессиями приводят к потере энергии, растягиванию сроков проекта. Необходимо учитывать, что между сессиями идет активное выполнение домашних заданий, которые получает каждый участник проектной команды.

Разработка стратегических целей

Первая задача, которую должна решить проектная команда, – это определение стратегических целей для включения в ССП. Цели обычно группируются по четырем проекциям:

  1. финансы;
  2. рынок;
  3. процессы;
  4. потенциал.

Число проекций и их названия не предписываются методологией ССП. Смысл группировки стратегических целей в разрезе проекций состоит в том, чтобы выделить все стратегически важные аспекты деятельности компании и в каждом из них установить цели. Так, проекция “Финансы” отражает интересы акционеров и содержит наиболее значимые для них цели, связанные с ростом финансовых показателей деятельности компании. Проекция “Рынок” включает цели, касающиеся повышения удовлетворенности и лояльности клиентов, увеличения клиентской базы, объемов продаж и доли рынка. Очевидно, финансовых цели можно добиться лишь при условии достижения успехов на рынке. К проекции “Процессы” относятся цели совершенствования процессов и структур компании, за счет которых достигаются успехи в работе с клиентами и завоевании рынка. Проекция “Потенциал” имеет много альтернативных названий, однако обобщенно можно сказать, что в ней сосредоточены цели компании, связанные с развитием ее ключевых ресурсов, к которым относятся прежде всего люди. В эту же проекцию нередко включаются информационные технологии как ключевой информационный ресурс современного бизнеса. Цели данной проекции обеспечивают базу достижения успеха по всем остальным направлениям.

Определяя заранее состав проекций, мы тем самым стараемся подстраховаться от того, чтобы не упустить из поля зрения какие-либо важные стороны стратегии, поэтому подходить к выбору состава проекций нужно творчески. Нередко число проекций достигает пяти или шести главным образом за счет уточнения аспектов деятельности компании на рынке (например, может появиться проекция “Поставщики”) или детализации проекции “Потенциал” (в частности, можно выделить “Персонал” и “Информационные системы”). Нужно заметить, что увеличение числа проекций до семи и более нежелательно, поскольку это может привести к дроблению целостного стратегического видения на частные задачи.

Решив вопрос, касающийся количества проекций и их названий, можно приступать к задаче разработки целей. Исходными данными для ее решения является определение стратегии, выработанное до начала этого проекта. Каждый член команды должен предложить формулировки нескольких стратегических целей для каждой проекции. Целесообразно организовать эту работу следующим образом.

  • на собрании членов команды архитектор системы объясняет участникам, как нужно формулировать цели, в каком виде представлять результаты.
  • Получив домашнее задание, члены команды готовят свои предложения и передают их администратору проекта.
  • Администратор подготавливает материалы для групповой работы, записывая формулировки целей крупными буквами на карточки, которые помещаются на стены аудитории.
  • Команда проекта собирается для проведения мозгового штурма на тему “Определение стратегических целей компании”. Работа начинается с ознакомления с результатами домашней работы, представленными в виде каточек, которые должны быть сгруппированы по проекциям. Участники рабочей сессии, изучив представленные материалы, вносят свои дополнения и уточнения. На этом этапе не должно быть критических замечаний, однако допускаются вопросы, цель которых – уточнить смысл формулировок целей. Результатом совместной работы должен стать максимально широкий набор целей, сгруппированных по проекциям. При этом необходимо, чтобы члены команды одинаково понимали, что кроется за формулировками, зафиксированными на карточках. Сокращение числа карточек на данном этапе допускается только в случаях дублирования записанных на них определений. Таким образом, создается основа для дальнейшей работы по отбору и уточнению стратегических целей.

Для получения хороших результатов на этом этапе важно, чтобы члены проектной команды руководствовались правилами формулирования целей.

  • Цель должна представляться в виде глагола, стоящего в повелительном наклонении, с зависимым словом, например “достичь результата”, “улучшить показатели”, “снизить издержки”.
  • Цель должна иметь стратегическое значение, т.е. не быть слишком “приземленной”, соответствующей уровню мероприятия. Например, формулировка “Обеспечить грузчиков склада спецодеждой” не соответствует масштабу стратегической цели. Для решения этой задачи нет необходимости выносить ее на стратегический уровень.
  • Цель должна быть достаточно конкретной, чтобы сотрудники понимали, какие действия последуют за ее определением. Например, фраза “Улучшить моральный климат в коллективе” является слишком размытой, поэтому ее нельзя рассматривать как стратегическую цель. Это не более чем общее пожелание, не побуждающее к конкретным действиям. Когда появляются подобные формулировки, необходимо задать уточняющий вопрос: “Что именно нас не устраивает в данной ситуации, что мы хотим улучшить”? Причиной неудовлетворительного положения может быть, например демотивирующий стиль руководства менеджеров среднего звена. Тогда цель звучит таким образом: “Создать сильный средний уровень менеджмента”. Понятно, что далее будут предприняты конкретные действия по формированию, обучению и воспитанию менеджеров среднего звена.

Результаты работы проектной команды компании “Монолит”, полученные на этапе генерации стратегических целей, представлены в табл. 1.

Таблица 1. Начальный список целей для ССП

Проекция

Цели

11. Создать интернет-портал по тематике управления рисками строительных проектов 12. Подготовить и издать методическое руководство для клиентов по снижению рисков строительных проектов

Процессы

Потенциал

34. Создать собственный парк строительной техники с целью сокращения объемов субподрядных работ

Как видно из табл. 1, в ходе мозгового штурма команда сгенерировала 34 стратегические цели. Все они записаны на карточках и сопровождаются номерами для удобства дальнейшей работы с ними. При подготовке материала статьи число целей было сокращено. На самом деле количество таких карточек обычно составляет 50-100. В действительности это неплохой показатель наличия единого видения стратегии в команде. Если на этапе, предшествующем разработке ССП, все члены команды участвовали в формировании стратегии, то в ходе выбора стратегических целей они демонстрируют высокий уровень единения. При этом группа из семи-десяти человек формулирует не более 40»50 целей. Если же обсуждению стратегии не уделялось должного внимания, то разработка ССП “вязнет” в непрерывных дебатах, поскольку разброс мнений по каждому вопросу крайне широк.

Следующим шагом является критическое рассмотрение стратегических целей и отбор из начального списка тех, которые заслуживают включения в ССП. Это делается в ходе командной работы. Последовательно рассматривается каждая цель списка. При этом участники обсуждения высказывают свое мнение о ней, отвечая на следующие вопросы.

  • Согласуется ли эта цель со стратегией? Если да, то каким именно положениям стратегии она соответствует?
  • Достаточно ли конкретно определена данная цель, не нужно ли ее сформулировать более точно?
  • Не является ли эта цель слишком “мелкой”? Не следует ли отнести ее к мероприятиям?

Модератор дискуссии (обычно в этой роли выступает архитектор системы) дает возможность высказаться каждому участнику, затем резюмирует их мнения, выделяя противоположные точки зрения и сводя вместе сходные позиции. Важным моментом в этом процессе является принятие решения о том, какие цели нужно исключить, а какие оставить. Желательно приходить к решениям, которые поддерживаются всеми участниками, без нажима на них. Авторитарное давление, от кого бы оно ни исходило, разрушает командную работу, и она теряет всякий смысл. Тем не менее компромиссы в данном случае тоже неуместны, поскольку они ухудшают конечный результат. В связи с этим в ситуациях, когда аргументация оппонентов исчерпана и стороны не могут прийти к согласию, лучше всего принять решение о сохранении обсуждаемой цели в списке. На следующих этапах работы эта проблема может решиться сама собой.

Нередко при обсуждении формулировок целей некоторые участники высказывают сомнения относительно возможности измерения соответствующего показателя. Таким образом, возникает вопрос целесообразности включения обсуждаемой цели в ССП. Подобная аргументация вообще не должна рассматриваться на данном этапе. Когда дойдет очередь до разработки показателей, этот вопрос будет решен. Практика показывает, что для любой качественной цели можно разработать измеримый показатель. В формулировку цели не стоит включать числовые величины. Главное требование к определению цели следующее: она должна представлять собой конкретное словесное выражение устремлений компании. Необходимо, чтобы смысловая нагрузка была как можно более емкой. Количественные характеристики будут включены в это определение позже.

Таким образом, после общего обсуждения и выработки решений первоначальный список целей должен быть разделен на три части.

  1. Цели, предназначенные для включения в ССП. Они распределены на группы, соответствующие выбранным проекциям.
  2. Цели, не соответствующие стратегии компании. Они исключаются из дальнейшего рассмотрения. При этом их можно разделить на две группы: одни являются непродуктивными, о них нужно забыть, другие содержат правильные инициативы, для реализации которых не требуется включения в ССП, а достаточно поставить задачу руководителям соответствующих подразделений. Например, обеспечение рабочих спецодеждой можно поручить руководителю отдела снабжения, предусмотрев соответствующие расходы в бюджете. В данном случае речь идет о целях функционального уровня, не имеющих стратегического масштаба.
  3. Цели низкого уровня – это задачи, которые следует отнести к мероприятиям, обеспечивающим достижение стратегических целей. Они вписываются в стратегию компании, но должны входить в план работ по реализации стратегии, который будет разрабатываться позднее.

Проектная команда компании “Монолит” после критического рассмотрения перечня целей сформировала три списка:

  1. список целей, которые должны войти в сбалансированную систему показателей (табл. 2);
  2. список целей, не включенных в ССП (табл. 3);
  3. список стратегических мероприятий, не включенных в число целей ССП (табл. 4).

Как видно из табл. 2, в число целей ССП вошли 17 целей из первоначального списка. Это хороший результат. Необходимо стремиться к тому, чтобы количество целей в ССП было близко к 20: 15 целей мало, а 25 – уже много.

Таблица 2. Список целей, включенных ССП

Проекция

Цели

3. Увеличить прибыльность компании

4. Снизить затраты на устранение брака и простои

7. Создать уникальное рыночное позиционирование

8. Повысить эффективность управления отношениями с заказчикам

9. Увеличить стоимость услуг генподряда

10. Повысить лояльность клиентов

15. Увеличить приток целевых клиентов

16. Построить долгосрочные отношения с субподрядчиками

Процессы

19. Повысить эффективность процесса продажи проектов

20. Сократить простои в ходе проектов

21. Внедрить методы управления рисками строительных проектов

24. Повысить эффективность маркетинговых коммуникаций

Потенциал

25. Повысить профессиональный уровень руководителей проектов в сфере управления рисками

26. Создать эффективное информационное обеспечение процессов управления отношениями с клиентами

27. Обеспечить высокую мотивацию участников процесса продаж

31. Повысить квалификацию директоров проектов в сферах продаж и коммуникаций

32. Создать систему профессионального обучения и наставничества

Таблица 3. Список целей, не включенных ССП

Проекция

Цели

1. Повысить оборачиваемость капитала

2. Снизить управленческие расходы

5. Расширить набор услуг, предлагаемых заказчикам

Процессы

17. Сократить сроки подготовки тендерной документации

18. Увеличить число проектов, выполняемых компанией

Потенциал

28. Внедрить автоматизированную систему для подготовки строительных смет

30. Снизить производственные затраты за счет привлечения работников из регионов

34.Создать собственный парк строительной техники с целью сокращения объемов субподрядных работ

Таблица 4. Список задач, отнесенных к стратегическим мероприятиям

Проекция

Цели

6. Создать ассоциацию субподрядчиков для координации действий по повышению качества услуг

11. Создать интернет-портал по тематике управления рисками строительных проектов

12. Подготовить и издать методическое руководство для клиентов по снижению рисков строительных проектов

13. Разработать план маркетинга на основе нового позиционирования компании

14. Проводить регулярные опросы с целью выявления степени удовлетворенности клиентов

Процессы

22. Разработать и внедрить регламент процесса продаж

23. Создать базу данных субподрядчиков для снижения рисков выбора исполнителей работ в проектах

Потенциал

29. Провести оценку профессионального уровня сотрудников

33. Внедрить автоматизированную систему CRM для поддержки процессов управления отношениями с клиентами

Ограничение числа целей в ССП является принципиально важным требованием. Нельзя забывать, что мы занимаемся описанием стратегии, которая отражает самые важные направления развития компании. Если в ССП содержится большое количество целей, это означает, что у руководителей компании нет ясности относительно приоритетов и фактически отсутствует стратегия.

Слишком малое число целей в ССП может говорить о недостаточной конкретизации, чрезмерном обобщении формулировок.

Чем руководствовались члены команды “Монолит”, исключив из дальнейшего рассмотрения такие цели, как снижение управленческих расходов (2), расширение набора услуг, предлагаемых заказчикам (5) и другие, оказавшиеся в табл. 3? Основной критерий – это несоответствие стратегии компании. Контроль управленческих затрат должен всегда находиться поле зрения руководства. Однако это не является тем стратегическим направлением, при реализации которого команда намерена добиться решающего успеха. Если бы проблемой фирмы были непомерные затраты на управление, то, несомненно, эта цель попала бы в число стратегически значимых. Однако при разработке стратегии эта проблема не поднималась, поэтому данная цель была отклонена.

Аналогичная аргументация относится к другим целям, представленным в табл. 3.

На рассматриваемом этапе неизбежно возникает немало споров, поэтому хочется еще раз напомнить о важности тщательной работы по формированию стратегии, которая должна предшествовать созданию ССП. Члены команды, у которой есть единое видение стратегии, легче приходят к согласию при обсуждении соответствующих целей.

В завершение данного этапа работы необходимо документировать цели, включенные в ССП. кроме наименования целей, итоговый документ содержит их развернутые определения, поясняющие смысл формулировок, а также обоснование целей (почему они включены в ССП). Для каждой цели указаны исполнители и координатор, отвечающий за организацию действий, обеспечивающих ее достижение. Пример описания целей приведен в табл. 5.

Тщательное документирование результатов работы команды необходимо, для того чтобы:

  1. зафиксировать достигнутое командой согласие по определению стратегических целей;
  2. передать понимание стратегических целей менеджерам среднего звена, которые будут вовлечены в дальнейшую работу по реализации стратегии.

Таблица 5. Пример документирования стратегических целей

Цель

Перспектива ССП

Определение цели

Обоснование цели

Участники

Координатор

Снизить затраты на устранение брака и простои

Достижение предполагает значительное снижение затрат, источниками которых являются переделки по вине исполнителей строительных работ, а также оплата человеческих и иных ресурсов, не используемых по причине простоев

Достижение этой цели должно обеспечить рост рентабельности и прибыли компании

Директора проектов

Финансовый директор

Создать уникальное рыночное позиционирование

Достижение цели предполагает формирование уникальных отличий компании от конкурентов, понимаемых целевыми клиентами

Четкое позиционирование является ключом к решению целого ряда проблем компании и должно обеспечить увеличение числа целевых клиентов, повышение стоимости услуг компании, рост прибыли

Директора проектов

Директор по маркетингу

Внедрить методы управления рисками строительных проектов

Процессы

Достижение цели предполагает внедрение методов и технологий проектного менеджмента с ориентацией на снижение рисков на всех уровнях управления компанией

Применение методов и технологий проектного менеджмента должно обеспечить улучшение качества работ, соблюдение сроков, повышение удовлетворенности заказчиков

Директора проектов

Заместитель генерального директора по производству

Повысить квалификацию директоров проектов в области продаж и коммуникаций

Потенциал

Достижение цели предполагает овладение директорами проектов навыками продаж и эффективных коммуникаций с клиентами

Директора проектов играют ведущую роль в процессе продаж. Повышение их квалификации в данной области должно обеспечить результативность продаж и рост числа договоров, заключенных с целевыми клиентами

Директора проектов

Директор по маркетингу

Разработка карты стратегии

Карта стратегии отражает стратегические цели и взаимосвязи между ними. Создатели методологии Balanced Scorecard Д. Нортон и Р. Каплан дали новое определение корпоративной стратегии как цепочке причинно-следственных связей. В соответствии с этим карта стратегии наглядно представляет стратегию компании.

Карта стратегии разрабатывается с участием всей команды. Карточки с целями размещаются на доске с помощью клейкой ленты. Наверху располагаются цели проекции “Финансы”, под ними – проекции “Рынок”, еще ниже – проекций “Процессы” и “Потенциал”. Ведущий рабочей сессии выбирает одну из целей проекции “Финансы” и просит участников назвать другие ее цели, достижение которых будет способствовать приближению к первой.

В рассматриваемом примере компании “Монолит” архитектор системы, ведущий дискуссию, выбрал цель “Повысить прибыльность компании» (3) и попросил высказаться участников относительно связанных с ней целей. Члены команды дружно указали на цель “Снизить затраты на устранение брака и простои” (4). По общему мнению, ее достижение будет способствовать повышению прибыли компании. Модератор открепил карточку с целью 4 от доски и поместил ее под целью 3, а затем провел фломастером стрелку от цели 4 к цели 3. Далее он попросил назвать цели проекции “Рынок”, помогающие достичь цели 3. Сначала многие из присутствующих настаивали на том, что каждая цель этой проекции помогает повысить прибыль. Однако после разъяснения ведущего о том, что необходимо выделять прямые, наиболее значимые связи, участники дискуссии сошлись на том, что непосредственное воздействие на прибыль оказывают следующие цели: “Повысить стоимость услуг генподряда” (9) и “Увеличить приток целевых клиентов” (15). Остальные цели этой проекции влияют на прибыль опосредованно. Когда карточки с целями 9 и 15 были перемещены на новые места и соединены стрелками с целью 3, ведущий предложил поработать с проекцией “Процессы”. Нет ли в ней целей, непосредственно связанных с целью 3? Было решено, что на прибыль оказывает влияние цель “Повысить эффективность процесса продажи проектов” (19). В проекции “Потенциал” целей, которые можно связать с целью 3, обнаружено не было.

После этого ведущий выбрал цель 4, и команда последовательно рассмотрела наличие связей между ней и целями, расположенными в других проекциях.

Таким образом, был проведен анализ каждой цели и выявлены все существенные связи. В ходе этой работы карточки перемещались по доске, стрелки между ними прочерчивались, стирались и проводились заново. В конце концов, схема приобрела стройность и законченность, а члены команды получили удовлетворение от хорошо выполненной работы. Стратегия компании получила зримое воплощение (см. рисунок).


Рисунок. Карта стратегии компании

Для получения хороших результатов на этапе разработки карты стратегии полезно руководствоваться несколькими правилами.

  • Не стремиться обозначать все сколько-нибудь значимые взаимосвязи между целями. Необходимо выделять только самые существенные связи.
  • Не дублировать связи: если существует последовательность связей между целями А и В, а также между В и С, то не нужно соединять стрелкой цели А и С. Это ничего нового не добавляет к логике схемы (А и С и так связаны через В), но перегружает ее, делая более сложной для восприятия.
  • Стараться так располагать на схеме цели и связи, чтобы избегать пересечения стрелок. Как правило, это удается, если схема не содержит лишних связей.

Необходимо помнить, что карта стратегии выполняет коммуникативную функцию, т.е. объясняет всем заинтересованным сторонам смысл стратегии компании, поэтому карта должна быть построена так, чтобы создавался ясный и убедительный образ стратегии.

После завершения построения причинно-следственных связей все цели должны быть соединены с другими, при этом от каждой из них должна выстраиваться цепочка, выводящая на самую верхнюю цель, изображенную на схеме. Если для каких-то целей эти правила не соблюдаются, это означает, что данные цели являются “лишними”, соответственно, их следует удалить с карты стратегии или подумать о промежуточных целях, которые должны связать тупиковые ветви схемы с ее вершиной.

Построение карты стратегии является первым результатом в процессе создания ССП, представляющим самостоятельную ценность. Действительно, руководство компании получает мощный коммуникативный инструмент, помогающий членам управленческой команды понять стратегию и объяснить ее акционерам, сотрудникам, партнерам.

Для того чтобы данная карта превратилась в инструмент управления реализацией стратегии, необходимо:

  • разработать показатели, с помощью которых можно измерить “расстояние” до целей;
  • установить целевые значения показателей;
  • разработать комплекс стратегических мероприятий, проектов, обеспечивающих достижение целей;
  • внедрить сбалансированную систему показателей, обеспечив регулярное поступление данных для мониторинга целевых показателей, формирование отчетности.

Эти задачи будут рассматриваться во второй части статьи.

УДК 338.23

разработка системы критериев

и методических подходов

к экспертной оценке эффективности

деятельности научных организаций*

с. В. ПРОНИЧКИН, кандидат технических наук, старший научный сотрудник E-mail: pronichkin@mail. ru Институт системного анализа РАН И. П. ТИХОНОВ, кандидат технических наук, ведущий научный сотрудник E-mail: 8tat@mail. ru Институт химической физики РАН

В статье представлены результаты сравнительного анализа существующих подходов к оценке эффективности деятельности научных организаций в России и за рубежом. Для оценки эффективности деятельности научных организаций предложено использовать вербальные экспертные методы, которые не требуют проведения громоздких и трудоемких вычислений множества числовых показателей и весовых коэффициентов, основываются на предлагаемой оригинальной системе качественных критериев.

Ключевые слова: критерий, вербальный анализ решений, экспертиза, компетентность.

Экономика современных промышленно развитых стран все в большей степени основывается на знаниях, которые воплощаются в результатах научно-технической деятельности. Одним из главных источников развития научно-технического комплекса России, его реструктуризации, модернизации и устойчивого подъема при переходе к инновационному типу развития являются результаты фунда-

* Статья подготовлена при поддержке РФФИ (проект № 12-07-00509).

ментальных исследований. Большинство государственных инвестиций в исследования и разработки фундаментального характера имеют своей целью содействие расширению фундаментальной базы знаний. Оценка эффективности деятельности научных организаций позволит различным федеральным органам более эффективно разрабатывать политику развития научного комплекса России .

Анализ опыта деятельности научных организаций зарубежных стран показал, что можно выделить два подхода к оценке эффективности их деятельности, которые лучше рассмотреть на примере. Обратимся сначала к опыту Европы (выделим Великобританию), а затем рассмотрим опыт России.

Фундаментальными исследованиями в Великобритании занимаются так называемые классические университеты. Оценка их деятельности осуществляется регулярно, раз в три года университет направляет на экспертизу отчет, в котором указывает наиболее значимые результаты своей деятельности. Отчет поступает на экспертизу (peer review), которая является анонимной с двух сторон (double blind). В качестве экспертов выступают ведущие

специалисты от бизнес-сообщества и ученые из образовательных учреждений.

Научная деятельность в Великобритании оценивается по полученным результатам с использованием всего трех критериев :

1) новизна, значимость и глубина проработки;

2) масштабность результата исследования;

3) конкурентоспособность.

Каждый из критериев имеет пять градаций оценок. Каждая градация имеет словесное описание применительно к конкретной сфере научного знания (например, физика, химия, социология). Всего выделено 36 областей научного знания.

Критерию сопоставлен коэффициент его важности: 1 - 0,65; 2 - 0,2; 3 - 0,15.

Градации шкалы критерия сопоставлены баллы: 0, 1, 2, 3, 4, 5.

Подход к оценке результатов научной деятельности в Великобритании основывается исключительно на экспертных количественных оценках.

Рассмотрим российский опыт. Согласно официально принятой типовой методике, утвержденной приказом Министерства образования и науки РФ от 14.10.2009 №№ 406, оценка результативности деятельности научных организаций, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения, проводится на основе анализа и сопоставления показателей результативности их деятельности . Оценка проводится ежегодно, причем установлены шесть основных направлений оценки, по каждому из них выбраны несколько критериев и соответствующих количественных показателей:

1) научный потенциал и эффективность научных исследований;

2) вовлеченность научной организации в национальное и мировое научно-образовательное сообщество;

3) коммерциализация и прикладное значение результатов исследований;

4) кадровая обеспеченность научной организации;

5) ресурсная обеспеченность научной организации;

6) состояние финансовой деятельности научной организации.

Предусматривается также, что возможна одновременная оценка группы научных организаций, имеющих сходные цели, работающих в одной области науки или осуществляющих деятельность в

сходных условиях (референтные группы). Однако отсутствуют ясные правила формирования референтных групп, в типовой методике указывается, что референтые группы формируются по мере необходимости. В референтной группе организации сравниваются по общим для всех организаций показателям.

В указанные шесть групп критериев включаются исключительно количественные «измеримые» показатели, а именно: удельный вес внутренних затрат на исследования и разработки в общем объеме выполненных научной организацией работ; число публикаций работников научной организации, индексируемых в базе данных Web of Science; число охраняемых объектов интеллектуальной собственности.

Подход к оценке результатов научной деятельности в России основывается исключительно на количественных показателях.

Отметим ключевые методологические отличия официального подхода к оценке деятельности научных организаций, принятого в России, по сравнению с подходом, принятым в Великобритании.

В России не учитывается длительность цикла производства фундаментального научного результата. Если взять такие области знания, как физику, химию, биологию, то длительность цикла научного исследования и соответственно публикация его результатов, как правило, занимает гораздо больше времени, чем для гуманитарных наук (например экономики). Таким образом, классифицировать и ранжировать научные организации разных профилей по числу публикаций просто нецелесообразно, поскольку они практически несравнимы.

Отличительной особенностью подхода в России является большое количество показателей оценки - 48. Такое количество показателей создает известные трудности по их сбору, обработке и анализу, причем предопределяет невозможность выделить главное. Видимо, кто-то основывается на вере в то, что с помощью большого числа показателей в науке можно что-то точнее охарактеризовать. Однако получается, что «вместе с водой выплескиваем и ребенка»: хотели как лучше, а получается как всегда. Обстоятельная критика такого подхода, применяемого в настоящее время для оценки высших учебных заведений категории «национальный исследовательский университет», представлена в работе С. В. Проничкина, В. И. Круглова, В. П. Соловьева, А. И. Кочетова .

В работе А. Ф. Яковлева справедливо отмечено, что ряд показателей типовой методики не могут быть применены при оценке социогумани-тарных исследований: патентные исследования, коммерциализация результатов и взаимодействие с реальным сектором экономики. Эти показатели должны быть заменены на другие, релевантные гуманитарным исследованиям.

Важно отметить, что системы оценки в России и Великобритании не разделяют науку на фундаментальную и прикладную. Если это фундаментальная наука, то нужно оценивать качество фундаментальных результатов, практическое использование которых часто трудно представить. А если это прикладные исследования, то надо оценивать те практические результаты, которые получены.

Ключевым недостатком подходов как в России, так и в Великобритании является то, что и те и другие используют так называемый количественный подход, основанный на числовом измерении показателей, которыми характеризуются объекты. Однако, несмотря на кажущуюся простоту и очевидность, количественный подход мало пригоден для работы с качественными характеристиками, ведь он содержит целый ряд методологических дефектов. Укажем наиболее важные из этих дефектов.

Практически невозможно априори назначить количественные шкалы оценок, сопоставив качественным факторам какие-либо числа так, чтобы они «правильно» и «объективно» выражали плохо формализуемые свойства научно-технических результатов и одинаково понимались разными людьми.

При этом не существует никакой содержательной аргументации в пользу выбора той или иной градации шкалы числовых оценок (например, использование шкалы с градациями 1-2-3, 1-3-5-7-9 или др.). Более того, как было убедительно показано, использование порядковых шкал, имеющих разные числовые шкалы, даже по одним и тем же критериям может привести к совершенно разным итоговым упорядочениям и разбиениям на классы исходной совокупности объектов. Тем самым, задавая произвольные градации оценок на шкалах, можно получить любую наперед заданную ранжировку и любую классификацию многопризнаковых объектов.

Наконец, при использовании шкал числовых оценок появляется искушение сформулировать один «простой» и «понятный» итоговый показатель, агрегирующий частные оценки (который

обычно задается в виде суммы, взвешенной суммы или некоторой усредненной оценки), по величине которого и проводится сравнение объектов. В этом случае происходит смешение разнородных показателей, важных и неважных факторов, оценок разных экспертов, что делает невозможным выделение наиболее значимых для выбора показателей, увеличивает возможность присвоения содержательно незначительным результатам научных организаций достаточно высоких итоговых оценок.

Предлагаемые в существующих методиках многочисленные числовые коэффициенты, получаемые, как правило, экспертным путем, а также огромный спектр оцениваемых параметров не только значительно усложняют процесс мониторинга и вычисления интегральной оценки, но и затрудняют объяснение вычисленных значений оценки. Поэтому достоверность получаемых результатов не может считаться достаточной для принятия решений о финансировании исследований за счет средств федерального бюджета.

Практика мониторинга деятельности научных учреждений, выполняющих фундаментальные и прикладные исследования, требует достаточно простой, понятной и недорогой в использовании методологии оценки эффективности их деятельности.

Анализ числовых показателей, используемых в типовой методике, позволяет определить состояние отдельных направлений деятельности научной организации, выделить ее «сильные и слабые стороны». Гораздо сложнее при таком подходе провести сравнительный анализ нескольких организаций. На сегодняшний день задача разработки адекватного методического подхода к определению обобщенных итоговых показателей для сравнительного анализа эффективности научных организаций по существу остается актуальной.

Эффективность деятельности научной организации (эффективность ее результатов) наиболее адекватно можно характеризовать исключительно разнообразными качественными показателями. При этом требуемая информация о разных аспектах результата деятельности научной организации может быть получена, главным образом, по результатам экспертизы.

В исследованиях А. Б. Петровского, Г. В. Рой-зензона, И. П. Тихонова, А. В. Балышева, Э. Н. Яковлева для оценки деятельности научных организаций используется разработанная специалистами

экспертно-аналитического центра Минобрнауки России и Института системного анализа РАН система из 11 качественных критериев, объединенных в две группы: 1) оценки научной деятельности (НД); 2) оценки финансово-экономической деятельности. Группа оценки НД включает пять критериев:

1) уровень научных результатов;

2) признание научных результатов;

3) квалификация научных кадров;

4) возраст научных работников;

5) степень обновления научного оборудования.

Среди этих критериев важнейшим является

первый - «Уровень научных результатов», ведь именно результаты, собственно научная продукция, являются первоосновой при оценке эффективности научных организаций. Поэтому применительно именно к этому критерию рассмотрим далее возможности применения адекватных методов оценки.

В данной работе предлагается новый подход к многокритериальной экспертной оценке и анализу эффективности деятельности научных организаций. Предлагаемая методология основывается на групповом упорядочивании многопризнаковых объектов с использованием оригинальных методов вербального (качественного) анализа решений .

Вербальный анализ решений представляет собой относительно новый подход в теории и практике многокритериальной оценки и сравнения альтернатив. Он разрабатывается в течение многих лет в Институте системного анализа РАН сначала под руководством академика РАН О. И. Ларичева, а затем доктора технических наук А. Б. Петровского, причем успешно применяется при решении различных задач. Особенностью этих задач является описание рассматриваемых объектов (вариантов, альтернатив) при помощи многих признаков как количественных, так и качественных (последние играют не меньшую роль, чем первые). Степень достижения требуемого значения показателя качества измеряется многими критериями с вербальными шкалами.

В развитие упомянутых исследований для более детальной оценки результатов научных организаций в рамках критерия «Уровень научных результатов» была разработана система, состоящая из семи качественных критериев:

1) характер результата:

Теоретический результат;

Экспериментальный результат, имеющий материальное воплощение и направленный на

создание и совершенствование промышленных технологий и продукции;

Информационный результат, не имеющий материального воплощения и направленный на создание и совершенствование социальных технологий;

Результат опытно-конструкторской разработки;

Тестирование, испытание, апробация;

2) вид результата:

Автоматизированный комплекс;

Автоматизированная система;

Агрегат;

Алгоритм;

Аппарат;

База данных;

Другие виды;

3) вклад результата в решение основных задач научной организации:

Результат вносит существенный вклад в решение основных задач научной организации;

Результат вносит определенный вклад в решение основных задач научной организации;

Результат вносит некоторый вклад в решение основных задач научной организации;

Результат не влияет на решение основных задач научной организации;

4) вклад результата в решение социальных проблем:

Создание условий для повышения качества жизни;

Повышение уровня образованности и информированности населения;

5) востребованность результата:

Актуальность результата;

Уровень научно-технической значимости результата;

Уровень конкурентоспособности результата;

Возможный спрос на результат;

Возможная сфера использования результата;

Возможный масштаб применения результата;

6) практическая реализуемость результата:

Степень проработки результата;

Возможность тиражирования результата;

Уровень правовой охраны результата;

Возможные сроки практической реализации результата;

7) готовность потребителей к освоению результата:

Готовность производственной базы к освоению результата;

Готовность производственного персонала к освоению результата;

Готовность системы материально-технического обеспечения к освоению результата;

Наличие финансовых средств для освоения результата;

Наличие опыта освоения результата.

Первые два критерия классифицируют результаты по характеру и виду. Третий критерий учитывает непосредственный вклад результата в решение основных задач научной организации. Четвертый критерий дает оценку вклада результата научной организации в решение социальных проблем. Пятый критерий позволяет получить оценку востребованности результата научной организации.

Возможность практической реализации результата научной организации служит основой научно-технического прогресса . Для оценки практической значимости результата предназначены шестой и седьмой критерии.

Критерии с четвертого по седьмой включают в себя подкритерии, их характеризующие.

Для каждого критерия (подкритерия) была разработана вербальная шкала с небольшим числом градаций, обеспечивающих ясную различимость оценок. Например, шкала подкритерия «Актуальность результата» имеет такой вид:

Требуется безотлагательное применение результата;

Результат потребуется в ближайшее время;

Результат потребуется в отдаленной перспективе;

Оценить неотложность применения результата затруднительно.

Для организации и проведения экспертизы результатов научных организаций разработаны методические рекомендации, в которых нашли отражение следующие ключевые моменты:

1) общие положения;

2) цели, задачи и принципы экспертизы;

3) объекты и субъекты экспертизы;

4) порядок проведения экспертизы;

5) нормативно-методическое обеспечение экспертизы;

6) организационно-техническое и финансовое обеспечение экспертизы.

Объектами экспертизы служат результаты научных организаций. Для инвентаризации и анали-тико-информационного представления результатов создается специализированный реестр, который

обеспечивает автоматизированный поиск требуемых данных по критериям оценки результатов, другим ключевым показателям и индикаторам. Организационно-методическое обеспечение, предназначенное для построения и ведения реестра результатов научных организаций, предусматривает реализацию следующих положений:

1) цели и основные принципы создания и функционирования реестра;

2) структура реестра;

3) права и обязанности держателя реестра;

4) пользователи реестра и их взаимоотношение с держателем реестра;

5) ликвидация реестра.

Субъектами экспертизы выступают эксперты - известные ученые и специалисты, работающие в институтах РАН, высших учебных заведениях, отраслевых научных организациях. Отбор экспертов представляет собой достаточно сложную задачу, от решения которой в значительной мере зависит эффективность использования методов сбора и обработки суждений экспертов и, в конечном итоге, качество экспертизы в целом и корректность решений, принимаемых на базе экспертных заключений.

Определенную помощь при отборе экспертов может оказать сопоставление кандидатов в эксперты по индивидуальным качествам, которыми должен обладать, по мнению психологов и специалистов по проведению экспертиз, «идеальный» эксперт . При формировании реестра экспертов целесообразно учитывать их компетентность, которую можно оценить, например, по следующим показателям:

1) профиль и уровень образования;

2) связь профиля профессиональной деятельности с областью экспертизы;

3) опыт и стаж работы по профилю;

4) характер и уровень проблем, рассмотренных ранее экспертом, выполненных экспертиз, сбывшихся прогнозов.

Процедура экспертизы результатов научных организаций предусматривает индивидуальную работу экспертов по многокритериальной оценке результатов и анализ итогов экспертизы по различным критериям.

В целях повышения обоснованности экспертной оценки каждый результат независимо оценивается несколькими (не менее чем двумя) экспертами. Эксперт изучает представленный ему объект экспертизы, оценивает полученный научный результат по критериям, приведенным в экспертной анкете, а также

дает свое письменное агрегированное заключение о значимости результата, которое служит основой для подготовки обобщенного экспертного заключения. Результатами индивидуальной экспертизы являются многокритериальная экспертная оценка научного результата и письменное экспертное заключение.

Формализацию понятия «эффективность деятельности научной организации» предлагается рассматривать как задачу классификации многопризнаковых объектов, где объектами служат различные комбинации вербальных оценок результата организации по приведенным выше критериям, а классами решений являются различные градации интегрального критерия «Эффективность деятельности научной организации». Градации порядковой шкалы интегрального (комплексного) критерия эффективности деятельности организации определяют агрегированные упорядоченные оценки результата по критериям, которые характеризуют деятельность как высокоэффективную, эффективную или низкоэффективную.

Ранжирование результатов научных организаций предлагается осуществлять, используя метод группового упорядочения объектов АРАМИС (агрегирование и ранжирование альтернатив относительно многопризнаковых идеальных ситуаций) . Метод основан на расчете близости объекта к идеальному объекту, имеющему наилучшие/наихудшие оценки по всем критериям, данными всеми экспертами. Преимущество метода АРАМИС заключается в том, что он позволяет ранжировать объекты, которые оценены несколькими экспертами по многим качественным критериям, без построения индивидуальных ранжировок, причем исключает необоснованную трансформацию исходной вербальной информации в числовую форму.

В заключение следует отметить, что предлагаемые методические подходы и система критериев представляют собой прозрачный механизм оценки деятельности научных организаций по их результатам. Методические подходы не требуют проведения громоздких и трудоемких вычислений сотен числовых показателей и весовых коэффициентов. Данная работа будет продолжена в дальнейшем в направлении детализации остальных критериев оценки результатов деятельности научных организаций.

Список литературы

1. Ларичев О. И. Вербальный анализ решений / под ред. А. Б. Петровского. М.: Наука, 2006.

2. Многокритериальный анализ деятельности научных организаций / А. Б. Петровский, Г. В. Рой-зензон, И. П. Тихонов, А. В. Балышев, Э. Н. Яковлев // XIII Национальная конференция по искусственному интеллекту с международным участием (КИИ-2012). Труды конференции. Т. 3. Белгород: Изд-во БГТУ. 2012. С. 64-71.

3. Неволин И. В., Хрусталёв О. Е., Хрус-талёв Ю. Е. Методология оценки финансовой значимости и реализуемости инновационных проектов создания интеллектуальной продукции // Финансовая аналитика: проблемы и решения. 2013. № 11 (149). С. 39-45.

4. Проничкин С. В., Круглов В. И., Соловьев В. П., Кочетов А. И. Разработка критериальной модели для независимой оценки деятельности вуза категории «Национальный исследовательский университет» // Высшее образование сегодня. 2010. № 7. С. 6-16.

5. Петровский А. Б. Теория принятия решений. М.: Изд. центр «Академия», 2009.

6. Проничкин С. В. Разработка компетентнос-тной модели эксперта для независимой оценки образовательной деятельности вузов // Сб. мат-лов Международной межвузовской и институтской научно-технической конференции «64-е дни науки студентов МИСиС», 14-21.04.2009, ГТУ ВПО «Московский институт стали и сплавов «МИСиС». М.: МИСиС, 2009. С. 399-400.

7. Рощин А. В., Тихонов И. П., Проничкин С. В. Методический подход к оценке эффективности результатов научно-технических программ // Экономический анализ: теория и практика. 2013. № 21 (324). С. 10-18.

8. Типовая методика оценки результативности деятельности научных организаций, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения: утверждена приказом Министерства образования и науки РФ от 14.10.2009 № 406.

9. Яковлева А. Ф. Об основных подходах к оценке результативности научных исследований в России // Измерение философии. Об основаниях и критериях оценки результативности философских и социогуманитарных исследований / Ин-т философии РАН; сост. и отв. ред. А. В. Рубцов. М. : ИФРАН, 2012. С. 144-156.

10. Higher Education Funding Council for England, Research Assessment Exercise 2014 «Assessment criteria and level definitions». Bristol: HEFCE, 2013.

Похожие публикации