Метод оценки деятельности организации (на примере органов государственного пожарного надзора МЧС России)

Размещено на http://www.Allbest.Ru/

Метод оценки деятельности организации (на примере органов государственного пожарного надзора МЧС России)

Аннотация

Актуальность и цели. С введением в действие актуализированных нормативных правовых документов, регламентирующих процедуры осуществления надзорной деятельности и профилактической работы, дознания по делам о пожарах, лицензирования и предоставления услуг в области пожарной безопасности возникла необходимость корректировки методов оценки деятельности органов государственного пожарного надзора.

В этой связи одной из целей совершенствования форм и методов работы надзорных органов в области пожарной безопасности является разработка системы показателей, критериев и модели оценки их деятельности с позиции применения механизмов функционирования организационных структур.

Материалы и методы. Для разработки модели оценки деятельности органов государственного пожарного надзора исследованы статистические данные, формируемые в информационных системах МЧС России по осуществлению надзорной деятельности и профилактической работы, дознанию по делам о пожарах, лицензированию и предоставлению услуг в области пожарной безопасности. На основе применения функции Харрингтона разработаны расчетные зависимости по количественным оценкам деятельности как по отдельным ее направлениям, так и по общей их совокупности.

Результаты. С использованием механизмов функционирования организационных структур применительно к деятельности органов государственного пожарного надзора разработан метод оценки деятельности организации, включающий систему показателей, критерии и математические зависимости. Метод внедрен в МЧС России.

Выводы. Предложенный метод позволяет проводить количественные оценки деятельности организаций и определять их сравнительные рейтинги.

Ключевые слова: организация, оценка деятельности, показатели оценки, критерии, функция Харрингтона, органы государственного пожарного надзора

Abstract

Background. With the introduction of the updated regulatory legal documents regulating the procedures for the implementation of supervisory activities and preventive work, inquiries on fire cases, licensing and the provision of services in the field of fire safety, it became necessary to adjust the methods for assessing the activities of state fire supervision authorities. In this regard, one of the goals of improving the forms and methods of work of supervisory authorities in the field of fire safety is to develop a system of indicators, criteria and models for evaluating their activities from the standpoint of applying the mechanisms to the functioning of organizational structures.

Materials and methods. To develop a model for evaluating the activities of the state fire supervision authorities, the statistical data generated in the information systems of the Ministry of Emergency Situations of Russia for the implementation of supervisory activities and preventive work, inquiry into fire cases, licensing and provision of services in the field of fire safety were studied. Based on the application of the Harrington function, calculated dependencies were developed for quantitative assessments of activities, both in its individual areas and in their totality.

Results. Using the mechanisms of functioning of organizational structures, in relation to the activities of state fire supervision bodies, method for assessing the activities of an organization has been developed, including a system of indicators, criteria and mathematical dependencies. The method has been implemented in the EMERCOM of Russia. Conclusions. The proposed method makes it possible to carry out quantitative assessments of the activities of organizations and determine their comparative ratings.

Keywords: organization, performance evaluation, evaluation indicators, criteria, Harrington's function, state fire authorities

Введение

В контексте функционирования организационных структур [1, 2], под которыми понимаются субъекты хозяйственной деятельности (организации, учреждения, предприятия, фирмы), для проведения оценки их деятельности требуется применить систему показателей с использованием максимального количества информации о различных аспектах деятельности организации, а также разработать критерии и математическую модель по проведению количественных оценок данной деятельности. При этом в общем виде оценка деятельности субъектов хозяйственной деятельности представляет собой некоторую обобщенную итоговую числовую характеристику, полученную в результате анализа выбранной системы показателей, отражающих основные аспекты процессов функционирования организаций, и содержащую обобщающие выводы о результатах этой деятельности.

Основными принципами формирования оценки деятельности субъектов хозяйственной деятельности являются такие факторы, как: количественный ее характер; комплексность; текущая согласованность с практикой; гибкость настройки; непрерывность развития; возможность автоматизации процедур расчета. Количественный характер оценки результатов деятельности определяется на основе применения формализованных процедур с использованием информационных данных из действующей статистической отчетности по различным направлениям функционирования. Допускается применение экспертных оценок. Комплексность обеспечивается путем применения системы исходных показателей, которые определяют все виды и направления деятельности. Согласованность с существующей практикой обеспечивается за счет формирования оценки на базе тех исходных показателей, по которым собрана достоверная и полная информация. Гибкость настройки и непрерывность развития осуществляется путем определения состава исходных показателей для проведения оценки деятельности субъектов хозяйственной деятельности в соответствии со стратегией и тактикой их управления. Автоматизация определяет возможность ускорения процессов расчетов для последующего принятия решений.

Проведение оценки деятельности субъектов хозяйственной деятельности позволяет сравнивать их деятельность между собой путем ранжирования по некому рейтингу. В методологическом понимании рейтинг - это обобщающая количественная оценка состояния хозяйствующих субъектов, которая позволяет отнести его к некоторому классу или категории. При этом оценка результатов деятельности может проводиться не только в сравнении с другими типовыми организациями, но и в сравнении деятельности одной и той же организации за разные периоды времени.

Проблематика исследования. Основным направлением исследования является разработка метода и алгоритма анализа описываемых организационных структур с целью дальнейшей оценки их деятельности.

К основным особенностям построения метода оценки деятельности органов ГПН относится то обстоятельство, что в их служебной деятельности используется широкий спектр разнородных и разнозначных показателей. В этой связи возникает необходимость разработки модели оценки деятельности, предусматривающей возможность преобразования значений разнородных и разнозначных показателей с учетом их весовых коэффициентов в единую шкалу измерения итогового показателя. Такой подход применяется в методе, изложенном в работе [13]. Для формирования итогового показателя (агрегирования) все значения частных показателей должны отвечать следующим условиям:

- принадлежать заданному диапазону (чаще всего это отрезок [0,1]);

- множество значений стандартизованного показателя должны образовывать монотонную последовательность;

- последовательность должна иметь одну и ту же направленность для всех стандартизованных показателей.

Наилучшим образом данные условия выполняются при применении шкалы преобразования Харрингтона (функции желательности). В основе построения функции желательности Харрингтона лежит идея преобразования натуральных значений частных показателей в безразмерную шкалу желательности или предпочтительности.

Метод построения оценки деятельности органов ГПН включал сбор, анализ и обработку статистических данных, необходимых для определения числовых значений исходной системы базовых показателей ({у}), сгруппированных по пяти направлениям:

- деятельность по улучшению обстановки с пожарами;

- организация и осуществление надзорной деятельности и профилактической работы;

- организация и осуществление дознания по делам о пожарах;

- организация и осуществление лицензирования и предоставления государственных услуг;

- коррупционные проявления.

Всего рассмотрено 25 единиц базовых показателей. Источниками числовых данных по ним являлись ведомственные формы статистической отчетности по осуществлению федерального государственного пожарного надзора. Кроме этого, применялись данные информационных систем МЧС России, а именно:

- автоматизированная аналитическая система поддержки и управления контрольно-надзорными органами МЧС России;

- государственная информационная система «Типовое облачное решение автоматизации контрольной (надзорной) деятельности»;

- федеральная государственная информационная система досудебного обжалования;

- единая информационная среда цифровизации процессов представления государственных услуг в сфере обеспечения пожарной безопасности и безопасности людей на водных объектах физическим лицам, субъектам малого и среднего предпринимательства, индивидуальным предпринимателям, а также мониторинга пожарной безопасности объектов защиты.

Для проведения вычислительных процедур по преобразованию исходной базовой системы показателей в обобщающую оценку деятельности применена функция желательности Харрингтона вида

(1)

где e - обозначение основания натурального логарифма (экспоненты);

у - кодированное значение базового показателя на промежуточной шкале преобразований.

Согласно теоретическим представлениям [13], для преобразования исходного показателя по функции желательности Харрингтона (1) необходимо установить границы допустимых его значений. Ограничения показателя могут устанавливаться как односторонние, так и двусторонние. Односторонние ограничения задаются, если изменение функции желательности (1) происходит только при однонаправленной трансформации показателя. Односторонние ограничения обозначаются в виде у ? y_max (действует правило: «чем меньше, тем лучше») или у?y_min (действует правило: «чем больше, тем лучше»), двусторонние задаются в виде y_min ? у ? y_max.

Безразмерные значения функции желательности d_i изменяются в интервале [0,1]. Значение і-го базового показателя d_i, переведенное в безразмерную шкалу желательности, называется частной желательностью (і = 1, 2, 3, ..., n - текущий номер базового показателя, n - количество базовых показателей). При этом значение d_i = 1 соответствует наиболее желаемой, но не всегда достижимой величине і-го базового показателя; d_і = 0 соответствует неприемлемой величине і-го базового показателя.

При одностороннем ограничении у? y_max («чем меньше, тем лучше») или у?ymin («чем больше, тем лучше») числовое значение на шкале желательности d_i = 0,37 приблизительно соответствует значению ymax или ymin.

Выбор именно этого числового значения связан с тем, что оно определяет точку перегиба функции Харрингтона (1), что в свою очередь создает определенные удобства при вычислениях. То же самое верно для значения желательности, соответствующей d_i = 0,63.

В исследованиях применена функция Харрингтона для одностороннего ограничения. Примеры поведения такой функции с учетом различных правил преобразования базового показателя приведены на рис. 1.

Рис. 1. Примеры поведения функции Харрингтона с учетом различных правил преобразования базового показателя: а - правила «чем меньше, тем лучше»; б - правила «чем больше, тем лучше»

Определение связи исходного (у) и промежуточного (у') показателей при односторонних ограничениях осуществлялось на основе предположения об их линейной связи:

(1)

Для определения коэффициентов b₀ и b, входящих в уравнение (2), был использован следующий прием: худшему значению показателя d_bad по шкале желательности присваивалось значение 0,37, а лучшему d_best - значение 0,63. Тогда с учетом формулы (1) получаем следующие преобразования:

Система уравнений, определяющая коэффициенты b₀ и b для показателя у, имеет вид

Исходя из этой системы получаем значения коэффициентов b₀ и b₁:

(3)

где y_best, y_bad - точки, определяемые экспертом по исходной шкале преобразований.

Таким образом, по заданным экспертом значениям y_best, y_bad по формуле (3) выполняется расчет коэффициентов b, b₀. На основе уравнения (2) определяются кодированное значение базового показателя на промежуточной шкале преобразований, а по уравнению (1) формируется итоговая безразмерная оценка показателя по шкале желательности Харрингтона.

При проведении оценки деятельности рассматривалось 25 единиц базовых показателей по пяти направлениям деятельности органов ГПН. В связи с этим при наличии нескольких показателей d_t, полученных по функции (1), определялся обобщенный показатель D_S, отражающий оценку выбранного направления деятельности. Обобщенный показатель по направлению деятельности определялся как сумма показателей d_t с соответствующими весовыми коэффициентами:

(4)

где а, - весовые коэффициенты, определяющие значимость і-го показателя d_i в направлении деятельности, і = 1,2,..., n; s = 1,2,..., m; n - число показателей в направлении деятельности, m - число направлений деятельности. Расчет весовых коэффициентов а_; производится по формуле

(5)

где w - оценка важности -го показателя d в направлении деятельности, баллы. Оценка важности осуществляется на основе экспертных процедур. Весовые коэффициенты а имеют ограничения вида

(6)

Аналогичным образом осуществляется аддитивная свертка показателей D_S в итоговую обобщающую числовую оценку по всем рассматриваемым направлениям деятельности.

Результаты и обсуждения

На основе механизмов функционирования организационных структур применительно к деятельности органов ГПН разработан метод оценки деятельности организаций, включающий описание процедур формирования базовой исходной системы показателей по направлениям деятельности организации, определение критериев значимости показателей, а также описание формализованных процедур поэтапного вычисления числовых данных для определения итогового числового значения оценки деятельности. Метод внедрен в МЧС России в виде нормативного документа [14].

Применяемые показатели оценки деятельности соответствуют положениям актуальной нормативной правовой базы, а тенденция их достижения позволяет сфокусировать деятельность органов ГПН на максимальном сокращении последствий пожаров для жизни и здоровья людей.

С использованием описанного метода, на основе данных по показателям деятельности органов ГПН в субъектах Российской Федерации за 2021 г., проведены расчеты, по результатам которых определен ряд числовых значений итоговой оценки деятельности органов ГПН, рассчитанной по каждому субъекту Российской Федерации. На основе процедуры ранжирования числовых значений итоговой оценки деятельности органов ГПН определялся соответствующий рейтинг каждого органа ГПН.

Эффективность метода заключается в проведении оперативного и актуального анализа деятельности органов ГПН, а также в повышении качества принимаемых организационно-управленческих решений. Указанная методология позволяет сфокусировать (сосредоточить) деятельность территориальных органов ГПН на максимальное сокращение ущерба жизни и здоровью людей. При этом на основе методики возможна разработка механизма мотивации должностных лиц органов ГПН в зависимости от достигнутых результатов работы.

На рис. 2 приведен пример построения рейтинга органов ГПН с отражением соответствующих их мест в общем распределении оценок деятельности по осуществлению надзорной деятельности и профилактической работы, дознанию по делам о пожарах, лицензированию и предоставлению услуг в области пожарной безопасности.

Рис. 2. Пример построения рейтинга органов ГПН по субъектам Российской Федерации

Выводы

Разработанная методология позволяет сфокусировать (сосредоточить) деятельность территориальных органов ГПН МЧС России на максимальное сокращение ущерба жизни и здоровью людей. При этом на основе методики возможна разработка механизма мотивации должностных лиц органов ГПН в зависимости от достигнутых результатов работы.

В настоящее время активно совершенствуется нормативная правовая база по различным направлениям развития общества, в том числе и в области контрольно-надзорной деятельности. В этой связи органам управления необходимо иметь методический аппарат, позволяющий проводить анализ трансформации функционирования подведомственных организаций к изменению нормативной базы. Данный анализ целесообразно осуществлять через формализованные процедуры оценки деятельности организаций с построением соответствующих их рейтингов. На примере органов ГПН с учетом актуализированной нормативной правовой базы [3] разработан метод оценки деятельности организаций. Метод определяет процедуры формирования базовой исходной системы показателей, критерии их значимости и формализацию поэтапного вычисления числовой итоговой оценки деятельности организации.

Список литературы

1. Бурков В.Н., Кондратьев В.В. Механизмы функционирования организационных систем. М.: Наука, 1981. 384 с.

2. Бурков В.Н., Кондратьев В.В., Циганов В.В., Черкашин А.М. Теория активных систем и совершенствование хозяйственного механизма. М.: Наука, 1984. 274 с.

3. О государственном контроле (надзоре) и муниципальном контроле в Российской Федерации: федер. закон №248-ФЗ от 31 июля 2020 г.

4. Федотов Ю.В., Хованов Н.В. Методы построения сводных оценок эффективности деятельности сложных производственных систем // Научные доклады. 2006. №25 (R). 33 с.

5. Герасимова В.Д. Анализ и диагностика производственной деятельности предприятий (теория, методика, ситуации, задания): учеб. пособие. 4-е изд., испр. и доп. М.: КНОРУС, 2008. 256 с.

6. Шеремет А.Д. Анализ и диагностика финансово-хозяйственной деятельности предприятия: учебник. М.: ИНФРА-М, 2008. 368 с.

7. Шеремет А.Д. Комплексный экономический анализ хозяйственной деятельности: учеб. для вузов. М.: ИНФРА-М, 2009. 416 с.

8. Адамайтис Л.А. Анализ финансовой отчетности. Практикум: учеб. пособие. М.: КНОРУС, 2007. 400 с.

9. Алексеева А.И. Комплексный экономический анализ хозяйственной деятельности: учеб. пособие. М.: КНОРУС, 2007. 672 с.

10. Бариленко В.И. Анализ хозяйственной деятельности: учеб. пособие. М.: Омега-Л, 2009. 414 с.

11. Экономический анализ: учеб. пособие / под ред. Л.Е. Басовского. М.: ИНФРА-М, 2007. 222 с.

12. Васильева Л.С. Финансовый анализ: учебник.3-еизд., стер. М.: КНОРУС, 2007. 816 с.

13. Юсупова Г.Ф. Использование функции желательности в оценке уровня техносферной безопасности территории // Социально-экономические и технические системы: исследование, проектирование, оптимизация. 2017. №3. С. 67-81.

14. Об утверждении Методики оценки деятельности территориальных органов МЧС России по вопросам осуществления федерального государственного пожарного надзора, осуществления дознания, лицензирования и предоставления государственных услуг в области пожарной безопасности: приказ МЧС России №168 от 09.03.2022. 21 с.

References