Нейромережеві моделі вибору методів оцінювання параметрів регресійних залежностей в інформаційних управляючих системах

Побудова моделей і критеріїв для вибору ефективних методів оцінювання параметрів регресійних залежностей для квазістаціонарних процесів. Побудова нейромережевого класифікатора для рішення задач прогнозування та управління контролем якості продукції.

Рубрика Программирование, компьютеры и кибернетика
Вид автореферат
Язык украинский
Дата добавления 25.06.2014
Размер файла 82,7 K

Отправить свою хорошую работу в базу знаний просто. Используйте форму, расположенную ниже

Студенты, аспиранты, молодые ученые, использующие базу знаний в своей учебе и работе, будут вам очень благодарны.

Размещено на http://www.allbest.ru/

Харківський національний університет радіоелектроніки

05.13.06 - Автоматизовані системи управління та прогресивні інформаційні технології

Автореферат

дисертації на здобуття наукового ступеня кандидата технічних наук

Нейромережеві моделі вибору методів оцінювання параметрів регресійних залежностей в інформаційних управляючих системах

Рєпка Вікторія Борисівна

Харків 2002

Дисертацією є рукопис

Робота виконана у Харківському національному університеті радіоелектроніки, Міністерство освіти і науки України.

Науковий керівник - кандидат технічних наук, доцент Лєсна Наталя Совєтівна, Харківський національний університет радіоелектроніки, професор кафедри програмного забезпечення ЕОМ

Офіційні опоненти:

доктор технічних наук, професор Самойленко Микола Іванович, Харківська державна академія міського господарства, завідувач кафедри систем автоматизованого проектування;

кандидат технічних наук, доцент Губка Сергій Олексійович, Державний аерокосмічний університет ім. М.Є. Жуковського “ХАІ”, доцент кафедри інформаційних систем.

Провідна установа

Національний технічний університет України „КПІ”, кафедра технічної кібернетики, Міністерство освіти і науки України, м. Київ.

З дисертацією можна ознайомитись у бібліотеці Харківського національного університету радіоелектроніки, за адресою, пр. Леніна, 14, м. Харків, 61166.

Вчений секретар спеціалізованої вченої ради Саєнко В.І.

ЗАГАЛЬНА ХАРАКТЕРИСТИКА РОБОТИ

Актуальність теми. Динамічний розвиток нових інформаційних технологій у напрямку створення інтелектуальних засобів обробки інформації, таких як нейромережеві методи, генетичні алгоритми тощо, обумовлює їх активне впровадження на всіх стадіях розробки та удосконалення математичного забезпечення (МЗ) інформаційно-управляючих систем (ІУС) під час розв'язання широкого спектру функціональних задач: прогнозування, управління ресурсами, запасами, контролем якості продукції та ін., що дозволяє істотно підвищити надійність прийняття рішень щодо побудови математичних моделей об'єктів.

Ефективність МЗ ІУС безпосередньо пов'язана зі збільшенням точності математичних моделей, що використовуються для розв'язання відповідної функціональної задачі і в свою чергу достатньою мірою визначається підходом до вибору метода побудови цих моделей. Значний внесок у розв'язання проблеми удосконалення методів вибору МЗ ІУС зроблено такими відомими вченими як Р.А. Алієв, В.М. Левикін, Б.Я. Совєтов та ін.

Визначальним фактором вибору методу побудови моделі є характер зміни в часі вхідних змінних досліджуваного об'єкту. У випадку нестаціонарності вхідних змінних використовують механізм виділення періодів їх квазістаціонарності, але одержувані при цьому вибірки, як правило, мають недостатній обсяг для одержання надійних оцінок. Крім того, на малих ділянках квазістаціонарності сильніше виявляються ефекти мультиколінеарності і „забруднення”, що істотно ускладнює вибір сукупності методів побудови моделей і водночас порушує питання щодо виявлення ідентичності регресійних моделей, одержаних на різних ділянках. Таким чином, задача зводиться до побудови моделей стаціонарних об'єктів, ускладнених високою корельованістю вхідних параметрів, наявністю „забруднення”, викидів у вхідних даних і малих обсягів вибірок. Для оцінювання параметрів моделей таких об'єктів необхідно застосовувати класи методів зміщеного та робасного оцінювання, які мають широкий спектр як базових методів, так і їх модифікацій. Традиційні підходи до вибору ефективного методу робасного або зміщеного оцінювання базуються на використанні середньоквадратичного критерію оцінки точності моделі та встановленні математичних залежностей між частковими або узагальненими критеріями ефективності та обмеженими наборами статистичних характеристик вхідної інформації, що висвітлено у роботах таких відомих вчених як Є.З. Демиденко, Р. Обенчайн, П. Хубер та ін.

Властивості сучасних інтелектуальних методів, зокрема нейромережевих, дозволяють вперше вирішити задачу автоматизованого вибору методу оцінювання параметрів регресійних залежностей за сукупністю критеріїв ефективності з урахуванням відповідних статистичних характеристик вхідної інформації об'єктів, що розглядаються. Питанням розробки сучасних нейромережевих технологій присвячені роботи вчених Є.В. Бодянського, О.М. Горбаня, О.Г. Руденка та ін. Стрімкий розвиток даного напрямку досліджень відкриває нові сфери застосування таких технологій та потребує їх подальшого удосконалення.

Вищевказані проблеми визначили актуальність дисертаційних досліджень, спрямованих на розробку нейромережевих моделей вибору ефективного методу оцінювання параметрів математичних моделей квазістаціонарних процесів та введення їх до блока МЗ ІУС. Застосування цих моделей сприятиме підвищенню надійності й точності прийняття рішень під час розв'язання задач управління контролем якості продукції та прогнозування в ІУС, що має велике значення для підприємств України.

Зв'язок роботи з науковими програмами, планами, темами. Дана робота виконувалася згідно з планом науково-дослідних робіт Харківського національного університету радіоелектроніки в рамках держбюджетних тем: №372 “Обґрунтування та розробка нового методичного та інтелектуального програмного забезпечення для комп'ютерно-орієнтованих дидактичних систем” (№ДР 0197U014156), №101-1 “Розробка концепції, методик і моделей дистанційного навчання в умовах багатоступеневої системи освіти в Україні” (№ДР 0100U001337), над якими автор працював як виконавець.

Мета і задачі дослідження. Метою дисертаційної роботи є розробка моделей, методів і критеріїв для розв'язання задачі вибору ефективних методів оцінювання параметрів регресійних залежностей для квазістаціонарних процесів, які мають лінійну залежність між вхідними векторами і на які впливають зовнішні неконтрольовані фактори, що виникають під час розв'язання функціональних задач ІУС.

Для досягнення поставленої мети необхідно розв'язати такі задачі дослідження:

- провести аналіз існуючих моделей і теоретично обґрунтувати необхідність підвищення ефективності прийняття рішень у МЗ ІУС за рахунок впровадження нейромережевих моделей вибору ефективного методу оцінювання параметрів регресійних моделей при розв'язанні задач управління контролем якості продукції та прогнозування в умовах наявності у вхідних даних лінійної залежності та різного рівня штучних і природних завад;

- розробити метод побудови складеного нейромережевого класифікатора для визначення найефективнішого методу оцінювання параметрів регресійних залежностей на підставі характеристик вхідної інформації досліджуваного процесу;

- розробити узагальнені математичні моделі для визначення ефективності підкласів методів зміщеного оцінювання: гребеневого, стислого, узагальненого гребеневого оцінювання та оцінок дробового рангу;

- розробити систему нейромережевих моделей для задачі вибору найефективнішого класу, підкласу, методу оцінювання параметрів математичної моделі процесу з урахуванням характеристик вхідної інформації серед сукупності методів зміщеного, робасного та класичного регресійного оцінювання;

- розробити алгоритм моделювання вхідних даних процесу, алгоритм створення нейромережевої системи підтримки прийняття рішень з вибору ефективного методу побудови математичної моделі квазістаціонарного процесу при розв'язанні функціональної задачі в ІУС;

- реалізувати розроблені метод, моделі та алгоритми у вигляді програмного комплексу для розв'язання задач прогнозування та управління контролем якості продукції в ІУС.

Об'єктом дослідження є методи та моделі математичного забезпечення ІУС.

Предметом дослідження є нейромережеві моделі вибору ефективного методу оцінювання параметрів математичних моделей квазістаціонарних процесів в умовах наявності у вхідних даних лінійної залежності та різного рівня штучних і природних завад.

Методи дослідження. В роботі використовувались методи теорії випадкових процесів, методи математичного моделювання, методи побудови баз даних, теорії статистичного оцінювання, методи штучного інтелекту.

Наукова новизна отриманих результатів. У ході вирішення поставлених задач були отримані такі результати:

- вперше розроблено метод, який визначає сукупність статистичних характеристик інформації та ознак класифікації і здійснює побудову структури складеного нейромережевого класифікатора відповідно до типу розв'язуваної прикладної задачі. Застосування цього методу дозволило вирішити задачу вибору найефективнішого методу оцінювання параметрів регресійних залежностей серед класів методів зміщеного, робасного та класичного регресійного оцінювання для задач управління контролем якості продукції і прогнозування;

- дістали подальшого розвитку узагальнені математичні моделі, які встановлюють залежність між ефективністю підкласів методів гребеневого, узагальненого, стислого оцінювання та оцінок дробового рангу і сукупністю статистичних характеристик вхідної інформації, забезпечуючи повноту опису властивостей кожного з даних підкласів та дозволяють виявити діапазони їх найбільшої ефективності;

- вперше розроблено систему нейромережевих моделей, які на підставі зазначених вище моделей аналізу статистичних характеристик вхідної інформації відповідно до запропонованої структури нейромережевого класифікатора забезпечують вибір найефективнішого класу та підкласу методів зміщеного, робасного, класичного регресійного оцінювання;

- вперше розроблено нейромережеву модель вибору найефективнішого методу оцінювання параметрів регресійних залежностей в обраному класі, підкласі методів відповідно до максимуму оптимальних значень часткових критеріїв ефективності методів оцінювання параметрів математичних моделей, що дозволяє підвищити точність прогнозу за математичними моделями в умовах наявності у вхідних даних лінійної залежності та різного рівня штучних і природних завад.

Практичне значення отриманих результатів. Запропоновані у дисертаційній роботі метод, моделі та алгоритми реалізовані у вигляді програмного комплексу з вибору ефективного методу оцінювання параметрів математичних моделей квазістаціонарних процесів.

Розроблений програмний комплекс включено до блока математичного забезпечення ІУС ДП “Завод імені Малишева” як засіб підтримки прийняття рішень з визначення найефективнішого методу оцінювання параметрів математичної моделі для розв'язання задач управління контролем якості продукції, що дозволило підвищити точність оцінки рівня впливу факторів зовнішнього середовища на показники надійності дизель-генератора IД80Б, який використовується на тепловозах 2ТЭ116 (акт впровадження від 5.11.2001 р.). Також програмний комплекс включено до автоматизованої системи клінічних досліджень з діагностики захворювань внутрішніх органів за результатами лабораторних аналізів, що дозволило збільшити точність прогнозу захворювання та визначити відповідну методику його лікування (акт впровадження від 29.10.2001 р.). Основні положення та рекомендації, які викладені в дисертаційній роботі, використані в навчальному процесі під час проведення лабораторного практикуму з дисципліни “Ймовірнісні процеси та математична статистика в автоматизованих системах” на кафедрі програмного забезпечення ЕОМ та кафедрі штучного інтелекту Харківського національного університету радіоелектроніки (акт впровадження від 4.12.2001 р.).

Особистий внесок кандидата. Всі основні результати дисертаційного дослідження отримані автором самостійно: у роботі [1] автором запропоновано введення до блока МЗ ІУС інтелектуальної надбудови як засобу автоматизованого вибору методу розробки математичної моделі процесу; у запропонованому в роботі [2] критерії оцінки якості вхідних даних автором визначено вплив чутливості вхідних даних до шуму на точність оцінок параметрів математичної моделі процесу; у роботах [3, 9] запропоновано використання нейронних мереж для розв'язання задачі класифікації процесів в ІУС і відповідних методів побудови їх математичних моделей; у роботі [6] представлено результати моделювання роботи нейронних мереж на наборі специфічних характеристик методів зміщеного оцінювання та критеріїв оцінки їх ефективності; у роботі [7] запропоновано алгоритм моделювання вхідних даних процесу для дослідження ефективності методів зміщеного оцінювання; у роботі [8] розроблено метод побудови складеного нейромережевого класифікатора, призначеного для вибору ефективного методу оцінювання параметрів моделі та запропоновано алгоритм створення нейромережевої експертної системи для побудови нейромережевих моделей вибору ефективного класу методів зміщеного, робасного та класичного регресійного оцінювання, яка є складовою частиною МЗ ІУС.

Апробація результатів дисертації. Основні результати дисертації були викладені на: 2-му Молодіжному форумі “Радиоэлектроника и молодежь в XXI веке” (Харків, 1998 р.); 7-й Міжнародній науково-технічній конференції “Информационные технологии: наука, техника, технология, образование, здоровье” (Харків, 1999 р.); 6-й Українській конференції з автоматичного управління “Автоматика-99” (Харків, 1999 р.); 6-й Міжнародній конференції “Теория и техника передачи, приема и обработки информации” (Харків-Туапсе, 2000 р.); 3-й Науково-практичній конференції з міжнародною участю “Информационные технологии в образовании и управлении” (Нова Каховка, 2001 р.).

Публікації. За матеріалами дисертаційного дослідження опубліковано 9 наукових робіт: 7 статей у фахових виданнях згідно з переліком ВАК України, доповідь і тези доповіді на наукових конференціях.

Структура дисертації. Дисертаційна робота складається зі вступу, п'яти розділів, висновків і додатків. Повний обсяг дисертації становить 174 сторінки і містить 5 додатків на 24-х сторінках, 12 рисунків, 12 таблиць, список використаних літературних джерел, що включає 119 найменувань на 10 сторінках.

ОСНОВНИЙ ЗМІСТ РОБОТИ

У вступі обґрунтовано актуальність дисертації, сформульовано основну мету і задачі дослідження, наведено відомості про зв'язки обраного напрямку досліджень із планами організації, де виконана робота, відзначено наукову новизну та практичну цінність отриманих результатів.

У першому розділі дисертаційної роботи проведено аналіз методів, засобів і технологій, які використовуються для розробки математичного забезпечення ІУС; зазначено, що при розв'язанні задач прогнозування та управління контролем якості продукції в ІУС переважна більшість процесів одночасно мають лінійну залежність вхідних факторів і різні за структурою та розміром завади; проаналізовано методи зміщеного та робасного оцінювання параметрів моделей, які застосовуються в даних умовах і наголошено на тому, що їх використання дозволяє підвищити точність моделі та в цілому зумовлює ефективність ІУС; визначено, що розмаїття як класів методів зміщеного і робасного оцінювання, різних за своєю ефективністю та підходами до вибору їх фактора деформації, так і структур та ступеней забрудненості інформації, визначає значну проблему вибору ефективного методу побудови моделей для конкретних статистичних характеристик вхідної інформації досліджуваного класу процесів і в цілому представляє актуальну науково-дослідну задачу. Вищеназване обґрунтовує необхідність дослідження не тільки областей ефективності кожного з цих класів методів з урахуванням специфіки досліджуваних процесів, апарата формалізації визначення найбільш точного методу, а й засобів підтримки прийняття рішень при виборі МЗ в ІУС.

Обґрунтована необхідність використання інтелектуальних технологій як засобу підвищення ефективності прийняття рішень щодо вибору методу побудови математичної моделі процесу дослідження при вирішенні функціональних задач, які розв'язуються у підсистемах ІУС, зокрема апарата штучних нейронних мереж.

Вищезазначені задачі дослідження були поставлені на підставі проведеного аналізу, виявлених труднощів і відповідно до мети даної дисертаційної роботи.

У другому розділі дисертаційної роботи показано, що специфіка властивостей класів та підкласів МЗО, МРО та методів класичного регресійного оцінювання (МКР) зумовлює необхідність розробки засобів розв'язання класифікаційних задач, спрямованих на вибір найефективнішого методу оцінювання параметрів математичної моделі відповідно до характеристик вхідної інформації досліджуваного класу процесів. Відповідно до цього було запропоновано метод побудови складеного нейромережевого класифікатора (СНК) , призначеного для вибору ефективного методу оцінювання aA, де А - множина методів на множині класів K*{k1, k2,…, km} методів оцінювання параметрів математичної моделі досліджуваного процесу для розв'язання функціональної задачі на підставі сукупності критеріїв оцінки ефективності методів L, критеріїв оцінки якості класифікації Q та у відповідності до набору статистичних характеристик вхідної інформації . Цей метод будується як відображення виду {, Z, K, , L, Q}a, що визначає побудову СНК у вигляді послідовності таких етапів:

1. Отримання вибіркових даних у відповідності з властивостями досліджуваного процесу , а також формування за ними підмножини ознак, які відображають параметри вхідної інформації , вибір множини допустимих класів KK* методів оцінювання та їх потенційних підкласів методів S={Sk}kK, вибір множини критеріїв L.

2. Формування навчальної множини для нейронної мережі: перетворення даних для подачі на вхід мережі, вибір системи кодування вхідних та вихідних значень.

3. Розробка нейромережевих моделей для розв'язання відповідної класифікаційної задачі: вибір типу, структури, архітектури нейронної мережі, параметрів нейронів, алгоритму навчання нейронної мережі, вибір критеріїв оцінки якості класифікації Q, де інтегральна оцінка якості класифікації визначається лексикографічно, відповідно до порядку окремих критеріїв, заданих користувачем.

Запропонований метод було застосовано для вибору ефективного методу оцінювання параметрів математичної моделі квазістаціонарних процесів з наявністю у вхідних даних лінійної залежності та різного рівня штучних і природних завад.

На першому рівні він забезпечує побудову нейромережевої моделі вибору одного з класів методів оцінювання МЗО, МРО та МКР за допомогою нейронної мережі NS1 на підставі підмножини статистичних характеристик F і критеріїв оцінки якості класифікації Q: де m - номер класу,. На другому рівні будується нейромережева модель вибору підкласу методів зміщеного оцінювання SS1 (при m=2,3 розглядаються класи, які співпадають з підкласами) за допомогою нейронної мережі NS2 на підставі відповідної підмножини характеристик С і критеріїв оцінки якості класифікації Q: . При цьому вибір підкласів для класу МЗО обумовлено тим, що серед досліджуваних класів методів, клас МЗО налічує найбільшу кількість методів - понад 60 і ефективність того чи іншого методу багато в чому визначається належністю його до певного підкласу: гребеневого, стислого, узагальненого гребеневого оцінювання та оцінок дробового рангу. Крім того, поділу на підкласи сприяли різні обчислювальні властивості методів: точність, швидкодія, зсув вектора оцінок, дисперсія оцінок, середньоквадратична помилка моделі, обчислювальна складність, що в свою чергу визначає область використання цих методів для розв'язання конкретних функціональних задач.

На третьому рівні здійснюється остаточний вибір методу a в підкласі Sk за допомогою нейронної мережі NS3 на підставі підмножини критеріїв LmL, Lm={Lij(m)} оцінки ефективності методів серед k-го підкласу . При цьому інтегральний критерій вибору ефективного методу оцінювання параметрів моделі має вигляд: , де Lij(m){0,1}; i - номер методу оцінювання; j - номер критерію оцінки ефективності методу і Lij(m)=1 тільки, якщо . Методи з однаковими значеннями інтегрального критерію вважаються еквівалентними за ефективністю.

Для розглядуваного класу прикладних задач досліджено властивості вхідної інформації квазістаціонарних процесів, що дозволило виявити інтервальну підмножину F домінуючих факторів, які є базою для ефективного розподілу класів МЗО, МРО та МКР: f1=[20; 200] - обсяг вибірки, f2=[2; 7] - кількість незалежних змінних, f3=[1; 100] - показник ступеня мультиколінеарності, f4=[0.01; 1] - дисперсія помилки в залежній змінній, f5=[2; 15] - співвідношення масштабів “забруднюючого” та основного розподілів помилок моделі, f6=[0; 0.10] - ступінь забрудненості незалежних змінних, f7=[0; 1] - якісний параметр, який визначає форму викидів у незалежних змінних, f8=[10; 50] - довжина хвоста “забрудненого” розподілу незалежних змінних. Отримана підмножина факторів f1,…,f8 є вхідним вектором для нейронної мережі NS1.

Для вибору архітектури нейронної мережі NS1 вибору класів МЗО, МРО та МКР на підставі навчальної множини {1j, 2j,...,8j}j=1,n, ijfi обсягом n, була промодельована робота нейронних мереж, які використовуються для розв'язання задачі класифікації: багатошаровий перцептрон, нейронна мережа зустрічного поширення, ймовірнісна нейронна мережа, мережа радіальної базисної функції. Оптимальність нейронної мережі оцінено за допомогою множини критеріїв Q: сумарної квадратичної помилки, середньої відносної помилки, коефіцієнта впевненості, прогностичної спроможності нейронної мережі. При розв'язанні задачі вибору класу методів оцінювання оптимальний результат за критеріями Q був отриманий нейронною мережею радіальної базисної функції (РБФ).

Виявлення наявності перетину областей ефективності класів МЗО, МРО та МКР обґрунтувало доцільність введення до мережі РБФ додаткового критерію ефективності, що реалізується у вигляді матриці втрат, яка помножується на вектор оцінених ймовірностей, отриманих на вихідному шарі. Кожне спостереження відноситься до того класу, в якого буде найменша оцінка для ціни помилки.

На підставі проведення вичерпної серії експериментів був визначений набір параметрів, які дозволяють з мінімальною помилкою відповідно до характеристик вхідної інформації процесу визначити ефективний підклас МЗО й інтервали зміни цих параметрів: C1 = [0.0001; 10] - визначник інформаційної матриці X'X, C2 = [1.5994; 6.8501] - розмах X'X, С3 = [0,1; 7] - показник обумовленості матриці X'X, С4 = [0; 1] - дисперсія завад, С5 = [2.311; 8.4531] - показник норми 1 [6]; С6 = [1.3869; 5.1052] - показник норми 2 [6], С7 = [0.4; 0.9] - максимальний коефіцієнт кореляції, С8 = [4; 10] - кількість незалежних змінних, С9 = [25; 100] - обсяг вибірки, С10 = [0.004; 15.3] - рівень мультиколінеарності.

Сукупність характеристик C1,…,C10 є вхідним вектором навчальної множини для нейронної мережі NS2. Щоб розв'язати задачу вибору підкласів МЗО, промодельована робота відповідних типів нейронних мереж. За критеріями оцінки точності класифікації Q і на підставі навчальної множини {c1j, c2j,...,c10j}j=1,m, cijCi обсягом m найкращого результату було досягнуто нейронною мережею зустрічного поширення.

На завершальному етапі здійснюється остаточний вибір методу оцінки параметрів моделі a на підставі сукупності середньоквадратичних критеріїв оцінки ефективності методів L, тобто визначається метод, який дозволяє найефективніше оцінити параметри математичної моделі відповідно до статистичних характеристик вхідної інформації, а це в свою чергу забезпечує побудову адекватної моделі досліджуваного процесу. Для розв'язання даної задачі використано принцип рекурентної нейронної мережі (РНМ).

Формування навчальної вибірки для РНМ здійснюється на підставі розрахунку таких критеріїв оцінки ефективності: для класу МЗО - критерію відносної середньоквадратичної помилки; критерію, що характеризує дисперсію оцінок коефіцієнтів моделі; критерію, що характеризує зсув оцінок коефіцієнтів моделі; стандартного критерію середньоквадратичної помилки моделі; критерію максимальної абсолютної координатної помилки методу; критерію максимальної координатної відносної помилки методу. При цьому критеріям оцінки ефективності призначаються коефіцієнти переваги в залежності від типу розв'язуваної функціональної задачі та мети дослідження. Для класу МРО розраховуються значення критерію відносної середньоквадратичної помилки моделі і критерію відносної медіани абсолютних відхилень, для МКР - критерію середньоквадратичної помилки моделі. Вибір методу в кожному класі (підкласі) здійснюється за максимальною кількістю мінімальних значень критеріїв на підставі рекурентної нейронної мережі.

Для оцінки точності СНК на підставі обраного класифікатором методу оцінювання розраховуються оцінки параметрів математичної моделі та отримані оцінки порівнюються з заданими істинними параметрами. Далі перевіряється адекватність отриманої математичної моделі на підставі стандартних статистичних критеріїв.

Третій розділ присвячений розробці нейромережевої системи підтримки прийняття рішень (НСППР) з вибору ефективного методу оцінювання параметрів математичної моделі квазістаціонарного процесу. Ядром цієї системи є запропонований автором складений нейромережевий класифікатор.

Рис. 2. Структура нейромережевої системи підтримки прийняття рішень

Розроблено структуру (рис. 2) та алгоритм функціонування НСППР в рамках МЗ ІУС; процедуру наповнювання бази знань НСППР, яка базується на проведенні серії імітаційних експериментів, що враховують статистичні характеристики вхідних даних квазістаціонарних процесів і задовольняють передумовам використання методів робасного, зміщеного та класичного регресійного оцінювання.

Для розв'язання даних задач запропоновано: алгоритм генерації вибірки незалежних змінних з певними властивостями кореляційної матриці, в основу якого покладена ідея ітераційного звернення матриці з визначенням відповідного кута обертання, а також алгоритм генерації вектора помилок регресійної моделі, структури математичної моделі процесу, вибірки значень залежної змінної, задавання забрудненості, важких хвостів розподілів і шумів.

Функціонування НСППР у рамках МЗ ІУС здійснюється у такий спосіб. На першому етапі за допомогою інтерфейсу користувача вводиться інформація, яка була отримана з об'єкту дослідження; проводиться попередня статистична обробка даних, вибіркові значення записуються до бази даних характеристик процесу; у користувача запитується тип розв'язуваної задачі, а також перевага у виборі розв'язання, наприклад: точність, швидкодія, обчислювальна складність тощо; згідно з розрахованими характеристиками вхідних даних формується вектор, який записується до навчальної множини нейронної мережі РБФ; після проходження характеристик крізь мережу, на виході мережа відтворює результат класифікації, тобто один із класів методів оцінювання: МЗО, МРО або МКР; результат класифікації заноситься до бази знань НСППР.

По закінченні першого етапу НСППР за допомогою модуля порад і пояснень видає користувачу рекомендацію з використання отриманого класу методів і запитує про його подальші дії щодо продовження класифікації для отримання конкретного підкласу в обраному класі методів оцінювання або самостійного вибору користувачем методу в запропонованому класі.

Якщо на етапі класифікації мережа РБФ за обчисленими характеристикам рекомендує для досліджуваного процесу використовувати клас МКР, то будується математична модель процесу на підставі МНК і перевіряється її адекватність. Якщо був отриманий клас методів зміщеного оцінювання, то для визначення ефективного підкласу методів розраховуються параметри Ci, формується вектор вхідних даних, який подається на вхід нейронної мережі зустрічного поширення та користувачу пропонується надати підтвердження цього розв'язання і результати заносяться до бази знань.

Для подальшого вибору найефективнішого методу в підкласі розраховується підмножина критеріїв оцінки ефективності відповідних класу методів. При цьому критеріям оцінки ефективності призначаються коефіцієнти переваги в залежності від типу розв'язуваної задачі та мети дослідження. На підставі розрахованих критеріїв формується вхідний вектор для рекурентної нейронної мережі. В результаті роботи РНМ на виході формується номер методу, який має максимальну кількість мінімальних значень за інтегральним критерієм. Здійснюється оцінка параметрів математичної моделі та за допомогою стандартних статистичних критеріїв перевіряється її адекватність. Отримана математична модель супроводжується рекомендаціями з її подальшого використання для розв'язання певної функціональної задачі.

У четвертому розділі визначено області ефективності кожного класу та підкласу методів у досліджуваних діапазонах варіювання статистичних характеристик вхідної інформації процесу. На підставі проведених досліджень побудовано сукупність математичних моделей залежності між критеріями L і сукупністю параметрів Сi.

У ході проведених експериментів була встановлена залежність між критеріями: відносної середньоквадратичної похибки (L1), дисперсії оцінок коефіцієнтів моделі (L2), зміщення оцінок коефіцієнтів моделі (L3) і статистичними характеристиками вхідної інформації для кожного з підкласів МЗО та побудовані відповідні математичні моделі, на підставі яких проводилось дослідження ефективності вказаних підкласів. Розроблено узагальнені математичні моделі залежності між критеріями оцінки ефективності підкласів гребеневого, узагальненого, стислого оцінювання та оцінок дробового рангу і виділеною сукупністю параметрів, які характеризують вхідні дані процесу.

Для підкласу стислого оцінювання за критеріями L1, L2 та L3, отримані такі узагальнені математичні моделі:

L1=a0lp+max |rij|(1+a1lmax |rij|+a2lH2)+(…)+b0,

L2=a0lp+a1lmax |rij|+(a2lp+a3l2)+a4lnS+(…)+b0,(1)

L3=a1lmax |rij|(1+27.5 2)+(…)+b0,

де a0l, a1l, a2l - коефіцієнти моделі; l - індекс методу в підкласі; (…) - індивідуальні параметри методу; b0 - вільний член.

Для підкласу гребеневих оцінок за критеріями L1, L2 та L3 - узагальнені математичні моделі:

L1=a0lp+a1lmax |rij|+(a2lp+a3l2+(…)+b0,

L2=a0lp+(a1ln+a2lp+a3lc)2+(…)+b0, (2)

L3=a0l2+(a1lp+a2l2)+(…)+b0.

Для підкласу оцінок дробового рангу - узагальнені математичні моделі:

L1=a0lmax |rij|+(a1lp+a2lc+a3lH2+a4lH1)+(…)+b0,

L2=a0lp+a1ln+a3l2+(…)+b0,(3)

L3=a0lnpc+(…)+b0.

На підставі узагальнених математичних моделей (1-3) була проведена вичерпна серія експериментів з визначення областей ефективності кожного підкласу МЗО.

Встановлено, що при високому ступені лінійної залежності вхідних змінних тенденція зменшення середньоквадратичної похибки методів у підкласах гребеневого і стислого оцінювання більш значна порівняно з підкласами узагальненого гребеневого оцінювання та оцінок дробового рангу. Проведена оцінка ефективності кожного методу у відповідному підкласі МЗО і класі МРО, а також визначені області варіювання характеристик вхідної інформації, які визначають стійкість методу за сукупністю критеріїв оцінки ефективності. Отримані результати дозволили сформувати навчальну множину для рекурентної нейронної мережі, за допомогою якої побудовано класифікаційну модель вибору найбільш ефективного методу оцінювання параметрів математичної моделі.

П'ятий розділ присвячений практичному застосуванню розробленого складеного нейромережевого класифікатора, узагальнених моделей та алгоритмів, що були реалізовані у вигляді програмного комплексу для розв'язання функціональних задач ІУС виробничим підприємством і клінічною лабораторією.

Зокрема програмний комплекс використано у підсистемі управління контролем якості продукції при оцінюванні надійності дизель-генератора IД80Б, який застосовується на тепловозах 2ТЭ116. Для визначення впливу неконтрольованих параметрів зовнішнього середовища на сукупність показників надійності дизель-генератору розроблено математичну модель, оцінка параметрів якої проводилась за допомогою робасного методу ММ-оцінок. На підставі внутрішньої структури вхідної інформації складений нейромережевий класифікатор визначив даний метод як найефективніший у класах МЗО, МРО і МКР. Адекватність отриманої математичної моделі обгрунтовано на підставі сукупності статистичних критеріїв. Виявлено підвищення точності оцінки рівня впливу параметрів зовнішнього середовища на показники надійності дизель-генератора. Це забезпечило підвищення ефективності та надійності прийняття відповідних рішень щодо контролю якості даного виду продукції.

Результати досліджень використано під час розробки автоматизованої системи клінічних досліджень для діагностики захворювань печінки за результатами лабораторних аналізів пацієнтів. Виявлення захворювань на паренхіматозну жовтуху проводилося на підставі розробленої математичної моделі, яка встановлює залежність рівня білірубіну у крові від сукупності біохімічних показників печінки пацієнтів. Оцінювання параметрів моделі проведено за допомогою методу зміщеного оцінювання ERN, який у підкласі гребеневих оцінок за максимальною кількістю мінімальних значень інтегрального критерію визначено як найефективніший, що дозволило підвищити точність прогнозування відповідної функціональної проби.

Вищеназвані результати свідчать про ефективність застосування запропонованого складеного нейромережевого класифікатора та розроблених алгоритмів.

У додатках наведено результати експериментів, які проводилися під час досліджень; математичні моделі залежності між критеріями оцінки ефективності методів підкласів МЗО і сукупністю параметрів; акти про впровадження результатів дисертаційної роботи.

регресивний залежність нейромережевий класифікатор

ВИСНОВКИ

У дисертації наведене теоретичне узагальнення і нове вирішення наукової задачі, яка полягає в розробці нейромережевих моделей вибору ефективного методу оцінювання параметрів регресійних залежностей в рамках математичного забезпечення ІУС. Розв'язання даної задачі полягає в застосуванні розробленого нейромережевого класифікатора, який забезпечує побудову нейромережевих моделей вибору ефективного методу оцінювання параметрів математичної моделі квазістаціонарного процесу в залежності від властивостей вхідної інформації, що дозволить будувати більш точні моделі та як результат забезпечить підвищення надійності рішень, що приймаються за моделями. Ці результати мають важливе наукове і практичне значення для автоматизації вибору методів та алгоритмів розв'язання функціональних задач у рамках МЗ ІУС, що забезпечить підвищення ефективності ІУС в цілому. В зв'язку з цим у дисертаційній роботі:

1. Проаналізовані сучасні методи та моделі вибору математичного забезпечення ІУС для розв'язання задач прогнозування і управління контролем якості продукції та теоретично обґрунтовано необхідність підвищення ефективності прийняття рішень при розробці математичних моделей процесів за рахунок впровадження нейромережевих моделей вибору методів оцінювання параметрів таких моделей.

2. Розроблено метод, який визначає сукупність статистичних характеристик інформації процесу дослідження та ознак класифікації і здійснює побудову структури нейромережевого класифікатора відповідно до типу функціональної задачі. Результатом застосування цього методу є трьохрівневий нейромережевий класифікатор, який дозволив вирішити задачу вибору найефективнішого методу оцінювання параметрів регресійних залежностей серед класів методів зміщеного, робасного та класичного регресійного оцінювання для задач управління контролем якості продукції та прогнозування.

3. Розроблено узагальнені математичні моделі, які встановлюють залежність між критеріями оцінки ефективності підкласів методів гребеневого, стислого, узагальненого гребеневого оцінювання та оцінок дробового рангу і сукупністю статистичних характеристик вхідної інформації квазістаціонарних процесів, що дозволило визначити діапазони ефективності кожного підкласу та забезпечити повноту опису властивостей підкласів методів зміщеного оцінювання.

4. Розроблено систему нейромережевих моделей для розв'язання задач вибору класу методів зміщеного, робасного, класичного регресійного оцінювання, підкласу методів зміщеного оцінювання та ефективного методу у відповідному класі (підкласі) на підставі трьохрівневого нейромережевого класифікатора. Нейромережеві моделі забезпечили вибір найефективнішого методу відповідно до максимуму оптимальних значень часткових критеріїв ефективності методів оцінювання параметрів математичних моделей.

5. Розроблено алгоритм моделювання вхідних даних процесу дослідження, що дозволило виявити домінуючі фактори, які мають вагомий вплив на вибір досліджуваних класів і підкласів методів, а також визначити області ефективності кожного класу або підкласу методів зміщеного, робасного та класичного регресійного оцінювання. На основі модельного експерименту визначено топології нейронних мереж, які забезпечують мінімальні значення критеріїв середньої відносної, сумарної квадратичної помилки та максимальні значення коефіцієнтів впевненості і прогностичної спроможності на кожному з етапів роботи складеного нейромережевого класифікатора.

6. Розроблено алгоритм створення нейромережевої системи підтримки прийняття рішень з вибору ефективного методу побудови математичної моделі квазістаціонарного процесу, яка дозволяє автоматизовано визначити найефективніший метод у залежності від статистичних характеристик вхідних даних досліджуваного процесу і типу розв'язуваної функціональної задачі.

7. Розроблені метод, моделі та алгоритми реалізовано у вигляді програмного комплексу і застосовано на ДП “Завод імені Малишева” для вирішення задач управління контролем якості продукції при визначенні впливу факторів зовнішнього середовища на показники надійності дизель-генератора та у Другій обласній психіатричній лікарні Сумського УОЗ при розробці автоматизованої системи клінічних досліджень з діагностики захворювань внутрішніх органів за результатами лабораторних аналізів, що дозволило збільшити точність прогнозу функціональної проби печінки пацієнта та визначити відповідну методику її лікування. Отримані у роботі результати впроваджені в навчальний процес під час проведення лабораторного практикуму з дисципліни “Ймовірнісні процеси та математична статистика в автоматизованих системах” на кафедрі програмного забезпечення ЕОМ і кафедрі штучного інтелекту Харківського національного університету радіоелектроніки.

СПИСОК ОПУБЛІКОВАНИХ АВТОРОМ ПРАЦЬ ЗА ТЕМОЮ ДИСЕРТАЦІЇ

1. Антонов В.А., Шамша Т.Б., Репка В.Б. Концептуальная модель системы идентификации в современных системах управления технологическими объектами // АСУ и приборы автоматики. - 1998. -№108. - С. 214-223.

2. Лесная Н.С., Репка В.Б., Шамша Т.Б. Об одном подходе к оценке качества исходной информации при обработке данных // Проблемы бионики. - 1999. - №50. - С. 71-74.

3. Келеберда И.Н., Лесная Н.С., Репка В.Б. Применение нейронных сетей как базового метода классификации технологического объекта // Вестник Харьковского государственного политехнического университета. - 1999. - Вып. 66. - С. 35-39.

4. Репка В.Б. Сравнительный анализ некоторых непараметрических методов классификации в рамках построения интеллектуальной системы идентификации технологических объектов // Информационные технологии: наука, техника, технология, образование, здоровье. - 1999. - №7. - С. 180-184.

5. Репка В.Б. Некоторые аспекты построения интеллектуальной системы выбора метода идентификации // Вестник Харьковского государственного политехнического университета. - 1999. - Вып. 72. - С. 156-161.

6. Лесная Н.С., Репка В.Б. Об одном подходе к выбору эффективного метода смещенного оценивания параметров моделей квазистационарных процессов с применением аппарата нейронных сетей // Проблемы бионики. - 2000. - №53. - С. 13-17.

7. Лесная Н.С., Репка В.Б., Шатовская Т.Б. Методика выбора эффективного метода оценивания параметров моделей объектов при решении функциональных задач АСУ // Вестник Херсонского государственного технического университета. - 2001. - №1(10). - С. 284-286.

8. Лесная Н.С., Шатовская Т.Б., Репка В.Б. Метод выбора эффективных процедур оценивания параметров моделей квазистационарных процессов в нейросетевой экспертной системе // Радиотехника. Всеукраинский межведомственный научно-технический сборник. - 2001. - №119. - С. 195-198.

9. Лесная Н.С., Репка В.Б., Келеберда И.Н. Использование нейросетевой парадигмы для выбора оптимального метода идентификации технологического объекта // Тезисы докладов 6-й Международной конференции “Теория и техника передачи, приема и обработки информации“. Харьков-Туапсе: ХТУРЭ.- 2000.- С. 343-345.

АНОТАЦІЯ

Рєпка В.Б. Нейромережеві моделі вибору методів оцінювання регресійних залежностей в інформаційних управляючих системах. - Рукопис

Дисертація на здобуття наукового ступеня кандидата технічних наук за спеціальністю 05.13.06 “Автоматизовані системи управління та прогресивні інформаційні технології“. - Харківський національний університет радіоелектроніки, Харків, 2002.

Дисертація присвячена питанням розробки нейромережевих моделей вибору ефективного методу оцінювання параметрів математичних моделей процесів в умовах лінійної залежності та наявності завад у вхідних даних при розв'язанні функціональних задач ІУС. У дисертаційній роботі розроблено: метод побудови складеного нейромережевого класифікатора, а також отримано нейромережеві моделі вибору класів методів зміщеного, робасного та регресійного оцінювання; підкласів методів гребеневого, стислого, узагальненого гребеневого оцінювання, оцінок дробового рангу та модель вибору ефективного методу у даних класах. Розроблено узагальнені математичні моделі, які встановлюють залежність між критеріями оцінки ефективності підкласів методів і сукупністю статистичних характеристик вхідної інформації; алгоритм побудови нейромережевої системи підтримки прийняття рішень, ядром якої є складений нейромережевий класифікатор. Результати дисертаційної роботи впроваджено на ДП “Завод імені Малишева” при вирішенні задачі оцінки впливу факторів зовнішнього середовища на показники надійності дизель-генератора та при розробці автоматизованої системи клінічних досліджень у Другій обласній психіатричній лікарні Сумського УОЗ.

Ключові слова: функціональні задачі ІУС, нейромережеві моделі вибору методу оцінювання, класи методів зміщеного, робасного та класичного регресійного оцінювання, складений нейромережевий класифікатор, критерії оцінки ефективності.

АННОТАЦИЯ

Репка В.Б. Нейросетевые модели выбора методов оценивания параметров регрессионных зависимостей в информационных управляющих системах. - Рукопись.

Диссертация на соискание ученой степени кандидата технических наук по специальности 05.13.06 - Автоматизированные системы управления и прогрессивные информационные технологии. - Харьковский национальный университет радиоэлектроники, Харьков, 2002.

Диссертация посвящена разработке нейросетевых моделей выбора эффективного метода оценивания параметров математических моделей процессов в условиях линейной зависимости и наличия различных помех во входных данных при решении функциональных задач ИУС.

На основании проведенного сравнительного анализа точности классов методов смещенного, робастного и классического регрессионного оценивания обоснована эффективность применения нейросетевых методов для построения классификационных моделей выбора метода оценивания параметров математической модели процесса.

Разработан метод построения составного нейросетевого классификатора, который позволяет по выявленным характеристикам исходной информации исследуемого класса процессов из множества методов оценивания, соответствующих типам решаемых функциональных задач на основании совокупности критериев оценки их эффективности осуществлять выбор определенного метода оценивания параметров математической модели.

Исследование свойств входной информации квазистационарных процессов осуществлялось на основе разработанного алгоритма моделирования входных данных процесса, что позволило выявить доминирующие факторы, существенно влияющие на выбор класса методов смещенного, робастного, классического регрессионного оценивания; выбор подкласса методов гребневого, сжатого, обобщенного гребневого оценивания и оценок дробного ранга, и на основе предложенного метода получить совокупность нейросетевых моделей, формализующих процесс выбора соответствующего класса и подкласса методов оценивания параметров математической модели.

На основе проведенных экспериментальных исследований свойств подклассов методов смещенного оценивания, разработаны обобщенные математические модели зависимости между критериями оценки эффективности данных подклассов и совокупностью статистических характеристик каждого подкласса методов.

Разработан алгоритм построения нейросетевой системы поддержки принятия решений по выбору эффективного метода разработки математической модели квазистационарного процесса, ядром которой является составной нейросетевой классификатор.

Предложенные метод, нейросетевые модели и алгоритмы реализованы в виде программных средств поддержки принятия решений по выбору метода оценивания параметров математической модели при решении функциональных задач прогнозирования и управления контролем качества продукции в ИУС, что позволяет строить более точные модели, и обеспечивает повышение надежности принимаемых по моделям решений. Разработанный программный комплекс внедрен на ГП “Завод имени Малышева” при решении задач управления контролем качества продукции при оценке уровня влияния неконтролируемых параметров внешней среды на показатели надежности дизель-генератора, используемого на тепловозах. А также программный комплекс использован при разработке автоматизированной системы клинических исследований во Второй областной психиатрической больнице Сумского УОЗ для диагностики заболеваний печени пациентов, что позволило разработать математическую модель зависимости функциональных проб печени от показателей лабораторных анализов и повысить точность прогноза заболевания в зависимости от симптомов для определения методики его лечения.

Ключевые слова: функциональные задачи ИУС, нейросетевые модели выбора метода оценивания, классы методов смещенного, робастного и классического регрессионного оценивания, составной нейросетевой классификатор, критерии оценки эффективности.

ABSTRACT

Repka V.B. Neural network models for selection of estimation parameters methods for regression dependence in information control systems. - Manuscript.

Thesis for a candidate's degree in technical sciences on specialty 05.13.06 - Automated Control Systems and Progressive Information Technologies. - Kharkiv National University of Radioelectronics, Kharkiv, 2002.

The thesis deals with development of neural networks classification models that provide a choice of efficient parameters estimation method for mathematical models of processes with linear dependence between input information and influences of various random factors to solve the determinate functional tasks in information control systems. The method for designing a composite neural network classifier is developed. The neural classification models for recognizing the classes of biased, robust and regression method estimation are obtained. In addition, the neural classification models for recognition of the subclasses of ridge, compact, fractional and generalized ridge regression methods are obtained. Generalized mathematical models that establish dependence between efficiency estimation criteria and statistical characteristics of the input information are developed. The procedure for designing a neural network making support decision system is developed with a system kernel as composite neural classifier. The results obtained are implemented in the industrial enterprise for estimation of environmental factors influence on equipment reliability of diesel-generators and in the mental hospital as software system for clinical investigations.

Keywords: functional tasks of ICS, neural networks classification models, class of methods for ridge, robust and classical regression estimation, composite neural networks classifier, efficiency estimation's criteriа.

Размещено на Allbest.ru

...

Подобные документы

Работы в архивах красиво оформлены согласно требованиям ВУЗов и содержат рисунки, диаграммы, формулы и т.д.
PPT, PPTX и PDF-файлы представлены только в архивах.
Рекомендуем скачать работу.