Синтез и исследование алгоритмов оценивания степени соответствия объекта функциональному назначению: на примере качества высшего образования тема диссертации и автореферата по ВАК РФ 05.13.10, кандидат технических наук Кузнецова, Марина Владимировна

• Кузнецова, Марина Владимировна
• кандидат технических наук
• 2009

Оглавление диссертации кандидат технических наук Кузнецова, Марина Владимировна

Введение.

Глава 1, Аналитический обзор методов и алгоритмов оценивания степени соответствия объекта функциональному назначению (ССОФН).

1.1 Исходные понятия и термины, относящиеся к оценке ССОФН.

1.2 Анализ существующих подходов и критериев оценивания соответствия.

1.3 Основное противоречие в вопросе оценивания степени соответствия

1.4 Определение объекта опытно-экспериментальной базы исследования

Выводы по главе 1.

Глава 2 Разработка общих положений методики оценивания

ССОФН.

2.1 Концептуальные проблемы методологии оценивания степени соответствия.

2.2 Разработка общих положений синтеза виртуального эталона объекта.

2.3 Формализация исходной информации о соответствии.

2.3.1 Модели измерения исходных характеристик объекта.

2.3.2 Методы построения нормированных оценок.

2.3.3 Методы синтеза единичных показателей соответствия.

2.4 Разработка концепции построения системы оценивания степени соответствия.

Выводы по главе 2.

Глава 3 Разработка алгоритмов оценивания ССОФН.

3.1 Разработка аналитических методов определения весовых коэффициентов единичных показателей соответствия с учетом заданных тенденций изменения их значимости.

3.2 Синтез алгоритмов оценивания ССОФН и их сопоставление.

3.2.1 Исследование эффективности и смещенности . алгоритмов оценивания ССОФН.

3.2.2 Разработка метода определения эффективности алгоритмов оценивания ССОФН, основанных на различных тенденциях изменения весовых коэффициентов единичных показателей соответствия.

3.2.3 Синтез обобщенных алгоритмов оценивания ССОФН и анализ их эффективности и смещенности.

3.3 Разработка теоретических положений методики определения метрологических характеристик комплексных и обобщенных алгоритмов оценивания ССОФН.

Выводы по главе 3.

Глава 4 Экспериментальная проверка результатов теоретических исследований.

4.1 Расчет значений весовых коэффициентов единичных показателей соответствия с учетом различных тенденций их изменения.

4.2 Оценка эффективности комплексных алгоритмов оценивания ССОФН

4.3 Оценка эффективности обобщенных алгоритмов оценивания ССОФН

4.4 Оценка комплексных и обобщенных показателей качества высшего образования.

4.5 Разработка концепции создания автоматизированной системы поддержки процессов оценивания ССОФН (АС ППО ССОФН).

4.5.1 Состав и функции системы.

4.5.2 Модели данных.

Выводы по главе 4.

Введение диссертации (часть автореферата) на тему «Синтез и исследование алгоритмов оценивания степени соответствия объекта функциональному назначению: на примере качества высшего образования»

Как для отдельного человека, так и для государства необходима "сверхзадача" — идея, которая оправдывает его существование в собственных глазах и в глазах окружающих. Если такая идея отсутствует, то отдельный человек переживает невроз, а государство — то, что называют политическим кризисом. Эта закономерность, впервые обнаруженная философами древнего Китая еще за несколько веков до нашей эры, действует и сейчас.

На протяжении XX века человечество опробовало, кажется, практически все варианты таких национальных идей. Многие из них оказались настолько небезопасными для остальных стран и народов, а иногда и для коренного населения, что к концу 60-х годов политиками, бизнесменами и учеными большинства промышленно развитых стран стала ощущаться неотложная потребность сформулировать такую национальную идею, которая: при своем воплощении исключала бы опасность возникновения новых войн; обладала бы способностью консолидировать нацию, т.е. объединять людей, придерживающихся разных, иногда принципиально разных, политических убеждений; учитывая тенденции к интеграции государств, была бы достаточно интернациональной и способствовала бы не разобщению, а соединению стран и народов; была бы понятна и близка людям всех слоев и социальных групп в обществе.

И такая идея была сформулирована авторитетнейшим собранием политиков, бизнесменов, ученых — Римским клубом - на исходе 60-х годов XX века. Это - задачи, связанные с повышением качества жизни в обществе [1].

Современное понимание таких задач включает:

- защиту прав личности, в том числе защиту прав потребителей на качественные изделия и услуги как неотъемлемые права личности;

- обеспечение безопасности жизнедеятельности населения, в том .числе охрану окружающей среды как необходимое условие такой безопасности.

Безусловно, идеи Римского клуба не были открытием. Они являлись дальнейшим развитием концепции так называемого «общества потребления», т.е. общества, целью существования которого является удовлетворение потребностей сограждан. Окончательно эта концепция общества была сформулирована в 50-х годах. Важнейший вклад в воплощение этой концепции в жизнь внес президент США Д. Ф. Кеннеди, выдвинувший в начале 60-х годов концепцию государственной защиты прав потребителя. Согласно этой концепции, государство обязано активно вмешаться во взаимоотношения производителя товаров и услуг и потребителя на стороне последнего, ограждая его от недоброкачественной продукции и взяв на себя защиту его прав. Был принят закон о защите прав потребителей.

Очень интересно, что в японском языке одно и тоже слово означает и «потребитель» и «уважаемый гость» [2]. Обеспечение качества характеризует отношение к потребителю как к уважаемому гостю. Как важно понимание этого для российской действительности!

Главной фигурой «общества потребления» является потребитель. Его требования (если они социально безопасны) обладают приоритетом над возможностями производителя, и защищаются установлениями государства и общества. Важнейшими достижениями «общества потребления» могут считаться:

- последовательное претворение в жизнь идей свободы торговли, что привело к созданию международного рынка товаров и услуг - потребитель в любой стране может приобретать товар, произведенный в любой стране; следствием этого является резкое обострение конкуренции производителей, обострение их борьбы за повышение качества продукции и конкурентные цены, за снижение сроков выхода товара на рынок и в то же время усиление кооперации и сотрудничества в производстве и продвижении товаров на рынок;

- развитие систем государственной и общественной защиты прав потребителей на качественную продукцию и услуги; эти системы защиты не только позволяют потребителю взыскивать с производителя ущерб за недоброкачественную продукцию и услуги, но и предупреждают появление такой продукции на рынке, а также ограничивают монополизацию рынка производителем; следствием этого является необходимость производителя предоставлять потребителю систему доказательств качества товара еще до того, как потребитель этот товар приобрел;

- достаточно высокий уровень самосознания потребителей, которые согласны платить за качество и готовы сотрудничать с производителем в его повышении.

Из общей «сверхзадачи» повышения качества жизни, которая стала основой государственной политики большинства промышленно развитых стран, логически вытекает государственная политика в области качества товаров и услуг. Например, в Объединенной Европе такая политика воплощена в так называемой гармонизированной концепции.

Качество продукции и услуг является одним из важнейших факторов реализации национальных интересов во всех сферах деятельности государства: экономической, социальной, военной, международной, информационной, экологической.

Роль качества продукции и услуг в реализации национальных интересов России изложены в Концепции национальной политики России в области качества продукции и услуг, разработанной в соответствии с Конституцией Российской Федерации и направленной на реализацию национальных интересов России. Последние определены Стратегией национальной безопасности Российской Федерации до 2020 года, утвержденной Указом Президента Российской Федерации от 12 мая 2009 г. № 537.

Всеобщая грамотность членов общества — потребителей и производителей продукции и услуг — в вопросах качества является одним из условий высокого уровня жизни общества. Знания о правах делают потребителя активным двигателем повышения качества приобретаемой им продукции и получаемых услуг, что наиболее полно проявляется в условиях насыщенного рынка. Знания о методах обеспечения качества создают производителю предпосылки для удовлетворения потребностей потребителя и, как следствие, достижения успеха в конкурентной борьбе.

В качестве инструмента обеспечения высокого качества продукции и услуг в Европе победили идеи, ориентированные на систему качества. Это означает отход от обеспечения качества путем сертификации продукции и переход к выпуску качественной продукции путем внедрения систем обеспечения качества.

Многообразие определений термина «качество» связано, в первую очередь, с многоаспектностью категории качества. Так, например, качество в философском смысле, представляет собой «непосредственную характеристику непосредственного бытия», в политэкономическом — «результат взаимодействия потребительной стоимости и стоимости». Один из патриархов теории управления качеством, Ф. Кроссби, определил качество как «соответствие требованиям», а его коллега Дж. Джуран — как «соответствие назначению» [2]. Дж. Харрингтон определяет качество как «удовлетворение или превышение требований потребителя по приемлемой для него цене». По [3] «качество - сложное свойство, представляющее собой совокупность всех тех и только тех свойств, которые характеризуют получаемые при потреблении объекта результаты (как желательные, положительные, так и нежелательные, отрицательные)».

Понятие качества - фундаментальная категория, выступающая в роли атрибута любого материального объекта, но обычно данное понятие рассматривают гораздо уже — как совокупность свойств объекта, обусловливающих его пригодность для использования по назначению [4]. В соответствии с действующим международным стандартом ИСО 9000:2000: «качество — степень выполнения требований совокупностью собственных характеристик (продукции, системы или процесса)».

Последнее определение отличается от ранее использованных, в том числе и стандартизированных определений несколькими принципиальными положениями, существенно влияющими на подход к оцениванию качества. Федеральный закон «О техническом регулировании» определяет цели оценки соответствия как удостоверение соответствия техническим регламентам, стандартам. Под удостоверением соответствия техническим регламентам, стандартам, понимается определение выполнения требований к объекту в соответствии с его функциональным назначением. Функциональное назначение является важнейшей характеристикой объекта как элемента системы и определяет его место в системе. Функциональное назначение может быть сформулировано в виде основной функции для объекта - элемента системы или некоторого множества функций для объекта как подсистемы. Под степенью соответствия объекта функциональному назначению (ССОФН) понимается сводный (комплексный, обобщенный) показатель, синтезирующий (агрегирующий) отдельные показатели соответствия в единую сводную оценку, учитывающую как значения используемых показателей так и их значимость для оценки объекта в целом.

В работе синтезированы алгоритмы определения ССОФН на основе анализа их эффективности и метрологических характеристик. Эффективность алгоритма определяется величинами дисперсий полученных оценок соответствия: меньше дисперсия (по сравнению с дисперсиями оценок, полученных на основе других алгоритмов) - выше эффективность данного алгоритма и наоборот. Метрологические характеристики алгоритма выражаются дисперсиями оценок показателей соответствия, вызванных дисперсиями (погрешностями) оценивания (измерения) параметров объекта или средними квадрати-ческими отклонениями параметров объекта.

Анализ нормативных документов, результатов научных исследований, работ отечественных ученых Ю.П. Адлера, Г.Г. Азгальдова, В.Г. Велика, Г.Н. Бобровникова, А.В. Гличева, Б.Г. Литвака, А.И. Орлова, В.В. Рыжакова, Н.В. Селезневой, Г.Н. Солода, А.И. Субетто, А.Г. Суслова, М.В. Федорова, Ю.В. Федотова, В.Н. Фомина , Н.В. Хованова, И.Ф. Шишкина и др. свидетельствует о том, что данная область знаний активно развивается. При этом информация о существующих методах оценивания ССОФН требует доказательств системности, научной обоснованности и эффективности применяемых методов определения степени соответствия.

Таким образом, актуальность темы работы предопределена востребованностью теоретико-методологических обоснований выбора и методов, позволяющих аргументировано осуществить этот выбор из многообразия имеющихся алгоритмов оценивания степени соответствия по определенным базовым характеристикам; отсутствием обоснованных рекомендаций по снижению конфликтности алгоритмов, порождаемой корпоративными интересами различных структур. Отсюда возникает противоречие. Суть его такова. Известен ряд алгоритмов (критериев) оценивания качества — степени соответствия [5 - 21 и др.], но обоснованно выбрать из их числа лучший затруднительно, так как нет инструментария, позволяющего исследовать свойства этих алгоритмов и сравнивать их между собой.

С учетом этого противоречия был сделан выбор темы исследования, проблема которого сформулирована следующим образом: как повысить конкурентноспособность отечественной продукции и услуг, в частности, путем совершенствования методов оценивания их качества (ССОФН) и использования при принятии решений в реальных задачах управления.

Объектом исследования являются алгоритмы оценивания ССОФН, а его предметом — анализ и синтез комплексных и обобщенных алгоритмов оценивания ССОФН, направленных на формирование ценностных суждений об объекте оценки.

Целью работы является исследование и разработка методов повышения эффективностй и качества процессов управления образовательной и производственно-экономической деятельностью путем совершенствования алгоритмов оценивания ССОФН.

В соответствии с проблемой, объектом, предметом и целью исследования были поставлены следующие задачи:

1. Обоснование необходимости исследования алгоритмов оценивания ССОФН.

2. Разработка аналитического метода исследования алгоритмов оценивания ССОФН на чувствительность к изменениям параметров и выбора лучших из них по характеристикам несмещенности и эффективности для использования в системах оценивания качества.

3. Подтверждение экспериментальным путем эффективности синтезированных алгоритмов оценивания ССОФН (на примере оценивания качества высшего образования).

4. Подготовка рекомендаций по использованию разработанных алгоритмов оценивания ССОФН в системах поддержки принятия решений.

Методы исследования. В соответствии с целью исследования решение поставленных задач обеспечивалось совокупностью методов: системного анализа, имитационного моделирования, статистических методов оценивания и идентификации, теории нечетких множеств, экспертных методов анализа и синтеза, экспериментальных методов.

Опытно-экспериментальная база исследования — государственное образовательное учреждение высшего профессионального образования «Пензенская государственная технологическая академия», в котором проводилось оценивание качества подготовки специалистов. Исследованием были охвачены преподаватели, студенты, работники вуза (всего более 150 чел.).

Научная новизна работы заключается: в разработке методического подхода к исследованию алгоритмов оценивания ССОФН, позволяющего провести сравнительный анализ алгоритмов на смещенность и эффективность и выработать обоснованные рекомендации по выбору лучших из них для использования в системах оценивания качества; в разработке математических моделей определения тенденций изменения весовых коэффициентов единичных показателей соответствия, позволяющих определить значения весовых коэффициентов единичных показателей соответствия для ранжированного ряда любого числа показателей; в разработке обобщенных алгоритмов оценивания ССОФН, позволяющих нивелировать мажорантность различных выборочных средних (и тем самым снизить смещенность оценок степени соответствия), способствующих повышению эффективности решения задач управления и принятия решений с учетом требований всех участников системы «изготовитель (поставщик-потребитель».

Практическая значимость работы состоит в том, что разработанные методы, модели и алгоритмы позволяют обеспечить эффективное статистическое оценивание ССОФН.

Достоверность научных результатов исследования обеспечена методологической обоснованностью исходных позиций исследования, сходимостью теоретических и экспериментальных данных, выбором моделей и методов, адекватных исследуемым объектам, практической реализацией разработанных алгоритмов на примере оценивания качества высшего образования.

На защиту выносятся следующие положения: — методический подход для исследования алгоритмов оценивания ССОФН на эффективность и несмещенность; математические модели экспертных оценок значимости единичных показателей соответствия (качества); метод исследования алгоритмов оценивания ССОФН на чувствитель-. . ность к изменению параметров и выбора лучших из них для использования в системах оценивания качества; комплексные и обобщенные алгоритмы оценивания ССОФН (на основе различных выборочных средних и на основе представлений нечетких множеств - функций принадлежности комплексных показателей соответствия).

Апробация и реализация результатов исследования. Результаты работы докладывались и обсуждались на 5-х Международных и 2-х Всероссийских научно-технических конференциях и семинарах, опубликованы в 15 печатных трудах, подтверждены свидетельством о государственной регистрации программы для ЭВМ.

Результаты диссертационной работы внедрены в системах менеджмента качества Пензенской государственной технологической академии, Пензенского государственного университета, Самарского государственного университета. Универсальность применения разработанных алгоритмов подтверждена актами использования результатов работы в НИИ физических измерений, г. Пенза; ФГУП "Пензенское производственное объединение электронной вычислительной техники", г. Пенза.

Публикации. По теме диссертации опубликовано 15 печатных работ, в том числе в изданиях, рекомендованных ВАК РФ, три работы.

Структура и объем работы. Диссертационная работа состоит из введения, четырех глав, заключения, библиографического списка использованных источников из 126 наименований, 4 приложений, содержит 193 страницы основного текста, 53 рисунка и 12 таблиц.

Заключение диссертации по теме «Управление в социальных и экономических системах», Кузнецова, Марина Владимировна

Основные результаты исследования проблемы синтеза алгоритмов оценивания ССОФН, результаты численного эксперимента реализации теоретических положений, дают основания сделать следующие выводы:

1. В работе выполнен системный анализ исследований в области оценивания ССОФН, обоснованы условия, обеспечивающие объективность оценивания значений ее величины и показано, что эти условия могут быть реализованы.

2. На основе анализа существующих подходов, способов и критериев оценивания степени соответствия установлено, что все современные способы оценивания строятся на основе четкой структуры: аналитических выражений — алгоритмов оценивания соответствия, единого диапазона изменений (вариаций) количественных оценок единичных и комплексных показателей соответствия, четкой системы формализации исходных единичных показателей соответствия, первоначально заданных в произвольных (различных) единицах, и с учетом их значимости - весовых коэффициентов.

3. Показано, что существующие способы задания номинальных величин весовых коэффициентов преимущественно основаны на экспертном методе и не обеспечивают в должной мере определенности их числовых значений при значительных затратах времени и средств на проведение вычислительных и технологических процедур. В связи с этим обоснована необходимость поиска и применения нетрадиционных подходов для решения подобной задачи: поиска статистических обобщающих закономерностей изменения составляющих алгоритмов оценивания и разработки на их основе методик выбора номинальных величин весовых коэффициентов.

4. Разработаны общие положения синтеза виртуального эталона, которые представляют виртуальный эталон прогнозной моделью объекта, характеризующей взаимосвязи ее технических параметров и характеристик, составом наиболее важных единичных показателей соответствия и их наилучшими предельными значениями в прогнозируемом периоде времени. Это позволяет разработчику и заказчику определить перспективные (достижимые) требования к новым образцам продукции и обеспечить их конкурентноспособность.

5. Предложен методический подход и разработан- аналитический аппарат для исследования алгоритмов оценивания ССОФН на эффективность и несмещенность.

6. Предложены и исследованы модели различных (комплексных и обобщенных) алгоритмов оценивания, учитывающих вариации единичных показателей соответствия и их весовых коэффициентов. При этом разработаны два подхода к синтезу обобщенных алгоритмов оценивания ССОФН и соответствующие алгоритмы: на основе различных выборочных средних, в которых используются комплексные показатели соответствия, и на основе представлений нечетких множеств — функций принадлежности комплексных показателей соответствия.

7. Разработаны аналитические методы и практические методики определения весовых коэффициентов единичных показателей соответствия с учетом различных тенденций изменения их значимости, которые использованы при оценивании ССОФН и метрологических характеристик предложенных алгоритмов.

8. Проведена экспериментальная проверка результатов теоретических исследований комплексных и обобщенных алгоритмов, позволившая выявить значительное снижение величины мажорантности и повышение эффективности алгоритмов, а также условия важности дифференцирования тенденций изменения единичных показателей соответствия и их влияние на результирующий показатель качества объекта, например, качество подготовки специалистов с высшим образованием.

9. Разработана программа (в среде визуального программирования DELPHI 7), предназначенная для исследования алгоритмов оценивания ССОФН, расчета комплексных и обобщенных показателей ССОФН.

10. Разработана методика оценивания ССОФН, отвечающая основным требованиям стандартов ИСО 9000:2000, реализованная в форме компонентов прикладного программного обеспечения системы менеджмента качества вуза.

11. Разработана концепция создания автоматизированной системы поддержки принятия решений процессов оценивания ССОФН для анализа качества объектов различного назначения.

Заключение

Список литературы диссертационного исследования кандидат технических наук Кузнецова, Марина Владимировна, 2009 год

1. Круглов, М. Г. Менеджмент систем качества Текст. : учеб. пособие / М. Г. Круглов, С. К. Сергеев, В. А. Такташев и др.- М. : ИПК издательство стандартов, 1997. 368 с.

2. Азгальдов, Г. Г. Общие сведения о методологии квалиметрии Текст. / Г. Г. Азгальдов // Стандарты и качество М. - 1994. - №11.- С. 24-29.

3. Азгальдов, Г. Г. Квалиметрия: методы, проблемы, сфера применения: Методы количественной оценки качества продукции (квалиметрия) Текст. / Г. Г. Азгальдов, Э. П. Рейхман. М. : Экономика, 1972.

4. Герасимова, JI. В. Комплексная оценка качества проектов и выбор оптимального варианта по методу академика А. Н. Крылова Текст. / JI. В. Герасимова, И. Б. Погожев // Стандарты и качество М.:, 1972. - № 8. - С. 37-39.

5. Рыжаков, В. В. Основы оценивания качества продукции Текст. : учеб. пособие / В. В. Рыжаков, В. Б. Моисеев, JI. Г. Пятирублевый; под редакцией В. В. Рыжакова. Пенза : Изд-во Пенз. технол. ин-т, 2001. — 308 с.

6. Федюкин, В. К. Основы квалиметрии. Управление качеством продукции Текст. : учеб. пособие / В. К. Федюкин — М. : Информационноиздательский дом «Филинъ», 2004. — 296 с.

7. Портнова, И. М. Совершенствование системы оценивания качества продукции Текст. : дис. на соиск. уч. степ. канд. техн. наук : 05.02.23 / И. М. Портнова. Пенза, ПГТА, 2005.

8. Федюкин, В. К. Методы оценки и управления качеством промышленной продукции Текст.: учебник / В. К. Федюкин, В. Д. Дурнев, В. Г. Лебедев М.: Филинъ. Рилант, 2001. - 328 с.

9. Вишняков, И. В. Экономико-математические модели оценки деятельности коммерческих банков Текст. / И. В. Вишняков. — СПб., СПбГУ, 1999.

10. Федотов, Ю. В. Методы построения сводных оценок эффективности деятельности сложных производственных систем Текст. / Ю. В. Федотов, Н. В. Хованов // Научные доклады № 25(R) 2006. - СПб.: НИИ менеджмента СПбГУ, 2006.

11. Рыжаков, В. В.Алгоритмы измерения качества продукции и их характеристики Текст. / В. В. Рыжаков, М. В. Рыжаков, К. В. Рыжаков // Измерительная техника. 2003. - № 5. - С. 9-12.

12. Рыжаков, В. В. Основы оценивания качества продукции Текст. : учеб. пособие / В. В. Рыжаков, В. Б. Моисеев, JI. Г. Пятирублевый; под редакцией В. В. Рыжакова. 2-е изд. - Пенза : Изд-во ПГТА, 2005. - 275 с.

13. Шишкин, И. Ф. Квалиметрия и управление качеством Текст. : учебник для вузов / И. Ф. Шишкин, В. М. Станякин. М. : Изд-во ВЗПИ, 1992.

14. Азгальдов, Г. Г. Количественная оценка качества Текст. / Г. Г.

15. Азгальдов, JI. А. Азгальдова. М., 1971.

16. Андрианов, Ю. М. Квалиметрические аспекты управления качеством новой техники Текст. / Ю. М. Андрианов, М. В. Лопатин. — Л., 1983.

17. Андрианов, Ю. М. Квалиметрия в приборостроении и машиностроении Текст. / Ю. М. Андрианов, А. И. Субетто. Л.: Машиностроение, 1990. — 216 с.

18. Богданчук, В. 3. Агрегирование векторных критериев Текст. / В. 3. Богданчук, Б. М. Егоров, А. Н. Катулев. Л., 1990.

19. Губкин, А. С. О предложениях А. Н. Крылова по сравнительной оценке проектов кораблей Текст. / А. С. Губкин // Судостроение. 1958. — № 3. С. 1-3.

20. ГОСТ Р ИСО 9000-2001. Системы менеджмента качества. Основные положения и словарь Текст. — М. : Изд. официальное: Госстандарт России, 2001.

21. ГОСТ Р ИСО 9000-2001. Системы менеджмента качества. Требования Текст. М. : Изд. официальное: Госстандарт России, 2001.

22. ГОСТ Р ИСО 9000-2001. Системы менеджмента качества. Руководящие указания по улучшению деятельности Текст. — М. : Изд. официальное: Госстандарт России, 2001.

23. Дитрих, Я. Проектирование и конструирование: системный подход Текст. : [пер. с польск.]. — М. : Мир, 1981. С. 227.

24. Словарь русского языка Текст. М. : Русский язык, 1988.

25. Шадрин, А. Д. Качество как степень.Текст. / А. Д. Шадрин // Методы менеджмента качества. — 2002. № 8. - С. 47—48.

26. Российская Федерация. Законы. О техническом регулировании Текст. : [федер. закон : принят Гос. думой 01 мая 2007 г.]. № 65-ФЗ.

27. Фомин, В. Н. Управление качеством. Сертификация Текст. : учебное пособие / В. Н. Фомин. — 2-е изд., перераб. и доп. М. : Ось-89, 2007.-384 с.

28. Бриджмен, П. Анализ размерностей Текст. / П. Бриджмен. — М. ; — Л., 1934.

29. Калейчик, М. М. Квалиметрия Текст. : учебное пособие / М. М. Калейчик. 4-е изд., стереотипное — М. : МГИУ, 2006. - 200 с.

30. Субетто, А. И. Квалиметрия Текст. / А. И. Субетто. — СПб.: изд-во «Астерион», 2002. 288 с.

31. Гличев, А. В. Основы управления качеством продукции Текст. / А. В. Гличев. М. : Изд-во АМН, 1998.

32. Хованов, Н. В. Оценка сложных экономических объектов и процессов в условиях неопределенности. К 95-летию метода сводных показателей А. Н. Крылова Текст. / Н. В. Хованов // Вест. С.-Петербургского ун-та. Серия 5. 2005. - Вып. 1. - С. 138-144.

33. Хованов, Н. В. Модели учета неопределенности при построении сводных показателей эффективности деятельности сложных производственных систем Текст. / Н. В. Хованов, Ю. В. Федотов // Научные доклады № 29(R) 2006 - СПб. : НИИ менеджмента СПбГУ, 2006.

34. Анфилатов, B.C. Системный анализ в управлении Текст. : учеб. пособие / В. С. Анфилатов, А. А. Емельянов, А. А. Кукушкин; под редакцией А. А. Емельянова. М. : Финансы и статистика, 2006. — 368 с.

35. Хованов, Н. В. Анализ и синтез показателей при информационном дефиците Текст. / Н. В. Хованов. СПб., СПбГУ, 1996.

36. Миллер, Г. Магическое число семь плюс минус два. Инженерная психология Текст. / Г. Миллер. М.: Прогресс, 1964.

37. Литвак, Б. Г. Экспертная информация: методы получения и анализа Текст. / Б. Г. Литвак. М. : Радио и связь, 1981.

38. Ларичев, О. И. Качественные методы принятия решений Текст. / О. И. Ларичев, Е. М. Мошкович. М. : Физматлит, 1996.

39. Хамканова, Д. Н. Основы квалиметрии Текст.: учеб. пособие / Д.

40. Н. Хамканова. Улан-Удэ: Изд-во ВСГТУ, 2003. - 144 с.

41. Дочкин, С. А. Методы квалиметрии для оценки качества образования Текст. / С. А. Дочкин // Образование и общество. — 2006. — № 1. -С. 41-44.

42. Азгальдов, Г. Г. О квалиметрии Текст. / Г. Г. Азгальдов, Э. П. Райхман:'-М. : Изд-во стандартов, 1973. 172 с.

43. Вишняков, И. В. Методика оценивания финансово-экономических объектов с использованием системы поддержки принятия решений АСПИД-3 Текст. / И. В. Вишняков, М. В.Михайлов, Н. В. Хованов. СПб., СПбГУ, 1998.

44. Гличев, Ф. В. Прикладные вопросы квалиметрии Текст. / Ф. В. Гличев, Г. О. Рабинович, М. И. Примаков. М., 1983.

45. Орлов, А. И. Прикладная теория измерений Текст. / А. И. Орлов // Прикладной многомерный статистический анализ. — М. — 1978. — С. 68—138.

46. Хованов, Н. В. АСПИД система квалиметрических методов оценивания в условиях дефицита информации качества сложных технических объектов Текст. / Н. В. Хованов // Методология и практика оценивания качества продукции. - JL, ЛДНТП, — 1988. — С. 56-61.

47. Селезнева, Н. А. Качество высшего образования как объект системного исследования Текст. / Н. А. Селезнева. Лекция-доклад. Изд.З-е. М. : Исследовательский центр проблем качества подготовки специалистов, -2003.-95 с.

48. ГОСТ 22851-77 «Выбор номенклатуры показателей качества промышленной продукции»

49. ГОСТ 23354.2-81. Экспертные методы оценки качества промышленной продукции. М. : Изд-во стандартов, 1981.

50. РД 50-64-84. Методические указания по разработке государственных стандартов, устанавливающих номенклатуры показателей качества групп однородной продукции. М. : Изд-во стандартов, 1984.

51. ГОСТ 15467-79 Управление качеством продукции. Основные понятия и определения. — М. : Изд-во стандартов, 1979.

52. Адлер, Ю. П. Что век грядущий нам готовит? Текст. / Ю. П. Адлер, И. 3. Аронов, В. Л. Шпер // Надежность и контроль качества. 1999. — № 1— С. 26—46.

53. Макэлрой, Дж. Какие надо делать автомобили (структурирование функции качества) Текст. / Дж. Макэлрой // Автомобильная промышленность США. 1987. - № 7. - С. 10-12.

54. Макэлрой, Дж. Построение дома качества. Почему и как структурирование функции качества распространяется в автомобильной промышленности Текст. / Дж. Макэлрой // Курс на качество. — 1992. № 1. - С. 67-73.

55. Денисов, А. А.Теория больших систем управления Текст. : учебное пособие для вузов / А. А. Денисов, Д. Н. Колесников. — Л. : Энергоатомиздат,1982.-288 с.

56. Имитационное моделирование производственных систем Текст. / под общей ред. А. А. Вавилова. М. : Машиностроение; Берлин: Техника,1983. 416 с.

57. Методы квалиметрии в машиностроении Текст. : учеб. пособие / под редакцией В. Я. Кершенбаума, Р. М. Хвастунова. М. : Технонефтегаз, 1999.-210 с.

58. Ларичев, О. И. Метод ЗАПРОС решения слабо структурированных проблем выбора при многих критериях Текст. / О. И. Ларичев, Ю. А. Зуев, Л. С. Гнеденко. М.: Препринт ВНИИСИ, 1979

59. Ларичев, О. И. Комплексные показатели и экспертные кривые в задачах управления энергетики Текст. / О. И. Ларичев. М. : Информэнерго, 1979.

60. Погожев, И. Б. Обобщенные показатели при исследовании сложных систем Текст. / И. Б. Погожев, В. Л. Аничкина. -М. : Наука, 1986.

61. Гличев, А. В. Квалиметрия (ее содержание, задачи и методы) Текст. / А. В. Гличев, И. Б. Погожев, Я. Б. Шор, Г. Г. Азгальдов // Стандарты и качество. 1970. - № 11. - С. 24.

62. Азгальдов, А. А. Теория и практика оценки качества товаров (основы квалиметрии) Текст. / А. А. Азгальдов. -М. : Экономика, 1982.

63. Хвастунов, Р. М. "Об основных теоретических проблемах" современной квалиметрии Текст. / Р. М. Хвастунов // Надежность и контроль качества. 1999. - № 2. — С. 27-39.

64. Литвак, Б. Г. Экспертные оценки и принятие решений Текст. / Б. Г. Литвак. -М. : Патент, 1996.

65. Литвак, Б. Г. Экспертные технологии в управлении Текст. : учеб. пособие / Б. Г. Литвак. -2-е изд. М. : Дело, 2004. — 400 с.

66. Каршаков, В. П. Качество продукции. Принципы и методы обеспечения Текст. : учеб. пособие / В. П. Каршаков, Ю. В. Перекусихин, Б. П. Сибринин, Г. П. Шлыков; под ред Г. П. Шлыкова. Пенза : Пенз. гос. техн. ун-т, 1996. - 106 с.

67. Кокотов, А. В. Совершенствование системы оценивания качества автомобиля на основных этапах его жизненного цикла Текст. : автореферат диссертации на соискание ученой степени кандидата технических наук: 05.02.23/А. В. Кокотов. Самара, 2002.

68. Поливановский, В. В. Паретно-оптимальные решения многокритериальных задач Текст. / В. В. Поливановский, В. Д. Ногин. М. : Наука, 1982.

69. Салуквадзе, М. Е. Задачи векторной оптимизации в теории управления Текст. / М. Е. Салуквадзе. Тбилиси : Мецниераба, 1975.

70. Афанасьев, П. П. Оценка качества машиностроительной продукции Текст. : учеб. пособие / П. П. Афанасьев, В. Ф. Витинин, И. С. Голубев ; под ред. И. С. Голубева. М. : Изд-во МАИ, 1995. - 76 с.

71. Липаев, В." В. Выбор и оценивание характеристик' качества программных средств Текст. / В. В. Липаев // Методы и стандарты. Сер. Информационные технологии. М. : СИНТЕГ, - 2001. - 228 с.

72. ГОСТ Р ИСО 9126:1-4. Информационные технологии. Оценка продукции программного обеспечения. Характеристики качества и руководящие положения по их применению Текст. — М. : Изд. официальное: Госстандарт России, 2001.

73. Кини, Р. Л. Принятие решений при многих критериях предпочтения и замещения Текст. : [пер. с англ.] / Р. Л. Кини, X. Райфа ; под ред. И. Ф. Шахнова. М. : Радио и связь, 1981. - 560 с.

74. Тульчин, Л. Г. Анализ методов оценки качества промышленной продукции Текст. / Л. Г. Тульчин. Л., ЛДНТП, 1989. - 28 с.

75. Фишберн, П. Методы оценки аддитивных ценностей. В кн. Статистическое измерение качественных характеристик Текст. / Фишберн П. -М. : Статистика, 1975.

76. Рыжаков, В. В. Синтез критериев оценивания знаний и приобретенных навыков студентов Текст. / В. В. Рыжаков, В. В. Усманов // Оборонный комплекс — научно-техническому прогрессу России. М. : ВИМИ, - 2005. - № 3. - С. 80-82.

77. Левшина, В. В. Применение технологии структурирования функции качества при производстве писчей бумаги Текст. / В. В.Левшина, Ю. Г. Малахова, С. М. Репях // Методы менеджмента качества. 1999. - № 12.

78. Кемени, Дж. Кибернетическое моделирование Текст. : [пер. с англ.] / Дж. Кемени, Дж. Снелл. — М. : Советское радио, 1972.

79. Новицкий, П. В. Оценка погрешностей результатов измерений Текст. / П. В. Новицкий, И. А. Зограф. —JL : Энергоатомиздат, Ленинградское отделение, 1985.

80. Берка, К. Измерения Текст. / К. Берка. — М., 1987.

81. Бурдун, Г. Д. Основы метрологии Текст. / Г. Д. Бурдун, Г. Н. Марков. М., 1972.

82. Кузьмин, А. М. История возникновения, развития и использования метода развертывания функции качества Текст. / А. М. Кузьмин // Методы менеджмента качества. — 2002. — № 2. — С. 4-10.

83. Новицкий, П. В. Основы информационной теории измерительных устройств Текст. / П. В. Новицкий. Л. : Энергия, 1968.

84. Айвазян, С. А. Прикладная статистика. Основы моделирования и первичная обработка данных Текст. / С. А. Айвазян, И. С. Енюков, Л. Д. Мешалкин. М., 1983.

85. Орлов, А. И. Прикладная теория измерений Текст. / А. И. Орлов // Прикладной многомерный статистический анализ. М., - 1978. - С. 68-138.

86. Александров, А. Д. Общий взгляд на математику Текст. / А. Д. Александров // Математика, ее содержание, методы и значение. Т. 1. М. -1956.-С. 5-78.

87. Колмогоров, А. Н. Измерение Текст. / А. Н. Колмогоров, Ю. В. Самсонов, К. П. Широков // БСЭ, 3-е изд. Т. 10. М., 1972.

88. Фресс, П. Экспериментальная психология Текст. / П. Фресс, Ж. Пиаже.-М., 1966.

89. Nelson Т., Bartley S. Numerosity, number, arithmetization // Philosophical Sciences. 1961. Vol.28. №2. P. 178-203.

90. Орлов, А. И. Эконометрика Текст. : учебник для .вузов / А. И. Орлов. 2-е изд. М. : Изд-во "Экзамен", 2003. - 576 с.

91. Математика и кибернетика в экономике. Словарь-справочник. Текст. / Составители Н. Н. Гонтарова, М. Б. Немчикова, А. А. Попова. М. : Издательство «Экономика», 1975. — 258 с.

92. Колмогоров, А. Н. О понятии алгоритма Текст. / А. Н. Колмогоров // Успехи математических наук. 1953. - № 8:4(56). - С. 175, 176.

93. Колмогоров, А. Н. К определению алгоритма. Текст. / А. Н. Колмогоров, В. А. Успенский // Успехи математических наук. 1958. — № 13:6.-С. 3-28.

94. Кузнецова, М. В. Исследование алгоритмов комплексных выборочных средних оценивания соответствия Текст. / М. В. Кузнецова,

95. B. В. Рыжаков, М. В. Рыжаков // Аналитические и численные методы моделирования естественнонаучных и социальных проблем: сб. статей II Международной научно-технической конференции. Пенза : ПДЗ, 2007. —1. C. 293-297.

96. Рыжаков, В. В. Прогнозирование показателей надежности приборов длительного применения на основе представлений нечетких множеств Текст. / В. В. Рыжаков // Приборы и системы управления, — ,1995. -№ 1. С. 27-30.

97. Рыжаков, В. В. Надежность технических систем и ее прогнозирование Текст. : учеб. пбсобие / В. В. Рыжаков. Часть 2. Пенза, ПТИ, 2000. - 95 с.

98. Субетто, А. И. Качество образования: проблемы оценки и мониторинга Текст. / А. И. Субетто // Образование. — 2000. — № 2. — С. 62— 66.

99. Губарев, В. В. Системное представление качества образования Текст. / В. В. Губарев // Стандарты и качество. 2002. - № 4. - С. 30— 35.

100. Воротилов, В. А. Анализ основных подходов к определению качества образования Текст. / В. А. Воротилов // Высшее образование в России. 2006. - № 11. - С. 49-52.

101. Музыченко, Е. А. Критериальные модели качества образования: состояние и перспективы Текст. / Е. А. Музыченко, В. Н. Меньшова // Образование и общество. — 2007. № 1. - С. 36-40.

102. Садков, В. Г. Система управления качеством высшего образования в регионах России Электронный ресурс. http://quality.eup.ru/MATEiaALY5/sadkov.html

103. Субетто, А. И. Образовательное общество как форма реализации стратегии развития образования в XXI веке Текст.: монография /А.И. Субетто, Г.М. Иманов. СПб.: Астерион,2008. — 310с.

104. Селезнева, Н. А. Качество высшего образования как объект системного исследования Текст. : лекция-доклад. Изд. 7-е, стереотипное / Н. А. Селезнева. — М.: Исследовательский центр проблем качества подготовки специалистов, 2008. 95 с.

105. Коротков, Э. А. Система комплексной оценки качества образования специалиста Текст. / Э. А. Коротков // Высшее образование в России. 1995. - № 2. - С. 72-78.

106. Словарь терминов и определений открытого образования Электронный ресурс. http://www.info.mesi.ru/program/k 2.html

107. Самойлов, В. А. Механизмы взаимодействия государственной и общественно-профессиональной систем оценки качества образования Текст. / В. А. Самойлов, А. А. Коваленко // Высшее образование в России. — 2009. — №2.-С. 18-29.

108. Шадриков, В. Д. Об участии негосударственных организаций в оценке качества образования и в аккредитации вузов Текст. / В. Д. Шадриков // Высшее образование в России. — 2009. № 2. - С. 4-7.

109. Кузнецова, М.В. Качество образования как объект оценивания Текст. // Проблемы качества образования в современном обществе: Сборник статей V Международной научно-практической конференции. — Пенза: ПДЗ, 2009.-С. 15-22.