Метод и алгоритмы автоматизированного построения компьютерных тестов контроля знаний по техническим дисциплинам тема диссертации и автореферата по ВАК РФ 05.13.01, кандидат технических наук Сергушичева, Анна Павловна

• Сергушичева, Анна Павловна
• кандидат технических наук
• 2007

Оглавление диссертации кандидат технических наук Сергушичева, Анна Павловна

ВВЕДЕНИЕ

ГЛАВА 1. ПРОБЛЕМА ПОСТРОЕНИЯ КОМПЬЮТЕРНЫХ ТЕСТИРУЮЩИХ СИСТЕМ ДЛЯ КОНТРОЛЯ ЗНАНИЙ ПО ТЕХНИЧЕСКИМ ДИСЦИПЛИНАМ

1.1. Анализ современного состояния проблемы разработки компьютерных тестирующих систем

1.1.1. Компьютерные тестирующие системы (КТС): основные понятия и классификация тестов. Характеристики качества тестов

1.1.2. КТС - необходимый компонент компьютерных средств обучения, применяемых в учебном процессе технического вуза

1.2. Традиционные подходы к задачам компьютерного тестирования

1.2.1. Определение целей, содержания и структуры компьютерного теста

1.2.2. Модели компьютерного тестирования

1.2.3. Определение качества тестов. Разработка шкалы измерений и правил интерпретации результатов. Анализ результатов и составление отчета

1.3. Ограничения известных моделей и инструментальных средств для построения компьютерных тестирующих систем по техническим дисциплинам

1.4. Проблема автоматизации построения КТС и постановка задач, решаемых в диссертационной работе

1.5. Выводы

ГЛАВА 2. МОДЕЛЬ КТС И ПРОДУКЦИОННЫЙ МЕТОД ГЕНЕРАЦИИ ТЕСТОВЫХ ЗАДАНИЙ ДЛЯ КТС

2.1. Модель КТС, включающей механизм автоматической генерации тестовых заданий

2.2. Продукционный формализм

2.3. Метод генерации тестовых заданий для КТС

2.4. Интерпретации метода генерации тестовых заданий для различных предметных областей

2.4.1. Интерпретации метода для генерации тестовых заданий по дисциплине «Математика»

2.4.2. Интерпретации метода для генерации тестовых заданий по физике

2.4.3. Интерпретации метода генерации тестовых заданий по дисциплинам социально-гуманитарного цикла

2.4.4. Интерпретации метода генерации тестовых заданий по дисциплине «Метрология, стандартизация, сертификация»

2.4.5. Интерпретации метода генерации тестовых заданий по специальным дисциплинами и другие направления применения предложенного метода

2.5. Выводы

ГЛАВА 3. ИНСТРУМЕНТАЛЬНЫЙ ПРОГРАММНЫЙ КОМПЛЕКС

ДЛЯ ПОСТРОЕНИЯ КОМПЬЮТЕРНЫХ ТЕСТИРУЮЩИХ СИСТЕМ И

ПРАКТИЧЕСКИЕ РЕЗУЛЬТАТЫ ЕГО ПРИМЕНЕНИЯ

3.1. Принципы построения и структура КТС

3.2. Инструментальный программный комплекс (ИПК) для построения компьютерных тестирующих систем

3.2.1. Структурные блоки ИПК

3.2.2. Формирователь структуры теста

3.2.3. Редактор грамматик

3.2.4. Блок генерации заданий по грамматикам

3.2.5. Блоки, реализующие другие способы автоматизированного формирования тестовых заданий 93 3.2.5. Генератор (синтезатор) теста 96 3.2.5. Программная реализация ИПК

3.3. Основные характеристики прикладных тестирующих систем, реализованных на базе предложенных модели и метода

3.3.1. Тренирующая интеллектуальная система

3.3.2. Инструментальная интеллектуальная программная среда

3.3.3. Интеллектуальная тестирующая система

3.3.4. Сетевая версия интеллектуальной тестирующей системы

3.3.5. Интернет-версия интеллектуальной тестирующей системы

3.4. Экспериментальная оценка качества генерируемых тестов

3.5. Результаты применения ИПК для прогнозирования успешности обучения

3.6. Оценка эффективности ИПК-КТС

3.7. Выводы

Введение диссертации (часть автореферата) на тему «Метод и алгоритмы автоматизированного построения компьютерных тестов контроля знаний по техническим дисциплинам»

В современных условиях научно-технического прогресса, развития новых технологий и информатизации общества наряду с задачей обучения актуальной является задача постоянного обновления знаний специалистов. Важную роль в решении указанных задач играют компьютерные средства обучения. Применение информационных технологий в образовании позволяет индивидуализировать процесс обучения, обеспечить самоконтроль и контроль обучаемого с диагностикой ошибок и обратной связью. Демонстрация визуальной учебной информации, моделирование и имитация процессов и явлений существенно расширяют наглядность курса и повышают интерес к процессу обучения. В системе образования накоплено несколько тысяч компьютерных программ учебного назначения. Разрабатываются и используются как отдельные образовательные программные продукты, так и автоматизированные обучающие системы (АОС) по различным учебным дисциплинам. Подобные системы достаточно широко известны. Основным способом контроля знаний в обучающих системах по-прежнему остается тестирование. Помимо измерительной задачи тестирование может выполнять целый ряд функций: обучение, тренинг, развитие когнитивных способностей, повышение мотивации обучения и некоторые другие. Поэтому тестирующие системы (ТС) являются непременным атрибутом АОС.

Различные аспекты тестирования, создания и применения обучающих и тестирующих систем на базе современных информационных технологий, вопросы разработки баз данных и баз знаний программных систем рассмотрены в работах отечественных и зарубежных ученых Аванесова В.С, Башмакова И.А., Башмакова А.И., Воробьева В.И., Горбатова Д.С., Загвязинского В.И., Клайна П., Курганской Г.С., Минасова Ш.М., Поспелова Д.А., Третьякова П.И., Хованова Н.В., Чертовского В.Д. и др. Многие авторы отмечают трудоемкость организации тестирующих систем, так как основное внимание разработчики ТС уделяют автоматизации процессов тестирования и обработки его результатов, а при создании инструментальных средств решаются вопросы применения методологий и технологий тестирования, оформления интерфейса, стыковки различного программного обеспечения (в том числе и форматов наполнения систем). Использование в компьютерных средствах обучения для контроля знаний весьма ограниченного числа тестовых заданий (наличие в ТС большого количества разнообразных тестовых заданий позволяет повысить качество тренинга и объективность тестирования, реализовать построение адаптивных тестирующих систем) объясняется, в основном, слабой автоматизацией процессов построения тестов. Большинство существующих ТС отличаются узкой специализацией и сложностью внесения изменений в наборы тестовых заданий, что создает проблему адаптации обучающих систем к быстро меняющимся требованиям. Между тем, в связи с возникновением и интенсивным развитием новых технологий достаточно часто требуется обновление тестов (множеств заданий), например, в области информационных технологий и программирования. Поэтому проблема автоматизации построения компьютерных тестов контроля знаний по техническим дисциплинам представляется весьма актуальной.

Целью диссертационной работы является снижение трудоемкости построения компьютерных тестов, повышение обоснованности и глубины контроля знаний на основе автоматизации процесса формирования тестовых заданий, имеющих заданную структуру и содержание.

Объектом диссертационных исследований являются компьютерные тестирующие системы, используемые в учебном процессе технических вузов.

Предметом исследования является моделыю-алгоритмическое и программное обеспечение автоматизированного формирования тестовых заданий по техническим дисциплинам.

Для достижения поставленной цели в диссертационной работе решаются следующие задачи:

1. Исследование существующих автоматизированных тестирующих систем и анализ методов их построения;

2. Разработка модели компьютерной тестирующей системы (КТС), включающей механизм автоматического порождения тестовых заданий;

3. Разработка метода автоматической генерации тестовых заданий в структуре

КТС;

4. Разработка алгоритмов реализации основных функций инструментального программного комплекса (ИПК), основанного на предложенном методе;

5. Разработка и реализация инструментального программного комплекса для автоматизированного построения компьютерных тестирующих и обучающих систем на основе метода автоматической генерации тестовых заданий;

6. Проведение экспериментальных исследований прототипов КТС и оценка их эффективности и качества создаваемых тестов.

Результаты выполненных в работе исследований и проектных работ базируются на использовании методов статистического анализа, информационного моделирования данных и знаний, модульном и объектно-ориентированном подходе к проектированию и программированию, теории формальных языков и грамматик, теории дедуктивных систем и исчислений.

Основные положения, выносимые на защиту:

1. Модель компьютерной тестирующей системы, включающая механизм динамического формирования тестовых заданий для контроля знаний;

2. Продукционный метод автоматической генерации тестовых заданий, предназначенный для построения компьютерных тестов контроля знаний;

3. Алгоритмы реализации основных функций инструментального программного комплекса (ИПК), разработанного на основе метода автоматической генерации тестовых заданий и предназначенного для формирования тестов контроля знаний.

Научная новизна работы заключается в следующем:

1. Разработана модель компьютерной тестирующей системы, отличающаяся от существующих моделей наличием механизма оперативного формирования тестовых заданий и позволяющая обеспечить предъявление заданий в соответствии с заданной структурой теста в динамическом режиме;

2. Предложен продукционный метод автоматической генерации тестовых заданий, отличающийся возможностью быстрого изменения характеристик компьютерных тестов и позволяющий оперативно генерировать заданное количество тестов и управлять их содержанием в автоматическом режиме;

3. Разработаны алгоритмы реализации основных функций инструментального программного комплекса (ИПК), построенные на основе метода автоматической генерации тестовых заданий и отличающиеся от существующих алгоритмов тем, что предоставляют возможность на основе формальных грамматик генерировать тесты заданной структуры и содержания.

Практическая ценность результатов работы заключается в том, что разработаны и доведены до практической реализации модель тестирующей системы, метод автоматической генерации тестовых заданий и алгоритмы реализации основных функций, предложенные для построения КТС, которые нашли применение в виде прикладного инструментального программного комплекса. ИПК отличается способностью автоматического порождения прикладных тестирующих и обучающих систем и позволяет учесть специфику предметной области и методики преподавания всех циклов дисциплин технического вуза, особенности методов построения учебных курсов; снизить затраты на разработку обучающих и (или) тестирующих систем. Результаты экспериментов по автоматизированному созданию на базе ИПК тестирующих систем и их апробации показывают эффективность применения предлагаемого подхода. Качество генерируемых тестов достаточно высокое.

Прикладные компьютерные тестирующие и обучающие системы, разработанные автором в ходе диссертационных исследований, успешно применяются в течение ряда лет в учебном процессе нескольких вузов как при использовании традиционных форм организации учебного процесса, так и при дистанционных формах обучения. Результаты работы внедрены в Вологодском государственном техническом университете (в структуре АОС «Метрология», в мультимедийном электронном учебнике «Интеллектуальные системы управления», в комплексах лабораторных работ по дисциплинам «Системное программное обеспечение», «Информационное обеспечение систем управления», «Оборудование автоматизированных производств»), в Вологодском государственном педагогическом университете (для контроля знаний по дисциплине «Базы данных и экспертные системы»), в филиале (г.Вологда) СевероЗападной академии госслужбы (в тестирующих системах по информатике и компьютерной подготовке), в ООО «Газстройпроект» г. Вологда и в ЗАО «КАМИ-СВЭП" г. Вологда (в системе повышения квалификации и аттестации персонала).

Основные результаты диссертации получены в рамках выполнения госбюджетных научно-исследовательских работ: "Исследование и разработка методов моделирования сложных систем" (Вологда, ВоПИ, 1996-98г.г., тема Г79.2.Э5), "Исследование методов разработки экспертных и обучающих систем"

Вологда, ВоПИ, 1996-98г.г., тема Г79.2.Э4), в гранте "Исследование и разработка математических методов и средств проектирования распределенных интеллектуальных информационных систем" (грант по фундаментальным исследованиям в области гуманитарных наук Г02-4.3-65 Минвуза РФ 2003-2004 г.г.)

Апробация. Основные результаты диссертационной работы докладывались и обсуждались более, чем на 20 конференциях и симпозиуме: I и III Международные конференции «Информационные технологии в производственных, социальных и экономических процессах: ИнфоТех» (Череповец, ЧГУ, 1996, 2001); I и II Международные научно-технические конференции «Информатизация процессов формирования открытых систем на основе СУБД, САПР, АСНИ и искусственного интеллекта» (Вологда, ВоГТУ, 2001, 2003, 2005); IV и V Международные конференции «Интерактивные системы» (Ульяновск, УлГТУ, 2001, 2003); II, III, IV и VI Международные научные конференции «Информация -Коммуникация - Общество» (Санкт-Петербург, ЛЭТИ, 2001, 2002, 2003, 2005); VIII, IX, X, XI и XII Международные конференции «Современные технологии обучения» (Санкт-Петербург 2002, 2003, 2004,2005, 2006); I и II Научно-технические конференции «Тренажерные технологии и симуляторы» (Санкт-Петербург, СПбГПУ 2002, 2003); X и XII Международные конференции «Математика. Компьютер. Образование» (Пущино, 2003, 2005); XIV, XV и XVI Международные конференции «Применение новых технологий в образовании» (Троицк, 2003, 2004, 2005); II и III Всероссийские научно-технические конференции «Вузовская наука - региону» (Вологда, ВоГТУ, 2004, 2005); II Международная научно-техническая конференция «Моделирование, оптимизация и интенсификация производственных процессов и систем» (Вологда, ВоГТУ, 2004); Международная научная конференция «Informatics, Mathematical Modelling and Design in the Technics, Controlling and Education (IMMD'2004)» (Владимир, 2004); VI Международный симпозиум «Интеллектуальные системы» (Саратов, 2004).

Публикации. По теме диссертации опубликовано более 30 работ, в том числе: 1 статья в журнале из перечня ВАК («Системы управления и информационные технологии»), 7 статей, 25 докладов на международных и российских научных конференциях. Публикации отражают все основные результаты диссертационной работы.

Объем и структура работы.

Работа содержит 201 страницу, в том числе J4icTpaiiHua основного текста, иллюстрированного 42 рисунками и состоит из введения, трех глав, заключения, перечня литературы и приложений.

Краткое содержание диссертации

В первой главе «Проблема построения компьютерных тестирующих систем для контроля знаний по техническим дисциплинам» рассматриваются современное состояние процесса создания компьютерных тестирующих систем, традиционные подходы к задачам их разработки и проблемы построения КТС. Формулируются основные подходы к решению указанных проблем.

Во второй главе «Модель КТС и продукционный метод генерации тестовых заданий для КТС» предлагается модель компьютерной тестирующей системы, отличающаяся от традиционных наличием механизмов динамического формирования тестовых заданий и предполагающая предъявление заданий в динамическом режиме в соответствии с заданной структурой теста. Разработан продукционный метод автоматической генерации тестовых заданий, применение которого позволяет быстро изменять свойства системы, учитывать динамику процесса обучения и создавать структуры обучающих и тестирующих систем генерирующих неограниченное количество тестов и управлять их содержанием автоматическим образом.

В третьей главе «Инструментальный программный комплекс для построения компьютерных тестирующих систем и практические результаты его применения» рассматриваются принципы построения, структура, и программная реализация инструментального программного комплекса (ИПК), основанного на методе автоматической генерации тестовых заданий, описываются результаты экспериментов по автоматизированному созданию наборов тестов и их апробации на основании которых доказана эффективность применения предлагаемого подхода.

В «Заключении» приводятся основные общие выводы по работе и формулируются предложения о возможных направлениях дальнейших научных исследований.

Заключение диссертации по теме «Системный анализ, управление и обработка информации (по отраслям)», Сергушичева, Анна Павловна

3.7. Выводы

1. Разработана структура ИПК, основными принципами построения которого являются: автоматическая генерация произвольных множеств тестовых заданий в соответствии с заданной преподавателем моделью обучения; точная формализация

Затраты на создание одного варианта тестов, мин

200.

100

Вручную

ИПК (40 типов заданий) ИПК (10 типов заданий) Повторно, посредством ИПК

Количество заданий в тесте

Среднее время создания тестов, мин

1500 1000500.

А Вручную (вновь) о Вручную (из базы заданий)

О ИПК (вновь) -й- ИПК (повторно) ип не Количество требующихся вариантов теста

30

20

10

Затраты на создание тестов, час

1000

Вручную (из базы заданий) ИПК (повторно)

Количество заданий в тестах

Рис. 3.31 Затраты времени на создание тестов порождаемых множеств вопросов путем описания их соответствующими формальными грамматиками; автоматическое предъявление в динамике сгенерированных заданий в соответствии с моделью тестирования.

2. Разработаны алгоритмы реализации основных функций ИПК, построенного на основе предложенных принципов и метода автоматической генерации тестовых заданий.

3. Осуществлена программная реализация ИПК, который отличается способностью автоматического порождения прикладных тестирующих и обучающих систем и позволяет снизить трудоемкость создания тестовых заданий

4. Разработаны и внедрены в эксплуатацию более десяти реализаций программных продуктов основанных на принципах построения ИПК или использующих ИПК как элемент их структуры. В числе программных систем, на которых разработанный метод и созданные на его основе инструментальные средства были апробированы: тренирующая интеллектуальная система; пять версий инструментальной интеллектуальной программной среды; локальная, сетевая и Интернет-версии интеллектуальной тестирующей системы; система тестирования уровня логических способностей; адаптивная обучающая система; электронные учебники по дисциплинам «Метрология» и «Оборудование автоматизированных производств» и некоторые другие. Разработанные системы успешно используются в учебном процессе. Реализация указанных проектов позволила добиться повышения успешности обучения, повысить оперативность изменения тестового материала, освободить преподавателей от ряда трудоемких операций.

5. Проведен анализ качества генерируемых автоматическим образом тестов. Исследовалось 38 сгенерированных тестов. Установлено, что их качество достаточно высокое: все исследованные тесты валидны, показатель надежности тестовых заданий лежит в пределах 0,6-0,85.

6. Проведен анализ экспериментальных данных по определению эффективности применения ИПК. На основе анализа выявлено, что зависимость затрат времени на создание тестов от количества заданий носит убывающий характер, что применение ИПК позволяет сократить время разработки тестовых систем и убедительно доказывают целесообразность и эффективность интеллектуализации тестирующих и обучающих систем.

ЗАКЛЮЧЕНИЕ

В диссертационной работе рассмотрен метод построения компьютерных тестирующих систем. Предложенный метод позволяет в рамках продукционного формализма описать функционирование тестирующей системы и автоматическим образом перейти от формального описания структуры теста и типов тестовых заданий к конкретным вариантам тестов. Применение разработанного метода и построенных на его основе программных средств позволило добиться нового качества компьютерных средств тестирования и обучения, существенно повысить оперативность обновления информации, снизить трудоемкость построения тестов и увеличить их вариативность.

Основные научные и практические результаты состоят в следующем:

1. Проведен анализ современного состояния проблемы разработки компьютерных тестирующих систем. Основными недостатками существующих систем являются: высокая трудоемкость их реализации и узкая специализация, ограниченное число тестовых задании и сложность внесения изменений в наборы тестовых заданий, что создает проблему адаптации тестирующих и обучающих систем к быстроменяющимся требованиям технического вуза. Установлено, что распространенные инструментальные средства позволяют решать вопросы применения методологий и технологий тестирования, оформления интерфейса, стыковки различного программного обеспечения, наполнения базы вопросов и ответов, но не позволяют автоматизировать процессы построения тестов, которые имеют максимальную трудоемкость по сравнению с другими стадиями процесса тестирования. Определено, что снижению трудоемкости построения тестов контроля знаний будет способствовать создание инструментальной системы, предоставляющей КТС возможность генерации тестовых заданий.

2. Разработана модель компьютерной тестирующей системы, которая отличается от традиционных моделей наличием механизмов динамического формирования тестовых заданий и возможностью предъявления заданий в динамическом режиме в соответствии с заданной структурой теста.

3. Разработан и формализован на основе продукционного аппарата метод автоматической генерации тестовых заданий, пригодный для построения компьютерных тестов контроля знаний, отличающийся возможностью быстрого изменения свойств системы, учетом динамики процесса обучения и позволяющий формировать структуру и содержание прикладной тестовой системы, определяя лингвистическое содержание конкретных тестов с помощью формальных грамматик. Данный метод предоставляет разработчику возможности автоматизированного создания практически неограниченного спектра прикладных программно-информационных тестирующих систем для всех циклов дисциплин технического вуза и формирования множества индивидуальных, не пересекающихся между собой вариантов. Рассмотрена интерпретация метода ко всем циклам дисциплин технического вуза.

4. Предложена и обоснована концепция инструментального программного комплекса (ИПК) для автоматизированного построения компьютерных тестирующих и обучающих систем на основе метода автоматической генерации тестовых заданий. Разработаны алгоритмы реализации основных функций ИПК.

5. Осуществлена программная реализация ИПК, который отличается способностью автоматического порождения прикладных тестов по техническим дисциплинам на основе базы знаний, представленной формальными грамматиками, и позволяет снизить трудоемкость создания тестов.

6. На основе ИПК разработан ряд прикладных систем (инструментальная интеллектуальная программная среда; локальная, сетевая и Интернет-версии компьютерной тестирующей системы; система тестирования логических способностей, адаптивная обучающая система и др.), которые опробованы на дисциплинах различных циклов технического вуза. Созданные компьютерные тестирующие и обучающие системы отличаются от существующих способностью автоматического формирования тестов и учебного материала. Разработанные системы успешно используются в учебном процессе в Вологодском государственном техническом университете, в Вологодском государственном педагогическом университете, в филиале (г.Вологда) Северо-Западной Академии Госслужбы. Реализация указанных проектов позволила добиться повышения успешности обучения, повысить оперативность изменения тестового материала, освободить преподавателей от ряда трудоемких операций. Результаты работы внедрены также в ООО «Газстройпроект» г. Вологда и в ЗАО «КАМИ-СВЭП" г. Вологда, где успешно используются в системе повышения квалификации и аттестации персонала.

7. Экспериментальные исследования качества создаваемых автоматическим образом тестов и сравнение их с однотипными авторскими тестами показывают, что качество генерируемых автоматическим образом тестов достаточно высокое: Исследовалось 38 сгенерированных тестов. Все исследованные тесты валидны, показатель надежности тестовых заданий лежит в пределах 0,6-0,85.

8. Проведенные исследования по экспериментальному определению эффективности применения ИПК показали, что зависимость затрат времени на создание тестов от количества заданий носит убывающий характер, что применение ИПК позволяет сократить время разработки тестовых систем, что доказывает целесообразность и эффективность построения тестирующих и обучающих систем с помощью ИПК.

Таким образом, сформулированные цели исследования достигнуты и научно-техническая задача построения КТС, обладающих заявленными выше свойствами, в основном решена.

Дальнейшее исследования целесообразно вести в следующих направлениях:

- развитие модели КТС в направлении оптимизация сценариев тестирования;

- разработка интерпретаций метода генерации тестовых заданий для различных предметных областей;

- совершенствование алгоритмов реализации метода генерации тестовых заданий с учетом особенностей распределенной вычислительной среды;

- совершенствование ИПК и разработанных программных средств, основанных на методе генерации тестовых заданий в направлении расширения функциональных возможностей и улучшения интерфейса;

- исследование и разработка методик применения КТС, построенных на основе предложенных в работе модели и метода.

Список литературы диссертационного исследования кандидат технических наук Сергушичева, Анна Павловна, 2007 год

1. Аванесов, B.C. Теория и методика педагогических измерений- Режим доступа: http:\testolog.narod.ru

2. Аванесов, B.C. Тесты в социологическом исследовании. М.: Наука, 1982—199с.

3. Загвязинский, В.И. Теория обучения: Современная интерпретация: Учеб. Пособие для студ. высш. пед. учеб. заведений. М.: Издательский центр «Академия», 2001. - 192 с.

4. Горбатов, Д.С. Практикум по психологическому исследованию: Учеб. Пособие. Самара: Издательский дом «БАХРАХ-М», 2000. - 248 с.

5. Дуплик, С.В. К вопросу о терминологии в области компьютерных средств обучения-Режим доступа: http:// www.dupliksv.hut.ru.

6. Субетго, А.И. Квалитология образования (основания и синтез). СПб., Москва.: Исследовательский центр проблем качества подготовки специалистов, 2000.-220 с.

7. Кпайн, П. Справочное руководство по конструированию тестов Киев: Ника-Центр Лтд, 1994,283с.

8. Бочкин, А.И. Об оценке доли знаний с помощью компьютерных тестов / А.И.Бочкин, Н.С.Вислобокова Информатика и образование. - 2004 - №11, С.66-74.

9. Дылда, Г. Эффективность профессионального обучения Режим доступа: http://www.pmuc.ru/jornal -2004

10. Анастази, А. Психологическое тестирование / Пер. с англ. М.К.Акимовой. -М.: Педагогика, 1982-687с.

11. Афанасьева А.В. Опыт применения современных информационных технологий в обучении студентов в Воронежской государственной технологической академии. Режим доступа: http://ito.edu.ru

12. Борк А. Компьютеры в обучении: чему учит история // Информатика и образование. 1990 - №5. - С. 110-118.

13. Брусиловский, П. Web-тестирование в дистанционном обучении доклад / П.Брусиловский, Ф. Миллер / Технологический Университет Д. Карнеги, 4615 Forbes Avenue, Pittsburgh, PA 15213, США 2000- Режим доступа: http://www.citforum.ru/science.

14. Джон П Кателл Информационные и коммуникационные технологии для активного обучения // Информатика и образование» 2004 - №3.- С.77-86.

15. Инкелес В. e-Learning: опыт западных компаний // Learning World 2004 -№3- С.70-73

16. Kabassi, К., & Virvou, М. Using Web Services for Personalised Web-based Learning. Educational Technology & Society 2003- Режим доступа: http://ifets.ieee.org .

17. Лызлов, A.B. Информационные технологии в организации учебного процесса школы / А.ВЛызлов, О.Н.Найденова 2002 - Режим доступа: http://teacher.fio.ru.

18. Мануйлов, В. Открытое образование: перспективы, рациональность, проблемы./ В.Мануйлов, В.Галкин, И.Федоров. Высшее образование в России -2004-№1,.С.93-104.

19. Масюкевич С. В. Концепция электронного обучения в Корпоративном университете «Северсталь». E-learning корпоративная система электронного обучения. — Режим доступа: http//www.universtal.ru

20. Матушанский Г.У. Подготовка, переподготовка и повышение квалификации научно-педагогических и инженерных кадров России // Educational Technology & Society. 2000. - № 3. - С. 535 - 537.

21. Мел Мучник. E-Leraning в университетах США- 2004- Режим доступа: http://e-learnworld.ru

22. Путилов, Г.П. Интернет — технологии в повышении квалификации и переподготовке кадров / Г.П.Путилов, Л.Н. Кечиев, С.Р. Тумковский Наука и технологии в промышленности - 2001 -№ 3.— С. 76-77.

23. Александров В.В. Развивающие системы в науке, технике, обществе и культуре. Часть 1.Теория систем и системное моделирование. Учебное пособие. -СПб.: СПбГТУ. 2000.-241с.

24. События в мире электронного обучения // Learning World 2004 - №3.1. С.4-7

25. Соловов А.В. Информационные технологии обучения в профессиональной подготовке // Высшее образование в России -1995 №2.- С.31-36

26. Третьяков, П.И Адаптивпое управление педагогическими системами: Учебное пособие для вузов./ П.И Третьяков, С.Н.Митин, Н.Н.Боярцева М: Academia, 2003.-350 с.

27. Ричмонд, У.К. Учителя и машины. Введение в теорию и практику программированного обучения. / У.К Ричмонд, Пер. с англ.- М.:Мир, 1968. 277с.

28. Кербель, Б. М. Методическое обеспечение образовательного процесса при дистанционном обучении в корпоративном ядерном университете / Б.М.Кербель, И.Г.Попова -2003-Режим доступа: http://ito.edu.ru

29. Крицкий С. П., Хадзиев Р. А Дистанционный лабораторный практикум по HTML 2002- Режим доступа: http://conf.sssu.ru/ito

30. Башмаков, А.И. Разработка компьютерных учебников и обучающих систем. / А. И.Башмаков, И.А.Башмаков-М.: Информационно-издательский дом "Филин", 2003.-616 с.

31. Черныш Д. Обзор рынка обучающего контента // Learning World 2004 -№3, С.8

32. А.Г.Абросимов Технологии дистанционного обучения в дополнительном образовании // Информатика и образование-2004 №7.- С.77-82.

33. Е.Варламова Электронные курсы любимой компании // Learning World -2004, -№3. С.66-68

34. Зубкова, Т.А. Построение компьютерных программ в инструментальной системе «Урок» / Т.А.Зубкова, А.А.Карнова Информатика и образование- 1999 -№4.

35. Капустин Н.П. Педагогические технологии адаптивной школы. М.: Академия, 1999.-216 с.

36. Корбут, A.M. Перспективы использования отдельных видов новых информационных технологий в высшем образовании- Режим доступа: www.charko.narod.ru

37. Машбиц Е.Н. Психолого-педагогические проблемы компьютеризации обучения. М.: Педагогика, 1988.191с.

38. Thomas Bruckner Ein WWW-basiertes Lernsystem zum Thema "Internet" -1998 Режим доступа: http://zemm.ira.uka.de

39. Чернявский, А.Ф.Автоматизированные обучающие системы на базе ЭВМ / А.Ф. Чернявский, A.M. Мухтарский; под ред.А.Ф.Чернявского . Минск: изд-во БГУ, 1980.-175 с.

40. Воллосович С.А. Цели и пути создания интеллектуальных обучающих Интернет-систем. Режим доступа: http://ist.ims.ru.

41. Строгалов, А. С. Интеллектуальные системы. Исследования. Компьютерные обучающие системы Режим доступа: www.intsys.msu.ru

42. Тейз А. Логический подход к искусственному интеллекту: От модальной логики к логике баз данных / Пер. с франц. М.: Мир, 1998. - 494 с.

43. Янковская, А.Е. Когнитивные средства в интеллектуальных обучающих системах Режим доступа: http://www.nsu.ru

44. Смирнов, А.В. Многоагентный подход к построению систем интеграции знаний./ А.В.Смирнов, Т.ВЛевашова, М.П.Пашкин, Н.Г.Шилов //Известия вузов. Приборостроение. 2003. Т.46, № 5, С. 13-19.

45. Галлеев, И.Х. О систематизации учебных компьютерных средств. Режим доступа: http://ifets.ieee.org/russian

46. Классификация программно-аппаратных комплексов в образовании. -Режим доступа: http://www.admin.Smolensk.ru

47. Никифоров, В.В. Использование шкал различий в задачах классификации объектов. В.В.Никифоров // Обработка информации, системы и методы: Сб. науч. статей / Под ред. С.С.Садыкова, Д.Е. Андрианова М.: Горячая линия - Телеком, 2003.-С.93-104.

48. Средства и методы компьютерного обучения- Режим доступа: http://keldysh.ru.

49. Роберт, И.В. Толкование слов и словосочетаний понятийного аппарата информатизации образования // «Информатика и образование», 2004, №5. С.22-30, №6. С.63-70.

50. Алессандро д'Атри. Boun giorno, e-Learning! Взгляд из Италии // Learning World-2004-№3-С.74-75

51. Христочевский С.А. Электронные мультимедийные учебники и энциклопедии. // Информатика и образование- 2000 №2, С. 70-77

52. Автоматизированные практикумы Электронный ресурс.: 1 CD-диск -Систем, требования: IBM PC (Pentium I), Windows З.хх/95.

53. Райгородская, A.M. ИВЦ сектор АОС 1995. - 1 CD-диск.

54. SunRav TestOfficePro.WEB: описание программы. Режим доступа: http://www.sunrav.ru/product.html.

55. Тесты on-line: описание программы. Режим доступа: http://www.study.ru/Tests.

56. Булгаков, М. Образовательный портал: анализ требований и платформ / М.Булгаков, В.Герасимов, Н.Курмышев и др. // Learning World 2004 - №3. - С.38-55

57. Галыгин, А.Н. Тестирование через Интернет. / А.Н.Галыгин, Л.Н.Кечиев, И.А.Тарасов, С.Р.Тумковский // Внешкольник -2002, №4. — С. 28.

58. Загузов, Н.И. Основные направления диссертационных исследований по проблемам информатизации образования в 2002-2003/ Н.И.Загузов, Е.Н.Загузова // «Информатика и образование» 2004 - №3. - С. 101-108.

59. Киселев, К. Новые возможности Тренинго-тестирующей системы.// КонсультантПлюс Ежемесячный информационный бюллетень общероссийской сети распространения правовой информации. 2004 №12 - С. 5-6.

60. Скорина, Б.С. Разработка принципов построения и использования программного обеспечения автоматизированных обучающих систем. 2003— http:/nit.itsoft.ru

61. Система "Прометей" -Режим доступа: http://www:jffometeus.ru/)64. "Прометей"-Режим доступа: http://www.prometeus.ru/65. "Аванта"-Режим доступа: http://avanta.wsu.ru

62. Интегрированная обучающая среда "Аванта" 2004 - http://cit.vvsu.ru

63. Обучающее программное средство "АВАНТА"- 2004 Режим доступа: http://db.informika.ru/do/prog

64. Интегрированная система дистанционного обучения LEARNING SPACE: мультимедийное учебное пособие М.: МГУ, 1997- 1 CD-диск.

65. А.В.Комаров. Интегрированная система дистанционного обучения LEARNING SPACE для образовательных учреждений на базе LOTUS DOMINO -2003 Режим доступа: http:/nit.itsoft.ru/; http://conf.mitme.ru

66. Система дистанционного обучения IBM Learning Space Режим доступа: -http://www.teacher.fio.ru 2003

67. И. Цыбаненко, Lotus Notes все же реальность. -2002 / http://kinnet.ru

68. Leraning Space фирмы LOTUS Режим доступа: www.lotus.com.

69. Learning Space 5.0 (Lotus/IBM)- Режим доступа: http://kinnet.ru

70. Адаптивная диалоговая информационная система АДОНИС. Руководство пользователя. Версия 1.3. М: НПК Файл, 1991. 140 с.

71. АДОНИС. Режим flocryna:http://alex.krsk.ru

72. Саканян, Е.И. Использование системы АДОНИС для организации входного контроля знаний студентов при проведении практических занятий по технологии лекарственных форм / Е.И.Саканян, В.В.Клепиков- Режим доступа: http://ito.bitpro.ru

73. Инструментальная система автоматизированного обучения РАКУРС. Том 1. Руководство пользователя.

74. В.Г. Исаков, С.В. Тарабукин инструментальное средство "APOLLO" для разработки компьютерных обучающих систем Режим доступа: http://www.nsu.ru

75. ИнфоЛидер: Каталог решений и услуг// Спб,М.:2005. 8с.

76. Кечиев, Л.Н. Информационно-образовательная среда технического вуза. Л. Н.Кечиев, Г. П.Путилов, С.Р.Тумковский Режим доступа: http://www.www.snews.ru.

77. Комличенко, В.Н. Авторская система проектирования автоматизированных учебных курсов для АОС-ВУЗ/ В.Н.Комличенко, С.В.Новиков // Киев: УСиМ. -1990. №1. С.107 -114.

78. А.К.Кувакин Инструментальное средство для создания дидактических компьютерных материалов. Режим доступа: http://chernozem.vspu.ru

79. Программа для создания учебных курсов «ПАУК»- Режим доступа: http://www.dupliksv.hut.ru/pauk/dict/index.html

80. Система МАГИСТР Режим доступа: http://www.karazbal.ru

81. Система тестирования СИТО Режим доступа: - http:// reg.wsu.ru. - 2004

82. СТ КУРС: Система дистанционного обучения Режим доступа: www.stkers.ru

83. Усенко, С.В. Автоматизированная система обучения и контроля знаний СИТО- Десногорск: Смоленский УТЦ, 2000. Режим доступа: http://www.smutc.ru/science/publish.

84. Учебный модуль "Технология разработки мультимедиа проектов" 2002 -Режим доступа: http://textbook.keldysh.ru.

85. Компьютерные обучающие программы. Научно-техническая фирма "Ростел" Режим доступа: http://ulm.uni.udm.ru

86. Ebbing Chemistry Tutorial Режим доступа: http://www.eclsys.com

87. Expert Sistems and CLIPS -Режим доступа: http://www.ghgcorp.com.

88. Intro to Artificial Intelligence Режим доступа: http://www.ghgcorp.com.

89. N. Person, A. Graesser, R. Kreuz, Victoria Pomeroy "Модель диалога человека-преподавателя контролирует деятельность в AutoTutor" International Journal of Artificial Intelligence in Education 2001- №12 - С 23-39.

90. Король Д.Ю. Использование современных информационных технологий в образовании. Режим доступа: http://charko.narod.ru

91. Инструкция по использованию курсов WebSoft- Режим доступа: http://webtutor.websoft.ni

92. Аудитория. Служба подготовки оперативного персонала Режим доступа: www.admin.Smolensc.ru.

93. Test Maestro testing software for teachers. Test Maestro II Details. Russ & Ryan EdWare, 2003- Режим доступа: http://www.rredware.com

94. Пушкова, M.H, Использование тестов на уроках математики в младших классах / М.Н.Пушкова, М.В.Мащенко Информатика и образование - 2004 -№11.-С.75-79.

95. Курганская, Г.С. Модели, методы и технология дифференцированного обучения на базе Интернет: Авореферат.- М: 2001 22 е.- Режим доступа: http://www.keldysh.ru

96. Минасов, Ш.М. Модели и алгоритмы программных инструментальных средств обработки информации и генерации учебных курсов в сетевой информационно-обучающей системе: Авореферат.- Уфа: 2003 22 с.

97. Бенедиктов, Б.А. Психология обучения и воспитания в высшей школе./ Б.А.Бенедиктов, С.Б.Бенедиктов Мн.: Выш. шк., 1983.-224 с.

98. Аванесов, В. С. Формы тестовых заданий. М.: МИСиС , 1991. - 122с

99. Александров, И.О. Комплексное исследование структуры индивидуального знания / И.О. Александров, Н.Е. Максимова, А.Г. Горкин, и др. // Психологический журнал 1999 - том 20, № 1 - С. 49-69.

100. Баранов, В.Ю. Формы ответов при автоматизации контроля знаний // Информатика и образование 2004 - №8.- С. 17-22.

101. Селезнева Н.А. Качество высшего образования как объект системного исследования. Лекция-доклад. Изд. 3-е М.: Исследовательский центр проблем качества подготовки специалистов, 2003. - 95 с.

102. Афанасьева Т.В. О проектировании систем управления качеством образования -2002- Режим доступа: http://conf.sssu.ru/ito

103. Брусиловский П.Л. Модели обучаемого в интеллектуальных обучающих системах // УсиМ. 1992. -№ 7/8. - С. 109-118.

104. Дуплик С.В. Модель адаптивного тестирования па нечеткой математике. // Информатика и образование- 2004 -№11.- С.57-65.

105. Рубина, Н. Расширение OSI-подобных моделей с целью преодоления логического разрыва между проектами реальной жизни и информационными технологиями / Н.Рубина, Ю.Кирчин. Режим доступа: http://risbank.spb.ru.

106. Rich, Е. Users are individuals: individualizing user models. International Journal of Human-Computer Studies. Режим flocTyna:http://charko.narod.ru.

107. Тихомирова, E. Очень простая оценка качества http://e-learnworld.ru

108. Хованов, Н.В. Математические основы теории шкал измерения качества./ Н.В.Хованов, Л.: ЛГУ, 1982, 185 с.

109. ComputerMentor. О программе, об авторах. Отзывы о программе "Компьютер-наставник"/ А.В.Гуртовой, С.ВНелюби., М.ВКремнев и др. М: НПП "Компьютер-наставник" АНПО "Наука", 2000 - Режим доступа: http://www.c-mentor.ru.

110. ComputerMentor. Режим доступа: http://www.ComputerMentor.da.ru, http://www.softsearh.ru/programs.

111. Чертовской В.Д. Базы данных: современный подход СПб: изд-во Петербургский институт печати, 2000, -212 с.

112. Б.Я.Советов, В.В.Цехановский, Чертовской В.Д. Базы данных: теория и практика М. Высш.шк.,2005 -463 с.

113. Тарасов, В.А. Генерация тестов с выборочными ответами на языке JavaScript / В.А.Тарасов, А.С.Кюршонов //Информатика и образование 2004 - №7. -С.113-115.

114. Кратко, М.И. Формальные исчисления Поста // Проблемы кибернетики. -1966 Вып. 17 - С.41-65

115. Кратко, М.И. Быстрый алгоритм распознавания следствий для монадических логических программ М.И.Кратко, Г.С.Плесневич // Автоматика и телемеханика. 2001.- № 10.- С.91-102.

116. Кузнецов В.Е. Представление в ЭВМ неформальнх процедур: продукционные системы. -М.Наука, 1989. -160с.

117. Маслов С.Ю. Некоторые свойства аппарата канонических исчислений Э.Л.Поста. // Тр. матем. ин-та АН СССР. 1964 - Т.72 - С.5 - 56.

118. Маслов С.Ю. Теория дедуктивных систем и ее применения. М. :Радио и связь, 1986. - 136 с.

119. Поспелов Д.А. Ситуационное управление: Теория и практика М.:Наука, 1986.-288с.

120. Швецов, А.Н. Канонические исчисления Поста как средство моделирования сложных дискретных систем / А.Н.Швецов, А.А.Суконщиков // Автоматизация процессов управления и обработки информации: Сб. статей. -Вологда:ВоПИ, 1998.-С. 128-135.

121. Post E.L. Formal reductions of the general combinatorial problem // Amer J.Math. 1943. - Vol.65.№2 - P. 197-215.

122. Гладкий А.В. Формальные грамматики и языки. М.: Наука, 1973. - 368с.

123. Маккиман У., Хорнг Дж., Уортман Д. Генератор компиляторов/ Пер. с англ. С.М.Круговой Под ред. В.М.Савинкова. М.6 Статистика, 1980. - 527с.

124. Хантер Р.: Проектирование и конструирование компиляторов. М.: Финансы и статистика., 1984.-232 с.

125. А.Хохлов Простой компилятор// Мир ПК 2005, №5, С.68-72

126. Математика. Тесты 11 класс. Варианты и ответы централизованного тестирования. -М.: Центр тестирования МО РФ, 2001,2002.

127. Физика. Тесты 11 класс. Варианты и ответы централизованного тестирования. -М.: Центр тестирования МО РФ, 2002.

128. Русский язык. Тесты 11 класс. Варианты и ответы централизованного тестирования. -М.: Центр тестирования МО РФ, 2002

129. Русское правописание в таблицах: Правила, исключения, примеры, комментарии. В.М.Шевелев, Л.А.Шевелева. Под редакцией проф. Л.А.Быковой -М.: ООО «Издат-Школа, 1997. 66с.

130. Чешко, Л.А. Русский язык: Для подготовительных отделений вузов: Учеб.пособие.-М.: Высш.шк., 1990.-333 с.

131. Дворяшин, Б.В. Основы метрологии и радиоизмерения: Учебное пособие для вузов / Б.В. Дворяшин. -М.: Радио и связь, 1993. 320 с.

132. Клаассен К.Б. Основы измерений. Электронные методы и приборы в измерительной технике / К.Б. Клаассен. М.: Постмаркет, 2000. - 352 с.

133. Куликовский, К.Л. Методы и средства измерений: Учебное пособие для вузов / К.Л. Куликовский, В.Я. Купер М.: Энергоатомиздат, 1986. - 448 с.

134. Нефедов, В.И. Метрология и электрорадиоизмерения в телекоммуникационных системах: Учебник для вузов / В.И. Нефедов, В.И. Хахин, Е.В. Федорова и др.; Под ред. В.И. Нефедова. -М.:Высш.шк., 2001. -383с.:

135. Основы метрологии и электрические измерения: Учебник для вузов / Б.Я. Авдеев, Е.М. Антонюк, Е.М. Душин и др.; Под ред. Е.М.Душина. JL: Энергоатомиздат, 1987. - 480 с.

136. Сергеев А.Г., Крохин В.В. Метрология: Учеб. пособие для вузов / А.Г. Сергеев, В.В. Крохин -М.: Логос, 2000. -408

137. Электрические измерения: Учебник для вузов / Л.И. Байда, Н.С. Добротворский, Е.М. Душин и др.; Под ред. А.В. Фремке и Е.М. Душина. Л.: Энергия, 1980.-392 с.

138. Баранов, С.Н. Процесс разработки программных изделий./ С.Н.Баранов,

139. A.Н.Домарацкий, Н.К.Ласточкин, В.П.Морозов. М.: Наука, "Физматлит",2000.-176с.

140. Иванищев, В.В. Введение в теорию алгоритмических сетей. /

141. B.В.Иванищев, В.Е.Марлей СПб.: СПбГТУ, 2000.-180с.

142. Гладилин, А.Н. Программные средства для тестирования студентов / А.Н.Гладилин, И.М.Мальцев, И.Д Михайлова 2002- Режим доступа: http://conf.sssu.ru/ito

143. Коджаспирова, Г.М. Технические средства обучения и методика их использования: Учебное пособие./ Г.М.Коджаспирова, К.В.Петров М.: Academia, 2002.-256 с.

144. Китаевская, Т.Ю. Автоматизированная система проектирования содержания обучения в вузе / Т.Ю.Китаевская, А.А.Арзамасцев, Д.В.Слетков // Информатика и образование- 2004-№12- С.100-105.

145. Просвиркин, В.Н. Изменение процесса обучения информационным технологиям в связи с изменением образовательной среды в центре образования №1679. //. Информатика и образование- 2004-№12- С.108-111.

146. Соловов А.В. Проектирование компьютерных систем учебного назначения: Учебное пособие. Самара: СГАУ, 1995. 140 с.

147. В.Городецкий, В.Самойлов, А.Малов. Технология обработки данных для извлечения знаний: Обзор состояния исследований. Новости искусственного интеллекта, №№ 3-4,2002.

148. Юсупов P.M., Заболотский В.П. Научно-методологические основы информатизации. СПб.: Наука, 2000,-455с.

149. Методы и модели оценивания качества программного обеспечения. Воробьев В. И., Копыльцов А. В., Пальчун Б. П., Юсупов Р. М. С-Пб.:СПИИРАН.1992.-ЗЗс

150. И.А.Мельчук Автоматический анализ текста- М: Энергоатомиздат, 1964.- 245с.

151. Головин, Ю.А. Информационные сети и телекоммуникации. Часть1: Учебное пособие / Ю.А.Головин, А.А.Сукошциков Вологда: ВоГТУ, 2003.-151с.

152. Джиоев, A.JI. История отечества: Справочное пособие // АЛ.Джиоев, -М.: Менеджер, 1998. 384 с.

153. Баженова, И. Ю. Delphi 6. Самоучитель программиста. / И.Ю.Баженова -М.: КУДИЦ-ОБРАЗ, 2002. 432с.: ил.

154. Кэнту, М. Delphi 7: Для профессионалов. / М.Кэнту СПб.: Питер, 2004.

155. Фаронов, В.В. Delphi. Программирование на языке высокого уровня: учебник для ВУЗов/ В.В. Фаронов.- СПб.:Питер, 2004.-640 е.: илл.

156. Архангельский А.Я. Программирование в Delphi 6. / А.Я. Архангельский -М.: ЗАО «Издательство БИНОМ», 2001 г.

157. Свистунов С.В. Справочник. Стандартные функции и процедуры Delphi 4, Delphi 5. / С.В. Свистунов М.: J1XA «Альманах», 2001. - 318 с.

158. Тюкачев Н. Delphi 5. Создание мультимедийных приложений. Учебный курс. / Н. Тюкачев, Ю.Свиридов СПб.: Питер, 2001. - 400 с.

159. Швецов, А.Н. Автоматизированные системы тестирования интеллекта/ А.Н.Швецов А.А.Сукошциков // Матер, всерос. конф. "Математическое и компьютерное моделирование в науках о человеке и обществе". 28 июня- 2 июля 1999 г. Москва-Вологда.

160. Швецов, А.Н. Автоматизация тестирования интеллекта в компьютерных системах / А.Н.Швецов А.А.Сукошциков // Перспективные технологии автоматизации: Тезисы докл. межд. электрон, науч.-техн. конф. Вологда: ВоГТУ, 1999.-С. 132.

161. Швецов, А.Н. Тренирующая интеллектуальная система/ А.Н.Швецов, М.Б. Киракозов, Д.В.Зайцев // Межвузовская научная конференция "Проблема развития в гуманитарном и социально-экономическом знании" 16-17 ноября 1999г С.-Пб. 1999 С. 112-115.

162. Швецов А.Н. http://www.smit-vstu.narod.ru

163. Анастази А. Психологическое тестирование / А. Анастази, С. Урбина ; Пер. с англ. и общ. ред. А.А.Алексеевой. СПб. и др.: Питер, 2002 - 687с.

164. Белова О.В. Общая психодиагностика // http://www.nsu.ru/psych/internet/

165. Большаков, В.Ю. Психотренинг: Соционика, игры, упражнения. С.-Пб.: Служба доверия., 1994.-323 с.

166. Зинверт Хорст. Ваш коэффициент интеллекта: Тесты. М.: АО «Интерэксперт», 1997,- 143 с.:ил.

167. Практическая психология в тестах, или как научится понимать себя и других. М:АСТ-ПРЕСС, 1998. 376 - е.: ил.

168. Туник Е.Е. Психодиагностика творческого мышления. Креативные тесты. СПб.: Изд-во «Дидактика Плюс», 2002. -с.48

169. Айзенк Г.Дж. Узнай свой собственный коэффициент интеллекта. М.: «Ай Кью», 1993.- 178 с.

170. Айзенк Г.Дж. Проверь свои способности. С.-Пб.: «Лань», 1995. - 160 с.

171. Eysenck H.J. Know your own IQ. Harmondsworth: Penguin Books. 1962. -192 p -CA Pelican Books

172. Соколов Б.В. Методы обработки экспертной информации: Уч.пособие. -СПб.:СПбГУАП, 2005. -33 с.

173. Пять факторов, определяющих эффективность дистанционного обучения Режим доступа: www.distance-learning.ru

174. А.В.Соловов. Об эффективности информационных технологий обучения //. Высшее образование в России 1997 -№ 3, С. 100-107 - Режим доступа: http://cnit.ssau.ru

175. Эффективность дистанционного обучения Режим доступа: http://www.websoft.ru,

176. Дугина, О.А. Как повысить эффективность проведения обучения. -Режим доступа: http://www.hrm.ru

177. Кухарев, Н.В. Эффективность обучения и воспитания: Наблюдение, опыт, размышления / Н. В. Кухарев Минск Изд-во БГУ, 1980. 215 с.

178. Посадский, А.П. Основы консалтинга. Государственный университет / А.П.Посадский. М.: Высшая школа экономики. 1999 - 115 с.

179. Котенко И.В., Юсупов P.M. Перспективные направления исследований в области компьютерной безопасности // Защита информации. Инсайд, № 2, 2006. С.46-57.

180. ПУБЛИКАЦИИ АВТОРА ПО ТЕМЕ ДИССЕРТАЦИИ

181. Суконщиков, А.А. Разработка экспертных и обучающих систем на основе принципов искусственного интеллекта / А.А. Суконщиков, А.Н. Швецов, А.П. Сергушичева // Сб. науч. трудов института в 2-х томах: Т.1. Вологда: ВоПИ, 1997. С. 32-35.

182. Сергушичева, А.П. Основы метрологии: Учебное пособие. Часть 1/ А.П.Сергушичева // Вологда: ВоГТУ, 2001г. 108с.:ил.

183. Швецов, А.Н. Концепция построения мультиагентной системы «Виртуальный преподаватель» / А.Н. Швецов, А.П. Сергушичева // Материалы VIII межд. конф.

184. Современные технологии обучения «СТО-2002» 24 апреля 2002 г. СПб.:СПбГЭТУ «ЛЭТИ», 2002. Т.2, С37-39

185. Ю.Швецов, А.Н. Информационное обеспечение технологий интеллектуального развития / А.Н. Швецов, А.П. Сергушичева // Тренажерные технологии и симуляторы: Материалы науч.-техн. конф. 5,6 июня 2002 г. Санкт-Петербург, СПбГПУ 2002 С. 166169

186. Сергушичева, А.П. Метрология, стандартизация и сертификация. Часть 1: Учебное пособие / А.П.Сергушичева // Вологда: ВоГТУ, 2004г. 188с.

187. Швецов, А.Н. Мультиагентная система «Виртуальный преподаватель» / А.Н.Швецов, А.П.Сергушичева // Интеллектуальные системы: Труды Шестого межд. симпозиума. Саратов 29 июня-2 июля 2004/ Под ред. К.А.Пупкова. М.:РУСАКИ, 2004. С.263-266.

188. Сергушичева, А.П. Использование инструментальных интеллектуальных программных средств для построения адаптивной обучающей системы /

189. А.П.Сергушичева, А.Н.Швецов // Материалы XV Межд. коиф. «Применение новых технологий в образовании», 29-30 июня 2004. Троицк. С. 151-153.

190. Сергушичева А.П., Швецов А.Н. Развитие способов синтеза тестовых вопросов в тестирующих системах.// Двенадцатая Международная конференция Математика. Компьютер. Образование: Тезисы, г. Пущино 17-22 января 2005r.R&C Dynamics. Москва-Ижевск 2005. С. 58.

191. А.П.Сергушичева Методика применения ИТС для обучения и аттестации работников предприятия/ Вузовская наука региону: Материалы третьей всерос. науч.-техн. конф. В 3-х т. - Вологда: ВоГТУ, 2005. - Т.1 .-С.255-258.

192. Сергушичева, А.П. Инструментальный программный комплекс для автоматического создания тестирующих систем / А.П.Сергушичева // Матер. XI межд. конф. Современные технологии обучения «СТО-2005» 20 апреля 2005 г. СПб.,2005. Т.1, С.92-94

193. А.В.Диваков, А.П.Сергушичева, Разработка сетевой версии интеллектуальной тестирующей системы // Молодые исследователи регионам: Матер. Всерос. науч. конф. студентов и аспирантов. В 2-х т. - Вологда: ВоГТУ, 2005. -Т1, С 384-386

194. Метрология: Рабочая программа и методические указания к выполнению расчетно-графического задания. / Сост. А.П.Сергушичева.- Вологда: ВоПИ, 1997- 30 с.

195. Сергушичева А.П., Основы метрологии: Учебное пособие. Часть 2 Вологда: ВоГТУ, 2005г.-112с.:ил.

196. Сергушичева А.П. Интернет-версия компьютерной тестирующей системы / А.П.Сергушичева, А.Н.Швецов // Информация-Коммуникация-Общество (ИКО-2005): MaTep.VI Межд. науч. конф. СПб, ноябрь 2005 г. СПб.: СП6ГЭТУ«ЛЭТИ», 2005.-С.161-163.

197. Метрология, стандартизация и сертификация: Рабочая программа и методические указания к выполнению контрольной работы. / Сост. А.П.Сергушичева. Вологда: ВоГТУ, 2006 - 32 с.

198. Сергушичева, А.П. Мультиагентная информационная система поддержки деятельности выпускающей кафедры / А.П.Сергушичева, А.Н.Швецов // Информационные технологии моделирования и управления 2006, № 6(31). -С.692-696.

199. Сергушичева, А.П. Реализация тестирующих компонентов в структуре мультиагентной информационной системы поддержки деятельности выпускающей кафедры / А.П.Сергушичева // Системы управления и информационные технологии 2006, № 3.1(25). -С.190-194.

200. Сергушичева А.П., Швецов А.Н. Гибридный подход к синтезу тестовых заданий в тестирующих системах/ Математика, Компьютер, Образование: Сборник научных трудов. Выпуск 13. Том 1 / Под ред. Г.Ю.Ризниченко. Москва-Ижевск, R&C Dynamics, 2006. - С.215-228.