Сертификация КОПР.
Качественное обучение может быть обеспечено только при наличии качественных средств обучения, и для технологии ДО этот вопрос особенно важен. Сертификация обучающих программ и есть подтверждение их качества.
Понятие "сертификация программных средств" можно определить как действия аккредитованных государственных или негосударственных организаций, доказывающие соответствие сертифицируемых программ для ЭВМ требованиям, установленным нормативными документами.
В основе сертификации лежат испытания (в том числе в форме сбора и анализа экспертных оценок), позволяющие адекватно определить заявленные характеристики объекта сертификации. В случае успешного прохождения испытаний оформляется сертификат соответствия установленном формы.
Федеральной системой сертификации программного обеспечения является РОСИНФОСЕРТ при Роскоминформе. Органы по сертификации системы РОСИНФОСЕРТ (испытательные лаборатории программно-информационных продуктов) в своей работе руководствуются как российскими стандартами качества, так и международными серии ISO, среди которых в первую очередь следует выделить стандарты качества ISO 9000'. Перечень нормативных документов в области требований к качеству программных средств приведен в Приложении 10.
Координирующим органом системы "РОСИНФОСЕРТ" в Минобразовании РФ является созданный по совместному решению Роскоминформа и Минобразования (приказ Минобразования РФ № 1038 от 28 мая 1997 г.) Головной научно-методический центр по сертификации ИПС УН в сфере высшего образования. (http://cert. stankin. ru). Этот центр сформирован на базе Специализированного центра новых информационных технологий (СЦ НИТ) МГТУ "Станкин" и выполняет координационные, методические и консультационные функции. Так, одним из последних методических материалов, рекомендованных данным головным научно-методическим центром в качестве руководящего документа для разработчиков и специалистов по сертификации ПС УН, является методическое руководство.
За время, прошедшее с момента создания головного научно-методического центра, создана региональная сеть испытательных лабораторий и органов по сертификации ПС УН (в Москве, Воронеже, Уфе и других городах) с аккредитацией их в существующих системах сертификации.
Среди испытательных лабораторий системы РОСИНФОСЕРТ, функционирующих под эгидой Минобразования РФ, весь комплекс работ по сертификации ПС УН осуществляет, в частности, Государственная испытательная лаборатория педагогического программного продукта при Российском фонде компьютерных учебных программ (РОСФОКОМП).
Прохождение экспертизы ПС УН (в частности, КОПР) в РОСФОКОМП организуется следующим образом. Как правило, вначале авторы и разработчики проводят презентацию созданного ими программного средства перед экспертами — членами Экспертного совета при РОСФОКОМП. Подобный просмотр позволяет отсеять заведомо "непроходные" ПС УН. Если по результатам презентации эксперты рекомендуют принять данную разработку к рассмотрению, то разработчики должны представить в РОСФОКОМП материалы на сертифицируемое программное средство.
В типовой комплект представляемых материалов входят:
• сопроводительное письмо;
• рабочая версия ПС УН на носителе (дискете, CD-ROM); для ускорения прохождения экспертизы желательно представлять в 5 экз.;
• один—два модуля на исходном языке;
• программный документ "Руководство пользователя";
• акты о внедрении, акты об опытной эксплуатации, отзывы организаций—пользователей;
• доверенность на представителя, уполномоченного предъявить материалы на сертификацию и получить сертификат на программный продукт.
Необходима также предоплата работ экспертного совета по сертификации (ориентировочный размер предоплаты - 300 у. е. за экспертируемую единицу).
После представления необходимых документов начинается поэтапная экспертиза ПС УН:
• входной контроль;
• анализ структуры ПС УН;
• программно-техническая экспертиза;
• эргономическая экспертиза;
• комплексная экспертиза с привлечением специалистов Минобразования, вузов (здесь имеются в виду специалисты-предметники), РАН, Российской академии образования (РАО), педагогических институтов, которая проводится параллельно на трех экспертных площадках. Каждая экспертная группа подтверждает психолого-педагогическую, учебно-содержательную, методическую и дидактическую ценность ПС УН.
Разработчики КОПР должны знать номенклатуру подтверждаемых в ходе экспертизы показателей качества ПС УН. К ним относятся:
1) параметры идентификации ПС УН — назначение программы, соответствие программной документации требованиям ЕСПД, требования к сопровождающей учебно-методической литературе согласно ВТУ [911;
2) общие показатели качества, характеризующие уровень отлаженности ПС УН (гибкость, корректность, надежность, сопровождаемость, удобство применения, эффективность);
3) функциональные параметры, в том числе:
v программно-технические параметры (устойчивость к ошибочным и некорректным действиям пользователя, соответствия функционирования ПС УН описанию в эксплуатационной документации, защиты от несанкционированных действий пользователя, минимизации времени на действия пользователя) в соответствии с требованиями группы стандартов качества ISO 9000;
v педагогические параметры — дидактические показатели (научность, доступность, адаптивность, наличие самостоятельного и активного характера обучения, прочность усвоения результатов обучения, интерактивность диалога), методические показатели (учет своеобразия и особенностей конкретного учебного предмета, учет специфики соответствующей науки, реализация современных методов обработки информации) и обоснование выбора темы учебного курса;
эргономические параметры (учет возрастных и индивидуальных особенностей обучаемых, обеспечение повышения уровня мотивации обучения, временные режимы учебных занятий, требования к организации диалога, требования к цветовым характеристикам, к буквенно-цифровой символике и знакам, к пространственному размещению информации на экране дисплея) в соответствии с требованиями ВТУ [90];
v эстетические параметры (соответствие эстетического оформления функциональному назначению ПС УН, соответствие цветового колорита назначению ПС УН и эргономическим требованиям, упорядоченность и выразительность графических и изобразительных элементов ППС);
4) показатели, характеризующие интерфейс (тип интерфейса — система меню, оконный — текст, псевдографика или графика, контекстно-зависимая система помощи, поддержка манипулятора типа mouse).
Экспертиза должна быть проведена в течение трех месяцев, после чего выдаются либо сертификат Министерства образования РФ на компьютерную учебную программу, либо рекомендации Экспертного совета РОСФОКОМП по ее доработке, либо обоснованный отказ в сертификации. Информация о программных средствах, удостоившихся сертификата Минобразования РФ, публикуется в журнале "Компьютерные учебные программы". Наличие у обучающей программы такого государственного сертификата является надежной рекомендацией для вузов, которые выбирают прикладное программное обеспечение для поддержки учебного процесса.
Помимо сертификации КОПР существует и другая форма подтверждения их качества и применимости в системе образования. Это присвоение рекомендательных грифов Минобразования РФ.
Организацией, проводящей экспертизу учебных электронных изданий (термин, используемый в данной системе вместо ПС УН) и выдачу рекомендательных грифов Минобразования, является Федеральный экспертный совет по учебным электронным изданиям, созданный приказом министерства № 1646 от 19 июня 1998 г.
Отличительной особенностью экспертизы, проводимой ФЭС УЭИ, является то, что она включает в себя не только объективную техническую и эргономическую экспертизы учебных электронных изданий (эти процедуры проводятся и при сертификации), но и содержательную и учебно-методическую экспертизы. Таким образом, экспертиза проводится в привязке к существующим профессиональным программам (учебным планам) для различных видов образования — начального, среднего, высшего, послевузовского.
В Минобразования РФ приняты следующие четыре модификации категорий рекомендательного грифа;
v "Рекомендовано в качестве учебника";
т "Рекомендовано в качестве учебного пособия";
"Рекомендовано для использования в учебном процессе";
"Рекомендовано для использования при самостоятельном и дополнительном образовании".
На рассмотрение в ФЭС УЭИ авторы и разработчики КОПР должны представить следующие документы:
• заявление авторов;
• сопроводительное письмо от организации-разработчика УЭИ;
• копию свидетельства о регистрации продукта в РосАПО;
• электронное издание в двух экземплярах в упаковке для конечного потребителя;
• полный комплект сопроводительной пользовательской документации;
• внешние рецензии1.
На экспертизу представленных материалов отводится один месяц, по истечении которого экспертная группа должна составить мотивированное заключение о выдаче рекомендательных грифов Минобразования РФ, либо решение о запросе дополнительных сведений и материалов по заявке, либо решение об отказе в выдаче рекомендательных грифов.
По выданному группой экспертов положительному заключению должно быть также в течение месяца принято решение (сначала в ФЭС, а окончательное — в Минобразования РФ) о рекомендации к использованию УЭИ и о выдаче рекомендательного грифа. УЭИ, имеющие такой гриф, получают приоритет при распространении в системе образования. Помимо этого, наличие рекомендательного грифа является косвенной рекламой программного продукта. Потенциальный пользователь всегда обращает внимание на подобные грифы, расценивая их как признание независимыми экспертами качества предлагаемой программы.
Учитывая разнородность УЭИ, приказом Минобразования РФ № 2657 от 23 октября 1998 г. в составе ФЭС были созданы три специализированные секции:
• секция гипертекстовых изданий (на базе Московского государственного университета экономики, статистики и информатики);
• секция мультимедиа-изданий (на базе Республиканского мультимедиа-центра);
• секция изданий на разнородных носителях (на базе Московского государственного индустриального университета).
Соответственно критерии экспертизы УЭИ в различных секциях отличаются друг от друга. Однако авторам и разработчикам КОПР, собирающимся подать документы на присвоение рекомендательного грифа Минобразования РФ, прежде всего надо определиться, к какой же секции следует отнести их творение.
Вопрос этот отнюдь не простой. Обращает на себя внимание то, что критерии подразделения ФЭС на секции весьма размыты. Можно сказать, что выбор направленности работы каждой секции определялся по своему критерию. Создается впечатление, что сферы деятельности секций определялись профильными подходами к созданию УЭИ в базовых организациях, а не наоборот. В результате, с одной стороны, области работы секций перекрываются (почему, например, гипертекстовая программа не может включать в себя разнообразные элементы мультимедиа и использовать в своей работе разнородные носители?), другой стороны, какие-то обучающие программы не подойдут ни для одной секции.
Так, секция гипертекстовых изданий охватывает, согласно утвержденной инструкции о порядке проведения экспертизы в этой секции, учебные компьютерные программы, представляющие собой "...совокупность взаимоувязанных файлов на языке HTML, содержащих текстовую, графическую, аудио- и видеоинформацию". Во-первых, чем не мультимедиа издание получается? Во-вторых, куда отнести гипертекстовые программы, написанные на других языках?
В секцию мультимедиа изданий можно направить на экспертизу любую мультимедийную программу учебного назначения, т. е. осуществляющую представление информации пользователю в различных формах (текст, графика, видео и аудио фрагменты, анимация).
Какие УЭИ следует направлять в секцию изданий на разнородных носителях — определяется самим названием секции. Это в первую очередь комбинированные программы перспективного сейчас направления "CD-ROM + Интернет". С формальной точки зрения, к изданиям на разнородных носителях следует также отнести программы, установленные на жесткий диск, но при работе требующие CD-ROM, на котором записаны файлы большого объема (например, видеоклипы). Однако сведений о какой-либо деятельности данной секции в настоящее время нам обнаружить не удалось.
Объективно обусловленным и логичным шагом было бы объединение секций ФЭС (или, что не совсем одно и то же, отказ от деления ФЭС на секции), но пока этого формально не произошло,
Авторы и разработчики КОПР должны знать, какие характеристики и свойства представляемых программ будут подвергаться экспертизе.
•> Секция гипертекстовых изданий (http://www.fcde.ru/fes/) проводит четыре вида экспертизы:
• научно-техническую;
• эргономическую;
• содержательную;
• учебно-методическую.
На рис. 11.2 указаны критерии анализа представленных обучающих программ в рамках каждого из четырех перечисленных видов экспертизы.
В состав экспертной группы секции гипертекстовых изданий входят программисты, эксперты-предметники, методисты, психологи, консультанты-специалисты в области эргономики и искусствоведения. Стоимость экспертизы по утвержденной калькуляции -450 у. е. В этой секции могут быть выданы только два рекомендательных грифа - учебник и учебное пособие.
Порядок проведения экспертизы в секции мультимедиа и специфика учебных мультимедиа-продуктов освещены в статье зам. руководителя секции, директора по информационно-рекламной деятельности Российского Мультимедиа-Центра, кандидата физико-математических наук А.Г. Федорова "Проблемы искусствоведения, культурологии, эргономики при оценке мультимедиа-продуктов Федеральным экспертным советом по учебным электронным изданиям Минобразования России" (http://www.tretyakov.ru/russian/Events/ Eva99/d04/dR04-10.htm). В целом подход к проведению экспертизы и состав экспертной группы здесь примерно те же, что и для секции гипертекстовых изданий. Среди дополнительно привлекаемых специалистов названы, пожалуй, лишь специалисты в области культурологии и дизайна. В качестве критериев оценки У ЭЙ в статье указаны:
• уровень интерактивности;
• соответствие У ЭЙ интересам обучаемого;
• соответствие УЭИ открытой системе образования (что особенно актуально для компьютерных средств СДО);
• соответствие УЭИ принципам вариативности образования;
• соответствие УЭИ интересам преподавателя;
• содержательность, объем материала в УЭИ и степень разработки темы в целом;
• простота использования УЭИ преподавателями и учащимися;
• соответствие системы контроля результатов изучения УЭИ современному уровню;
• соответствие навигационной системы УЭИ современному уровню;
• адекватность и приемлемость культурного наполнения УЭИ;
• совместимость УЭИ и учебно-методических комплексов;
• анализ звукового аспекта УЭИ, соответствие его современному уровню;
• анализ визуального аспекта УЭИ, соответствие современному уровню дизайна;
• качество программной реализации УЭИ;
• эргономика, соответствие УЭИ санитарным, гигиеническим правилам и нормам;
• методические аспекты УЭИ;
• соответствие УЭИ психолого-педагогическим требованиям;
• шрифт.
Оценку качества УЭИ по каждому из перечисленных критериев эксперты представляют в форме заполненного аттестата экспертной оценки. В качестве примера в Приложении 11 приведена форма такого аттестата по критерию "анализ визуального аспекта УЭИ, соответствие современному уровню дизайна УЭИ". Из нее видно, как конкретизируются требования по данному критерию, какой комплексный характер носит проверка качества. Только в одном приведенном аттестате эксперту необходимо подтвердить или отвергнуть более сотни характеристик качества сертифицируемого программного продукта. Приняв во внимание количество рассматриваемых критериев, можно получить представление о масштабах экспертизы.
В плане сравнения представляет интерес, как проводятся оценка и сертификация учебных материалов ДО за рубежом. В качестве иллюстрации приведем методику, используемую комиссией по контролю качества учебных материалов, которая координируется центром SCIENTER (Италия, Болонья) (http://www.scienter.org).
Для компьютерных учебных материалов рассматриваются три группы критериев:
• методологические (семь критериев);
• содержательные (семь критериев);
• технологические (четыре критерия).
Каждый критерий оценивается экспертами в диапазоне от 0 до 100 баллов. Материал считается приемлемым по той или иной группе требований, если оценка по каждому критерию группы составляет не ниже 50 баллов.
Процедура в целом похожа на используемую ФЭС УЭИ, однако отсутствует столь подробная детализация критериев.
В заключение необходимо отметить следующий момент. В действующих нормативных документах по сертификации ПС УН или присвоению УЭИ рекомендательных грифов конкретные требования, предъявляемые к тестовой базе КОПР, практически отсутствуют. В то же время, согласно уже упоминавшемуся проекту концепции Федеральной системы тестирования, реализуемому под эгидой Минобразования РФ, предполагается, что сертификацией тестовых материалов будет заниматься специализированная служба, а материалы, прошедшие сертификацию, будут накапливаться в соответствующем фонде. Основания для подобной специализации понятны: уж слишком специфичны требования к качеству тестов, и не случайно в гл. 6 нашей книги эти вопросы освещены достаточно подробно.
Приказом Минобразования № 1122 от 17 апреля 2000г. утверждено Временное положение о сертификации качества педагогических тестовых материалов (ПТМ), в котором установлено, что процедура сертификации качества ПТМ должна состоять из двух этапов -экспертизы, включающей оценку качества содержания, правильности форм заданий и статистических характеристик ПТМ, и собственно сертификации. Методические указания по подготовке педагогических тестовых материалов, утвержденные этим же приказом, приведены в Приложении 12.
Остается пока неясным, предполагается ли взаимодействие, например, ФЭС со службой сертификации тестовых материалов, и если да, то какова будет его схема. Во всяком случае, такая ситуация может послужить дополнительным аргументом в пользу того, чтобы тестирующие модули КОПР оформлялись в виде самостоятельных программ.
Рис 2. Критерии анализа гипертекстовых изданий, представляемых в ФЭС, по видам экспертизы
Вопросы для самопроверки:
- Понятие компьютерной программы;
- Законы по защите компьютерной программы;
- Кто является автором компьютерной программы;
- Виды авторских прав на компьютерную программу;
- Как производится передача прав на компьютерную программу;
- Содержание лицензионного соглашения;
- Содержание правовой охраны на компьютерную программу;
- Целесообразность регистрации компьютерной программы;
- Содержание заявки на регистрацию компьютерной программы;
- Проблемы патентования компьютерной программы;
- Понятие сертификации компьютерной программы;
- Комплект документов для сертификации компьютерной программы
Список литературы:
1. Сергеев, А. П. Право интеллектуальной собственности в Российской Федерации: учебник / А. П. Сергеев. М.: Проспект, 2007 – 370 с.
2. Сергеев, А. П. Право интеллектуальной собственности в Российской Федерации: учебник / А. П. Сергеев. М.:ПБОЮЛ, 2004 – 320 с.;
3. Гражданский кодекс Российской Федерации / - М.: Инфра., 2007- 120с.
4. Мужичек С.М. Патентоведение. Конспект лекций. Ставрополь, СГАУ, 2003
5. Электронный ресурс www.fips.ru
Дата добавления: 2015-08-21; просмотров: 860;