Совершенствование системы анализа информации (отчетных материалов) на наличие заимствований и фальсификаций
advertisement
Совершенствование системы анализа информации (отчетных материалов) на наличие заимствований и фальсификаций в рамках реализации мероприятий ФЦПРО II этап Государственный контракт от 20 мая 2013 г. № 03.211.11.0002 ООО «Верконт Сервис» 8(495)504-47-77 Рубан Иван Анатольевич www.vercont.ru Цели и задачи II этапа проекта Проведение обучающих мероприятий для специалистов Министерства образования и науки Российской Федерации по работе с информационной системой Техническое и консультационнометодическое сопровождение ввода в эксплуатацию доработанной информационной системы в части формирования итоговой оценки качества выполняемых работ по проектам на основе результатов анализа Доработка подхода, методического и технологического обеспечения анализа информации на выявление повторов, заимствований и фальсификаций по проектам, реализуемым в рамках ФЦПРО на 2011 – 2015 годы, в части формирования итоговой оценки качества выполняемых работ по проектам на основе результатов анализа Выявление неправомерных заимствований в документах в электронном виде на всех стадиях реализации ФЦПРО Проведение апробации доработанной информационной системы анализа, промежуточной и итоговой оценки качества выполнения проектов, реализуемых в ходе ФЦПРО на 2011 – 2015 годы Проведение общественнопрофессионального обсуждения доработанных подхода, методического и технологического обеспечения, их корректировка по результатам обсуждения Анализ функционирования системы и формирование предложений по ее усовершенствованию, проведение доработок системы согласно предложениям и согласно доработанным подходу, методическому и технологическому обеспечению 2 Наименования работ, выполненных в рамках II этапа II.1. Доработка методического и технологического обеспечения анализа информации на выявление повторов, заимствований и фальсификаций по проектам, реализуемым в рамках ФЦПРО на 2011 – 2015 годы II.4. Организация и проведение апробации доработанной информационной системы анализа, промежуточной и итоговой оценки качества выполнения проектов, реализуемых в ходе ФЦПРО на 2011 – 2015 годы II.2. Проведение общественнопрофессионального обсуждения доработанного методического и технологического обеспечения II.3. Доработка информационной системы анализа, промежуточной и итоговой оценки качества выполнения проектов, реализуемых в ходе ФЦПРО на 2011 – 2015 годы II.5. Обеспечение технического и консультационнометодического сопровождения ввода в эксплуатацию доработанной информационной системы в части формирования итоговой оценки качества выполняемых работ II.6. Проведение обучающих мероприятий для специалистов Министерства образования и науки Российской Федерации по работе с системой 3 II.1.1. Разработка механизма формирования итоговой оценки качества выполняемых работ по проектам на основе результатов анализа информации на выявление повторов, заимствований и фальсификаций Механизм формирования итоговой оценки качества выполняемых работ по проектам на основе результатов анализа информации на выявление повторов, заимствований и фальсификаций, согласно методики, разработанной при выполнении вида работ пп. I.2.2. 4 II.1.1. Разработка механизма формирования итоговой оценки качества выполняемых работ по проектам на основе результатов анализа информации на выявление повторов, заимствований и фальсификаций Итоговая оценка качества работ по проекту i – количество стадий проектного цикла сводный показатель уникальности на стадии сдачи отчетности по ГК (этапу ГК) 0 ≥ P ≤100 Чем выше качество выполненных проектных работ исполнителем, тем выше рейтинг исполнителя. Таким образом, итоговая оценка качества выполняемых работ: • • основывается на анализе промежуточной и итоговой отчетности по проекту для определения процента заимствования и формирования подробного отчета с указанием заимствованных фрагментов и источников цитирования; предусматривает аккумуляцию результатов анализа и оценки по этапам проекта и проекту в целом, а также по исполнителю проекта. Механизм формирования итоговой оценки качества выполняемых работ по проектам, реализуемым в рамках ФЦПРО на 2011-2015 гг. учитывает особенности анализа информации на выявление повторов, заимствований и фальсификаций по проектам, в зависимости от этапа проектного цикла. 5 II.1.1. Разработка механизма формирования итоговой оценки качества выполняемых работ по проектам на основе результатов анализа информации на выявление повторов, заимствований и фальсификаций Предложения по технологическому обеспечению формирования итоговой оценки качества выполняемых работ по проектам, с учетом использования разработанной информационной системы 1 Заявки на формирование тематики (аннотация по проекту, а также обоснование стоимости) поступают в специализированную информационную систему www.dfcp.ru 2 Заявки вносятся экспертами в ИС http://antiplagiatfcpro.ru 3 Заявки проходят проверку на наличие повторов, заимствований и фальсификаций 6 II.1.1. Разработка механизма формирования итоговой оценки качества выполняемых работ по проектам на основе результатов анализа информации на выявление повторов, заимствований и фальсификаций 4 По результатам выполненной проверки формируется отчет, который содержит процент выявленных совпадений, фальсификаций и заимствований, с возможностью просмотра найденных источников 5 Рассчитывается сводный показатель уникальности на стадии подготовки заявки на формирование тематики 6 Рассчитанные показатели фиксируются в базе данных информационной системы Процесс формирования итоговой оценки качества выполняемых работ по проектам аналогичен. 7 II.1.1. Разработка механизма формирования итоговой оценки качества выполняемых работ по проектам на основе результатов анализа информации на выявление повторов, заимствований и фальсификаций Были доработаны методика и технология анализа информации, разработанных в 2013 году, с учетом механизма формирования итоговой оценки качества выполняемых работ по проектам, созданные в рамках работ I.2.2. В ходе доработки в методику и технологию были внесены более 15 правок и дополнений следующих разделов и подразделов: • Понятия и определения; • Существующая система сбора данных о проектах, реализуемых в рамках ФЦПРО на 2011-2015 гг.; • Критерии и показатели качества выполняемых по проекту работ; • Рекомендации по использованию показателей качества работ в зависимости от этапа проектного цикла; • Алгоритмы определения процента заимствований; • Проекты документов, регулирующих деятельность участников по работе с выявленными фактами заимствований и фальсификаций; • Предмет анализа информации на выявление повторов, заимствований и фальсификаций; • Технологический процесс сбора информации; • Измерительные инструментарии; • Методика анализа результатов для целей управления реализацией ФЦПРО на 2011-2015 гг.. 8 II.2.1. Проведение общественно-профессионального обсуждения доработанного методического и технологического обеспечения анализа информации с учетом всего проектного цикла Разработана программа совещания Содержит тематику и цели совещания, список докладчиков Содержит тематический план проведения совещания Согласована с Заказчиком Определены сроки и место проведения совещания 14.04.2014 Начало – 1000 Конференц-зал ООО «Верконт Сервис», г. Москва Согласованы с Заказчиком Подготовлены Раздаточные и презентационные материалы Проект приглашения участников Конференц-зал оснащен презентационным оборудованием и микрофонами 9 II.2.1. Проведение общественно-профессионального обсуждения доработанного методического и технологического обеспечения анализа информации с учетом всего проектного цикла Участники совещания Представители научного сообщества Эксперты Представители Минобрнауки России 10 II.2.1. Проведение общественно-профессионального обсуждения доработанного методического и технологического обеспечения анализа информации с учетом всего проектного цикла Общественно-профессиональное обсуждение доработанного методического и технологического обеспечения было проведено в виде открытого совещания. В рамках совещания были обсуждены организационные и методические вопросы проекта. 11 II.2.2. Анализ результатов общественно-профессионального обсуждения доработанного методического и технологического обеспечения Проанализированы результаты общественнопрофессионального обсуждения доработанного методического и технологического обеспечения анализа информации Подготовлены предложения по доработке методического и технологического обеспечения Предложения включают в себя более 13 пунктов по доработке 12 II.2.3. Корректировка доработанного методического и технологического обеспечения анализа информации Доработан алгоритм, позволяющий в рамках одного исполнителя и проекта не сравнивать отчетные документы между собой Доработан механизм вывода уведомлений о том, что документ обладает уникальностью ниже установленного лимита С учетом подготовленных предложений была проведена корректировка доработанного методического и технологического обеспечения анализа информации Доработан проект порядка проверки отчетной документации в электронном виде на наличие неправомерных заимствований Доработаны алгоритмы проверки аннотации и отчетных документов с учетом собственной базы системы Доработан проект порядка проверки заявки на формирование тематики в электронном виде на наличие неправомерных заимствований 13 II.3.1. Анализ функционирования системы в 2013 году Подготовка Создана рабочая группа для проведения анализа Проведен анализ функционирования ИС в 2013 г. На основе информации (отчетных материалов) о функционировании ИС в 2013 году Результат На основе протокола предварительных испытаний ИС Сформированы предложения по усовершенствованию информационной системы 14 II.3.2. Доработка информационной системы Доработанная ИС была согласована с Заказчиком На основе предложений по усовершенствованию ИС и согласно доработанному методическому и технологическому обеспечению была проведена доработка информационной системы. Кроме приведенных далее основных доработок были выполнены доработки: - оптимизирована загрузка документов; - все элементы приведены к единому стилю системы; - исправлена верстка форм; - исправлены опечатки и неточности и др. 15 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика Добавлена подсистема для проверки отчетов ЛК эксперта организациимонитора ЛК исполнителя ЛК сотрудника специал. организации 16 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика Добавлены оповещения ЛК эксперта организациимонитора ЛК исполнителя ЛК сотрудника специал. организации Строки таблицы «Заявки» и «Проекты» подсвечиваются розовым цветом в случае, если процент оригинальности соответствующих им документов ниже допустимых установленных лимитов. Таким образом, специалисту предоставляется возможность просмотреть, документы по каким из представленных заявок и проектов не соответствуют предъявляемым требования 17 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика Доработан отчет о заимствованиях ЛК эксперта организациимонитора ЛК исполнителя ЛК сотрудника специал. организации Для удобства работы специалиста, рядом с каждым заимствованным фрагментом текста добавлены навигационные стрелки для перехода к следующему или предыдущему заимствованному фрагменту 18 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика ЛК эксперта организациимонитора Доработана возможность формирования хранилища ИС ЛК исполнителя ЛК сотрудника специал. организации В таблицу «История проверок» добавлен столбец «Индекс», значения в ячейках которого указывают на то, добавил ли эксперт документ в индекс. Для того чтобы проверяемый документ в дальнейшем при проверках выступал в качестве возможного источника достаточно установить флажок. Удаление документа, добавленного в индекс невозможно. 19 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика ЛК эксперта организациимонитора Добавлена итоговая оценка качества работ по проекту ЛК исполнителя ЛК сотрудника специал. организации 20 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика ЛК эксперта организациимонитора ЛК исполнителя Возможность добавления этапов проекта ЛК сотрудника специал. организации 21 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика ЛК эксперта организациимонитора Добавлена подсистема мониторинга качества исполнителей ЛК исполнителя ЛК сотрудника специал. организации 22 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика ЛК эксперта организациимонитора ЛК исполнителя Добавлена навигация в отчете Добавлены оповещения ЛК сотрудника специал. организации Аналогично доработкам предыдущих кабинетов: • для блоков с перечислением заимствованных фрагментов текста добавлены навигационные стрелки для удобства перехода по фрагментам; • строки таблицы «Проекты» подсвечиваются розовым цветом в случае, если процент оригинальности соответствующих им документов ниже допустимых установленных лимитов. 23 II.3.2. Доработка информационной системы ЛК специалиста департаментаЗаказчика ЛК эксперта организациимонитора ЛК исполнителя ЛК сотрудника специал. организации Доработана подсистема управления организациями В подсистеме была добавлена информация о количестве реализуемых проектов и оценка качества работ. 24 II.4.1. Разработка программы апробации доработанной информационной системы Разработана программа апробации доработанной ИС Критерии отбора участников Цели и задачи апробации; Заинтересованность в участии; Технология проведения апробации; Компетентность. Перечень участников апробации 14 специалистов Календарный план-график; Требования к ожидаемым результатам. Список участников, для проведения апробации и программа были согласованы с Заказчиком. 25 II.4.2. Разработка учебно-методической документации, требуемой для проведения апробации доработанной информационной системы Отражает структуру программы обучающих мероприятий Был направлен всем участникам апробации Комплект учебнометодической документации для обучения по работе с ИС Включает методические рекомендации по использованию системы Включает методические и инструктивные материалы для работы специалистов различных категорий с системой Сформирован согласно требованиям, сформулированным в программе обучающих мероприятий 26 II.4.3. Проведение апробации доработанной информационной системы ИС развернута на технологической площадке ООО «Верконт Сервис» Проведены предварительные испытания ИС на основе согласованной программы и методики испытаний Подготовлен протокол испытаний Сформированы требования по доработке ИС 27 II.4.4. Анализ результатов и доработка информационной системы по результатам апробации Проанализированы результаты апробации В аналитический отчет включены все вопросы, замечания и предложения, поступавшие в процессе апробации информационной системы Произведены все доработки с учетом замечаний и предложений, поступивших в процессе апробации информационной системы 28 II.5.1. Ввод в эксплуатацию доработанной информационной системы в части формирования итоговой оценки качества выполняемых работ В течение 3 дней осуществлена установка и настройка доработанной ИС на оборудовании и системном программном обеспечении, предоставленных Заказчиком Обеспечены авторизация и доступ в информационную систему пользователей системы ИС доступна по адресу: http://qfcpro.mon.gov.ru/ Разработана и согласована с Заказчиком Программа и методика предварительных испытаний доработанной системы Проведены предварительные испытания доработанной ИС в соответствии с Программой и методикой Обеспечена консультационная поддержка пользователей по настройке и функционированию системы 29 II.5.1. Ввод в эксплуатацию доработанной информационной системы в части формирования итоговой оценки качества выполняемых работ Доработан комплект нормативно-правовых и организационных документов функционирования системы с учетом доработки информационной системы в части формирования итоговой оценки качества выполняемых работ в соответствии с действующим законодательством Составлен перечень неисправностей, рекомендаций по доработке ПО и дополнительной наладке технических средств Составлен отчет об опытной эксплуатации доработанной системы, содержащий: - комплект доработанной документации на систему; - акт ввода Системы в опытную эксплуатацию; - протокол предварительных испытаний доработанной системы. 30 II.5.2. Обеспечение технического и консультационно-методического сопровождения эксплуатации доработанной информационной системы в 2014 году Проведен анализ обеспечения технического и консультационнометодического сопровождения эксплуатации доработанной информационной системы в 2013 году Подготовлена программа технического и консультационно-методического сопровождения процесса внедрения системы в 2014 году Подготовлены предложения по совершенствованию технического и консультационно-методического сопровождения эксплуатации доработанной информационной системы на 2014 год 31 II.5.2. Обеспечение технического и консультационно-методического сопровождения эксплуатации доработанной информационной системы в 2014 году Сопровождение построено с использованием сервисов сети Интернет, максимально исключая бумажный документооборот Телефон службы поддержки: +7(495)504-47-77 Электронный адрес: reports@vercont.ru 32 II.5.2. Обеспечение технического и консультационно-методического сопровождения эксплуатации доработанной информационной системы в 2014 году Обсуждение технических вопросов функционирования системы Размещение и организация обсуждения информационных материалов и методических документов по работе с системой Ответы на вопросы, задаваемые в специальных разделах системы, форуме и т.п. Он-лайн и офф-лайн комментарии к проводимым обсуждениям, мероприятиям и т.д. Формы сопровождения 33 II.5.2. Обеспечение технического и консультационно-методического сопровождения эксплуатации доработанной информационной системы в 2014 году Организационное сопровождение процессов выявления заимствований в электронных документах на всех стадиях реализации ФЦПРО Координация работ по доработке программного обеспечения, визуальной организации пользовательской документации обеспечены Изменение настроек программного обеспечения, предоставление и регулирование прав доступа, учет пользователей ИС Поддержка работоспособности и администрирование компонентов программного обеспечения ИС Консультационная поддержка пользователей ИС 34 II.6.1. Разработка программы обучающих мероприятий для специалистов Министерства образования и науки Российской Федерации по работе с системой Разработана программа и план-график проведения обучения В программе определены: - цели, задачи обучения; - целевая аудитория; - количество часов; - темы и формы занятий, их количество; - требования к учебнометодическому обеспечению. Представлен тезисный план каждого из занятий Программа рассчитана на протяженность не менее чем 8 часов Учитывает возможность проведения обучающих мероприятий с использованием информационнокоммуникационных технологий Программа и планграфик проведения обучающих мероприятий согласованы с Заказчиком 35 II.6.2. Разработка учебно-методической документации для проведения обучающих мероприятий, включающих в себя оснащение учебного процесса учебно-методическими, справочными и другими материалами Комплект учебно-методической документации для обучения специалистов Министерства образования и науки Российской Федерации по работе с системой был разработан согласно структуре программы обучающих мероприятий и требованиям к учебно-методическому обеспечению, сформированным при ее подготовке. Учебно-методическая документация также была реализована в интерактивном формате, с использованием информационно-коммуникационных технологий (обучающие видео-записи на CD-дисках). 36 II.6.3. Проведение организационных мероприятий по подготовке к обучению работе с системой специалистов Министерства образования и науки Российской Федерации Проведены организационные мероприятия по формированию состава участников Подготовлено информационное письмо о проведении обучающих мероприятий, и обеспечена его рассылка Дата проведения : 15 октября 2014 года. Начало обучающих мероприятий: 10:00. Место проведения обучающих мероприятий: Конференц-зал ООО «Верконт Сервис», г. Москва, Лучников переулок, д. 4, подъезд 3. Организован сбор заявок на участие и сформирован перечень участников обучающих мероприятий Подготовлены помещения для проведения обучающих мероприятий, подготовлено оборудование Определены и согласованы с Заказчиком сроки и место обучения 37 II.6.4. Проведение обучения с системой специалистов Министерства образования и науки Российской Федерации Проведены обучающие мероприятия по работе с информационной системы анализа, промежуточной и итоговой оценки качества выполнения проектов, реализуемых в ходе ФЦПРО на 2011 – 2015 годы. 38 Заключение • В рамках II этапа проекта были реализованы все запланированные мероприятия. • Доработки, выполненные на стадии II этапа проекта позволили дополнить информационную систему возможностями получения итоговой оценки качества работ по проекту, что позволит сформировать простой и наглядный инструмент для определения и повышения качества проектов по ФЦПРО в ходе всего проектного цикла и по его завершению. • Информационная система обеспечит эффективный контроль качества проектов и отчетов в рамках реализации Федеральной целевой программы развития образования на 2011-2015 годы, повысит качество выполняемых работ и позволит привлекать к исполнению работ по государственным контрактам только надежных исполнителей. • На III этапе проекта предусматривается дополнение информационной системы возможностями расчета понятного рейтинга исполнителей государственных заказов для оценки степени надежности и качества выполнения исполнителя с учетом ранее накопленных данных. 39 Спасибо за внимание! 40
