Программа и Методика предварительных испытаний ИНСТРУМЕНТАЛЬНЫХ СРЕДСТВ ЮРИДИЧЕСКОЙ ОБРАБОТКИ ПРАВОВОЙ ИНФОРМАЦИИ. ПРИЛОЖЕНИЕ Б.

ПРИЛОЖЕНИЕ Б. Методика испытаний программных средств автоматической классификации правовых актов заданным списком ключевых слов

Таблица Б.1

№	Объем испытаний	Пункт ПМИ	Пункт ТТЗ (*)	Методика проверки	Результат проведенной проверки (пункты ТТЗ (*) считаются выполненными, если подтверждается, что …)
1	Автоматическая классификация правовых актов заданным списком ключевых слов с заданными точностью и полнотой (выполнение в автоматическом режиме). Возможность экспертного режима классификации, обеспечивающего возможность корректировки полученного в автоматическом режиме перечня ключевых слов для обрабатываемого правового акта.	7.3.1.5.1 7.3.1.5.4	3.2.5.1 3.2.5.4	Условия необходимые для проверки: -     Установочный каталог сервера должен содержать словари dict_norm.dat, prefix_dict.txt, user_dict.txt; -     МАК-сервер запущен как служба; -     Осуществлен запуск клиента ИПС «Законодательство России». 1. Выполнить атрибутный поиск документов в БПА «Федеральное законодательство». Вызов формы ввода параметров атрибутного поиска осуществляется последовательным выбором пунктов меню Поиск→Поиск.... 2. Установить флаг рядом с наименованиями документов, для которых должна быть выполнена классификация по ключевым словам. Последовательно выбрать пункты меню Обработка документов→Автоматическая обработка. 3. Установить флаг в поле Автомат классификации по ключевым словам. В поле Ограничение по количеству слов ввести максимальное допустимое количество ключевых слов в результате классификации. В поле Ограничение по весу слов ввести минимальный вес, которому должны соответствовать классифицируемые ключевые слова. 4. Нажать кнопку Запустить. 5. Выбрать вкладку Ключевые слова на панели Результаты работы автоматов. 6. Провести анализ одного из ключевых слов. Для проверки ключевого слова необходимо нажать на его наименовании в списке. 7. Если ключевое слово определено верно нажать кнопку Готово, иначе закрыть диалоговое окно. 8. Провести анализ по остальным ключевым словам для текущего документа. Нажать кнопку Сохранить. 9. Открыть сведения о документе, нажатием соответствующей кнопки для документа в списке. 10. Провести анализ и сохранение результатов классификации для остальных документов списка. Если необходимо сохранить результаты классификации без проведения проверки, то необходимо нажать кнопку Сохранить все.	1. Отображен список документов, соответствующих запросу. 2. Открыто диалоговое окно Выбор автоматов. 3. Введены настройки для автомата классификации по ключевым словам. 4. В диалоговом окне Выбор автоматов отображается ход процесса классификации по ключевым словам. По завершении классификации отображены: - список документов, для которых была проведена классификация; - интерфейс, обеспечивающий возможность корректировки полученного в автоматическом режиме перечня ключевых слов для текущего документа в списке. 5. Отображен список ключевых слов текущего документа в списке, полученных в результате классификации. 6. Открыто диалоговое окно Ключевые слова, содержащее текст документа. Ключевое слово в тексте документа выделено цветом. 7. Закрыто диалоговое окно Ключевое слово. Если была нажата кнопка Готово, то рядом с проверенным ключевым словом на вкладке Ключевые слова установлен флаг 8. Все ключевые слова, для которых установлен флаг, сохранены в карточке документа. 9. Отображена информация обо всех ключевых словах, полученных в результате классификации и сохраненных в карточке документа.  10. Для всех документов списка сохранены результаты классификации по ключевым словам.
2	Автоматическая классификация правовых актов заданным списком ключевых слов с заданными точностью и полнотой (выполнение в ручном режиме). Возможность экспертного режима классификации, обеспечивающего возможность корректировки полученного в автоматическом режиме перечня ключевых слов для обрабатываемого правового акта.	7.3.1.5.1 7.3.1.5.4	3.2.5.1 3.2.5.4	Условия необходимые для проверки: -     Установочный каталог сервера должен содержать словари dict_norm.dat, prefix_dict.txt, user_dict.txt; -     МАК-сервер запущен как служба; -     Осуществлен запуск клиента ИПС «Законодательство России». 1. Последовательно выбрать пункты меню Обработка документов→Управление маршрутизацией. 2. На навигационной панели выбрать раздел Маршрутизация документов→Маршруты. 3. Нажать кнопку  («Добавить маршрут») 4. В диалоговом окне выполнить следующие действия: -     В поле Наименование ввести наименование создаваемого маршрута (например: "Проверка классификации по ключевым словам в ручном режиме"); -     В поле Доступные операции поместить операцию, предусматривающую редактирование атрибутов и текста документа (например: "Ввод текста редакции"); -     Нажать кнопку Сохранить. 5. Выполнить атрибутный поиск документов в БПА «Федеральное законодательство». Вызов формы ввода параметров атрибутного поиска осуществляется последовательным выбором пунктов меню Поиск→Поиск.... 6. Установить любой из найденных документов (или группу документов) на маршрут, созданный в п. 4. Последовательность действий для установки документа на маршрут: -     установить флаг рядом с наименованием документа; -     открыть диалоговое окно Установка документов на маршрут последовательным выбором пунктов меню Обработка документов→ Установить на маршрут; -     Выбрать маршрут и нажать кнопку Установить. 7. Открыть любой из документов, установленных на маршрут, в режиме редактирования с помощью кнопки  соответственно документу в списке. 8. Выбрать раздел Ключевые слова на навигационной панели. 9. Нажать кнопку  («Классифицировать») на панели инструментов. 10. Для анализа элемента классификатора следует нажать по гиперссылке, соответствующей элементу. В открывшемся диалоговом окне открыт текст документа с выделенными фрагментами, соответствующими элементу классификатора и приведена значимость фрагмента в процентах. Удалить из области выбранных значений неверные элементы. Для удаления элемента необходимо дважды нажать кнопкой манипулятора «мышь» по наименованию элемента в области выбранных значений. 11. Сохранить изменения нажатием кнопки  на панели инструментов.	1. Отображен административный интерфейс для управления маршрутизацией документов. 2. Отображен список существующих маршрутов. 3. Открыто диалоговое окно Создание маршрута. 4. Закрыто диалоговое окно Создание маршрута. Наименование созданного маршрута содержится в списке существующих маршрутов. На данный маршрут могут быть установлены документы. 5. Отображен список документов, соответствующих запросу. 6. Документы установлены на маршрут, отображено диалоговое окно с сообщением об успешной установке документов на маршрут. 7. Отображена навигационная панель, содержащая информационные разделы документа. Отображена карточка документа. 8. Отображены элементы классификатора Ключевые слова и элементы этого классификатора, установленные для документа. 9. Документу соответствуют новые элементы классификатора Ключевые слова. Эти элементы выделены жирным шрифтом. 10. Документу соответствуют элементы классификатора, которые признаны верными. 11. Сохранены изменения документа.
3	Возможность адаптации к изменениям в списке ключевых слов.	7.3.1.5.2	3.2.5.2	Условия необходимые для проверки: -     Установочный каталог сервера должен содержать словари dict_norm.dat, prefix_dict.txt, user_dict.txt; -     МАК-сервер запущен как служба; -     Осуществлен запуск клиента ИПС «Законодательство России». 1. Последовательно выбрать пункты меню Сервис→ Управление классификаторами 2. Выбрать классификатор Ключевые слова на навигационной панели. 3. Нажать кнопку Добавить. Для изменения элемента классификатора необходимо нажать кнопку Изменить. 4. Ввести параметры добавляемого элемента или изменить текущие параметры элемента. Нажать кнопку Сохранить. 5. Выполнить поиск документов, которым должен соответствовать добавленный или отредактированный элемент классификатора Ключевые слова и выполнить классификацию найденных документов в соответствии с п. 7.3.1.5.1 методики испытаний.	1. Открыт административный интерфейс для управления классификаторами системы. 2. Отображен список элементов классификатора Ключевые слова. 3. Открыта форма для добавления или редактирования элемента классификатора в зависимости от нажатой кнопки. 4. В классификатор добавлен новый элемент или изменен существующий элемент классификатора. МАК-сервер содержит информацию о добавленном элементе в классификатор Ключевые слова. 5. Документы классифицированы по добавленному или отредактированному элементу классификатора Ключевые слова.
4	Возможность настройки автоматической классификации по количеству присвоенных ключевых слов.	7.3.1.5.3	3.2.5.3	Условия необходимые для проверки: -     Установочный каталог сервера должен содержать словари dict_norm.dat, prefix_dict.txt, user_dict.txt; -     МАК-сервер запущен как служба; -     Осуществлен запуск клиента ИПС «Законодательство России». 1. Последовательно выбрать пункты меню Обработка документов→Управление маршрутизацией. 2. На навигационной панели выбрать раздел Маршрутизация документов→Автоматы→ Классификация по ключевым словам. 3. В форме настройки выполнить следующие действия: -     ввести максимальное количество записей в поле Количество ключевых слов (максимум). 4. Выполнить классификацию документа в соответствии с п. 7.3.1.5.1 методики испытаний.	1. Отображен административный интерфейс для управления маршрутизацией документов. 2. Отображена форма настройки автоматической классификации по количеству присвоенных ключевых слов. 3. Форма содержит установленные значения. 4. Документ классифицирован по классификатору Ключевые слова. Количество ключевых слов, соответствующих документу, не превышает значения поля Количество ключевых слов (максимум), установленного в форме настройки автоматической классификации по количеству присвоенных ключевых слов.

Краткое описание документа:

СОДЕРЖАНИЕ 1ОБЪЕКТ ИСПЫТАНИЙ.. 3 2ЦЕЛЬ И ЗАДАЧИ ИСПЫТАНИЙ.. 3 3ОБЩИЕ ПОЛОЖЕНИЯ, УСЛОВИЯ И ПОРЯДОК ПРОВЕДЕНИЯ ИСПЫТАНИЙ.. 3 4СОСТАВ ПРЕДЪЯВЛЯЕМОЙ ДОКУМЕНТАЦИИ.. 4 5ПРОГРАММА ИСПЫТАНИЙ.. 5 6МАТЕРИАЛЬНО-ТЕХНИЧЕСКОЕ ОБЕСПЕЧЕНИЕ ИСПЫТАНИЙ.. 6 7МЕТОДИКИ ИСПЫТАНИЙ.. 7 8ОТЧЕТНОСТЬ. 12 ПРИЛОЖЕНИЕ А. Методика испытаний программных средств автоматической классификации правовых актов согласно классификатору правовых актов. 13 ПРИЛОЖЕНИЕ Б. Методика испытаний программных средств автоматической классификации правовых актов заданным списком ключевых слов. 27 ПРИЛОЖЕНИЕ В. Методика испытаний программных средств автоматизации обработки текстов правовых актов. 36 ПРИЛОЖЕНИЕ Г. Методика испытаний программного средства последовательного выполнения автоматизированных процедур, обусловливающих стадии юридической обработки правового акта. 51 ПРИЛОЖЕНИЕ Д. Инструкция по сборке проекта ИПС «Законодательство России» версии 3.0. 55