Просмотр исходного текста страницы Добавление выписки из Российского плана нумерации Россвязь в базу MSSQL

[[Практики | Наверх]]

'''Цель: импортировать данные из текстовых файлов в БД.'''

В качестве исходных данных используем базы номеров с сайта: [https://opendata.digital.gov.ru/registry/numeric/downloads Реестр российской системы и плана нумерации]

 1)Коды ABC-3х (HTML, 2,6Mb)
 2)Коды ABC-4х (HTML, 9,6Mb)
 3)Коды ABC-8х (HTML, 4,3Mb)
 4)Коды DEF-9х (HTML, 0,7Mb)

По состоянию на 30.11.2012г.

 Рассмотрим 3 способа решения задачи:
 1) Обработка каждого тега в файле
 2) Обработка построчно
 3) Обработка сразу всего файла

<font color=red>ВНИМАНИЕ!</font> Необходимая версия Oktell после 25 декабря 2012 Release. При импорте сценария необходимо указать путь до файла с расширением (например:  C:\ABC-3x.html)

	
'''1.Обработка каждого тега в файле:'''

Происходит подсчет определенного тега в файле в котором находятся необходимые данные. Далее содержимое каждого из них записываем в переменную. После этого с помощью SQL запроса добавляем строку в БД.

[[Файл:Parse_light.jpg]]

Цикл продолжается до тех пор, пока не будут пройдены все теги. Затем в качестве уведомлений выведено время работы сценария.

 Плюсы:
 -Простота реализации
 Минусы: 
 -Большое время выполнения


'''2. Обработка исходных данных построчно.'''

Обработка файла происходит построчно. Получаем одну строку из файла и затем обрабатываем каждый тег, который она содержит:

[[Файл:Parse_middle.jpg]]

Выполнение так же происходит в цикле, при этом обработанную строку удаляем, затем повторяем операции. За счет того, что «Парсер» выполняется только для обработки одной небольшой строки, время выполнения сокращается. Рекомендуется использовать данный метод т.к. память сервера расходуется незначительно.

 Плюсы:
 -значительное ускорение выполнения
 -простота реализации
 -возможность выгрузки данных удобным способом(Файл,БД)
 Минусы:
 замечаний в процессе тестирования не обнаружено

'''3. Обработка сразу всего файла'''

Зная структуру документа, можно обработать его используя операции со строковыми переменными, что позволяет отправить на запись в БД сразу же один запрос, не используя цикл:

[[Файл:Parse_heavy.jpg]]

Вместо запроса можно произвести операцию записи в файл, но тогда требуется задание пользовательского форматирования. Что усложняет работу нежели во втором сценарии.

 Плюсы:
 -Сверхбыстрое выполнение сценария
 -Компактность сценария(малое кол-во элементов)
 Минусы:
 -Незначительное усложнение в составлении запросов
 -Большой объем требуемой памяти при выполнении (зависит от исходных данных)

----

#[[Media:Parse_ross_light.oscr|Служебный сценарий "Обработка каждого тега в файле"]]<br>
#[[Media:Parse_ross_middle.oscr|Служебный сценарий "Обработка исходных данных построчно"]]<br>
#[[Media:Parse_ross_heavy.oscr|Служебный сценарий "Обработка сразу всего файла"]]<br>