Парсинг сайта
71 млн записей
Прошу сделать конверт в Кронос+
Конечно, 9000+ файлов по 900+Кб каждый, можно объединить в один, или несколько файлов, вычистить из них регулярками пару Гб мусора, что бы скормить Кроносу.
Можно было бы даже заморочиться и привести записи к единой последовательности и структуре, которой в исходнике нет, если вы не заметили. Но оно того не стоит, потому что данные взяты из баз, которые давно в паблике, их и без пароля-то уже неохотно качают. Включая телефонку и бизнес-справочник Испании, который автор характеризует "базами Евросоюза". На самом деле, любой здешний завсегдай, выгрузив свои базы в текст, объединив их и удалив дубли, по одной только РФ получит записей поболее 70 млн., которые к тому же будут существенно богаче и свежее.
[size=+1]
[/size]
Размер банка:
9`218 Kb
Общее количество записей в банке:
14`668
База:
UA РЕЕСТР КОРРУПЦИОНЕРОВ 07.2016
1|ФИО|Т|100||ИФ|
2|Дата судебного решения|Д||||
3|Номер судебного решения|Т|80|||
4|Сфера гос.службы|Т|120|||
5|Деятельность госслужащего|Т|150|||
6|Место работы|Т|200|||
7|Должность|Т|150|||
8|Кодекс|Т|100|||
9|Статья|Т|10000|||
10|Состав преступления|Т|10000|||
11|Наказание|Т|10000|||
17|Дата судебного решения|Д||||
13|Номер судебного решения|Т|60|||
14|Способ совершения|Т|100|||
15|Вид наказания|Т|150|||
16|Основание для снятия|Т|80|||
==========================
[size=+1]
[/size] [База под
Cronos PRO 5x и выше]
Размер банка:
8`635 Kb
Общее количество записей в банке:
44`577
База:
Эксперты |
10`043
1|ФИО|Т|100||ИФ|
2|Наименование организации|Т|198||МН|
3|Область|Т|25|||
4|Адрес|Т|171||МН|
5|Контактные телефоны, email|Т|57|||
6|Документы|П|||МН|DS11
==========================
База:
Документы |
33`975
1|Наименование комиссии|Т|117||ИФ;МН|
2|Дата решения|Д||||
3|Номер свидетельства|Т|36||МН|
4|Лицензия|Т|269||МН|
5|Срок действия|Д||||
6|Экспертизы|П|||МН|EP5
8|Тип документа|Т|66|||
9|Аннулированные|П|||МН|RS3
10|Информация по лицу|Т|429||МН|
11|Обратная связь|О|||МН|
==========================
База:
Экспертизы |
524
1|Свидетельсво эксперта |Т|16|||
2|Класс экспертизы|Т|47|||
3|Номер и вид экспертизы|Т|108||МН|
4|Индекс и вид экспертной специальности|Т|337||ИФ;МН|
5|Обратная связь|О|||МН|DS6
==========================
База:
Аннулированные |
35
1|Дата аннулирования|Д||||
2|Причина|Т|429||ИФ;МН|
3|Обратная связь|О|||МН|DS9
==========================
Всё без пароля