Инструмент для исследователей, который позволяет скачивать актуальные подробные данные о ДТП с официального сайта статистики ДТП ГИБДД. Подробности - в статье на хабре.

Парсер работает из командной строки. Данные загружаются в формате json, в разбивке один файл = один регион. Папка с данными (по умолчанию dtpdata) создается рядом со скриптом.

Парсер поддерживает докачку (т.к. не всегда удается скачать такой объем данных с первого раза), поэтому при повторном запуске пропускает уже скачанные регионы.

Парсер пишет лог-файл с названием parselog.log со всей статистикой. По умолчанию данные дописываются и не обрезаются. Если нужен "чистый" лог, необходимо удалить этот файл.

Для корректной работы парсера в той же папке должен лежать справочник ОКАТО-кодов регионов regions.json. Если справочника по какой-то причине нет, можно просто запустить парсер с параметром --updatecodes y, и справочник будет создан заново.

Также всю статистику ДТП можно взять здесь. За подсказку спасибо espdev.

Работает из командной строки. Базовый синтаксис:

GibddStatParser.py [--year] [--month] [--regcode] [--dir] [--updatecodes] [--help]

--year год, за который скачивается статистика. если год не указан, скачивается статистика за текущий год

--month месяц, за который скачивается статистика. если не указан, скачивается статистика за все прошедшие месяцы года

--regcode ОКАТО-код региона. номера кодов регионов можно посмотреть в справочнике кодов регионов regions.json (параметр id)

--dir папка, в которую скачивается статистика. по умолчанию dtpdata

--updatecodes обновить ОКАТО-коды регионов с сайта stat.gibdd.ru. по умолчанию обновление отключено (--updatecodes n). Для корректной работы парсера справочник регионов regions.json должен лежать рядом со скриптом

Примеры вызова парсера

GibddStatParser.py --year 2018 : скачать все ДТП за 2018 год. для текущего года скачиваются все месяцы минус текущий. для прошедших лет скачиваются 12 месяцев

GibddStatParser.py --year 2018 --month 4 : скачать все ДТП за апрель 2018 года

GibddStatParser.py --year 2018 --regcode 45 : скачать все ДТП по Москве за 2018 год. 45 - ОКАТО-код г.Москва

GibddStatParser.py --year 2018 --updatecodes y : скачать все ДТП за 2018 год и обновить справочник кодов регионов

Для этого служит скрипт read_dtp_data.py. Синтаксис скрипта:

read_dtp_data.py [--filename]

--filename имя файла в формате .json, содержащего карточки ДТП по какому-либо региону. необходимо указывать полный путь к файлу

Пример

read_dtp_data.py --filename "c:\45 г. Москва 1-4.2018.json" : просмотреть статистику ДТП по г.Москва за январь-апрель 2018 года (результат на картинке)

Для непрограммистов будет достаточно установить Python 3.6.5 и вызывать скрипт из командной строки Windows. Например:

c:\Python36\Scripts\python.exe c:\GibddStatParser.py --year 2018

Код парсера написан на Python 3.6.5.

Установите зависимости перед запуском скрипта:

pip install -r requirements.txt