From 78cb84202671af304eebe70ce89fee6a1dd79a9e Mon Sep 17 00:00:00 2001 From: lobanov Date: Fri, 30 Sep 2022 17:23:50 +0300 Subject: [PATCH] =?UTF-8?q?=D0=BE=D0=B1=D0=BD=D0=BE=D0=B2=D0=B8=D0=BB=20?= =?UTF-8?q?=D1=81=D0=BA=D1=80=D0=B8=D0=BF=D1=82,=20=D0=BE=D0=B1=D1=80?= =?UTF-8?q?=D0=B0=D0=B1=D0=BE=D1=82=D0=B0=D0=BB=20=D0=BE=D1=88=D0=B8=D0=B1?= =?UTF-8?q?=D0=BA=D1=83=202=D1=85=20=D1=84=D0=B0=D0=B9=D0=BB=D0=BE=D0=B2?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- .gitignore | 2 ++ csv_parser.py | 11 ++++++- log_1.txt | 89 +++++++++++++++++++++++++++++++++++++++++++++++++++ log_2.txt | 9 ++++++ log_3.txt | 9 ++++++ log_4.txt | 16 +++++++++ log_5.txt | 44 +++++++++++++++++++++++++ log_6.txt | 13 ++++++++ 8 files changed, 192 insertions(+), 1 deletion(-) create mode 100644 log_1.txt create mode 100644 log_2.txt create mode 100644 log_3.txt create mode 100644 log_4.txt create mode 100644 log_5.txt create mode 100644 log_6.txt diff --git a/.gitignore b/.gitignore index 5a18b03..98a5e99 100644 --- a/.gitignore +++ b/.gitignore @@ -154,3 +154,5 @@ cython_debug/ #.idea/ /csv_files/ +/Контакты.csv +/Готовые/ diff --git a/csv_parser.py b/csv_parser.py index 46d347c..109e287 100644 --- a/csv_parser.py +++ b/csv_parser.py @@ -31,7 +31,7 @@ for file in list_files: file_not_exist = False start_time = time() webbrowser.open(address) - sleep(0.3) + sleep(1) # проверяем и если надо, ждем, начался ли скачиваться файл, скачался ли он, файлов больше 1го while len(os.listdir(in_dir_download_files)) == 0 or glob(f'{in_dir_download_files}/*.part') or len( os.listdir(in_dir_download_files)) > 1: @@ -41,6 +41,15 @@ for file in list_files: print('-------------------------') file_not_exist = True break + if time() - start_time > 300 and len(os.listdir(in_dir_download_files)) > 1: + print('X' * 20) + print(f'файлов несколько в директории загрузки. Проверить примерно {idx} строку') + print('X' * 20) + for file_name in os.listdir(in_dir_download_files): + os.remove(f'{in_dir_download_files}/{file_name}') + print("Deleted " + str(file_name)) + file_not_exist = True + break sleep(0.5) if file_not_exist: continue diff --git a/log_1.txt b/log_1.txt new file mode 100644 index 0000000..6603aef --- /dev/null +++ b/log_1.txt @@ -0,0 +1,89 @@ +2022-09-28 14:44:34.754582 +Данные по проектам ПАК СПО +2337 Количество ссылок +2334 Количество документов +2022-09-28 15:57:51.568472 stop date +Данные по проектам Ми-26 ВВС +------------------------- +файл не найден примерная строка 4846 +------------------------- +------------------------- +файл не найден примерная строка 4887 +------------------------- +------------------------- +файл не найден примерная строка 4892 +------------------------- +543 Количество ссылок +539 Количество документов +2022-09-28 16:19:44.649507 stop date +Данные по проектам Ка-27 ВМФ +3079 Количество ссылок +3074 Количество документов +2022-09-28 18:03:21.987276 stop date +Данные_по_проектам_Альтернатива_19 +1322 Количество ссылок +1322 Количество документов +2022-09-28 18:51:16.342229 stop date +Данные по проектам Клен +------------------------- +файл не найден примерная строка 8390 +------------------------- +------------------------- +файл не найден примерная строка 10159 +------------------------- +2234 Количество ссылок +2228 Количество документов +2022-09-28 20:16:02.673252 stop date +Данные по проектам Поставка МИ-8 Щелково +4 Количество ссылок +4 Количество документов +2022-09-28 20:16:15.933978 stop date +Данные по проектам Ми-26Т2 Алжир +2706 Количество ссылок +2701 Количество документов +2022-09-28 22:07:29.286212 stop date +Данные по проектам Ил-76_78 +------------------------- +файл не найден примерная строка 895 +------------------------- +------------------------- +файл не найден примерная строка 920 +------------------------- +------------------------- +файл не найден примерная строка 3143 +------------------------- +------------------------- +файл не найден примерная строка 3143 +------------------------- +------------------------- +файл не найден примерная строка 4452 +------------------------- +------------------------- +файл не найден примерная строка 6485 +------------------------- +------------------------- +файл не найден примерная строка 7982 +------------------------- +2789 Количество ссылок +2782 Количество документов +2022-09-29 00:01:10.095581 stop date +Данные по проектам Ми-28НЭ Уганда +433 Количество ссылок +433 Количество документов +2022-09-29 00:18:10.928093 stop date +Данные по проектам Ми-28НЭ Алжир +1326 Количество ссылок +1326 Количество документов +2022-09-29 01:11:23.419593 stop date +Данные по проектам Ми-8МТВ-5-1 ВВС +289 Количество ссылок +288 Количество документов +2022-09-29 01:21:43.831632 stop date +Данные по проектам ИСУ НП +3171 Количество ссылок +3164 Количество документов +2022-09-29 03:19:30.294199 stop date +Данные по проектам Ми-28 ВВС +------------------------- +файл не найден примерная строка 317 +------------------------- \ No newline at end of file diff --git a/log_2.txt b/log_2.txt new file mode 100644 index 0000000..d576ef2 --- /dev/null +++ b/log_2.txt @@ -0,0 +1,9 @@ +2022-09-29 08:59:52.863510 +Данные по проектам БРК +58 Количество ссылок +58 Количество документов +2022-09-29 09:02:05.827275 stop date +Данные_по_проектам_Альтернатива_21 +421 Количество ссылок +420 Количество документов +2022-09-29 09:13:55.323548 stop date diff --git a/log_3.txt b/log_3.txt new file mode 100644 index 0000000..f91eba1 --- /dev/null +++ b/log_3.txt @@ -0,0 +1,9 @@ +2022-09-29 09:55:34.125835 +Данные по проектам Левашово +96 Количество ссылок +96 Количество документов +2022-09-29 09:58:08.802447 stop date +Данные_по_проектам_Модернизация_Ка_52Э_Египет +8 Количество ссылок +8 Количество документов +2022-09-29 09:58:30.385026 stop date diff --git a/log_4.txt b/log_4.txt new file mode 100644 index 0000000..a74371c --- /dev/null +++ b/log_4.txt @@ -0,0 +1,16 @@ +2022-09-29 10:01:00.321562 +Данные_по_проектам_Сервис_Остров_Воронеж +------------------------- +файл не найден примерная строка 529 +------------------------- +678 Количество ссылок +673 Количество документов +2022-09-29 10:18:37.144508 stop date +Данные_по_проектам_ПНР_Торжок_Сызрань +175 Количество ссылок +175 Количество документов +2022-09-29 10:22:43.880696 stop date +Данные по проектам Регион +23 Количество ссылок +23 Количество документов +2022-09-29 10:23:24.078042 stop date diff --git a/log_5.txt b/log_5.txt new file mode 100644 index 0000000..bfe9aef --- /dev/null +++ b/log_5.txt @@ -0,0 +1,44 @@ +2022-09-29 15:00:09.382638 +Данные по проектам Ми-28 ВВС +1282 Количество ссылок +1278 Количество документов +2022-09-29 15:38:46.310340 stop date +Данные по проектам Ми-28НЭ Ирак +------------------------- +файл не найден примерная строка 3650 +------------------------- +2195 Количество ссылок +2193 Количество документов +2022-09-29 17:18:21.745992 stop date +Данные по проектам Ка-226 ВВС +534 Количество ссылок +534 Количество документов +2022-09-29 17:36:13.020024 stop date +Данные по проектам Ансат + ВВС +------------------------- +файл не найден примерная строка 2532 +------------------------- +------------------------- +файл не найден примерная строка 3532 +------------------------- +3046 Количество ссылок +3038 Количество документов +2022-09-29 19:08:56.607734 stop date +Данные по проектам Ка-29 ВМФ +961 Количество ссылок +961 Количество документов +2022-09-29 19:44:32.705577 stop date +Данные по проектам Ми-171Ш (Перу) +------------------------- +файл не найден примерная строка 4028 +------------------------- +1720 Количество ссылок +1718 Количество документов +2022-09-29 20:48:06.749328 stop date +Данные по проектам ил-112 +------------------------- +файл не найден примерная строка 13864 +------------------------- +XXXXXXXXXXXXXXXXXXXX +файлов несколько в директории загрузки. Проверить примерно 13886 строку +XXXXXXXXXXXXXXXXXXXX diff --git a/log_6.txt b/log_6.txt new file mode 100644 index 0000000..5a54aed --- /dev/null +++ b/log_6.txt @@ -0,0 +1,13 @@ +2022-09-30 10:34:53.104143 +Данные по проектам Ми-8АМТШ ВВС +------------------------- +файл не найден примерная строка 4441 +------------------------- +XXXXXXXXXXXXXXXXXXXX +файлов несколько в директории загрузки. Проверить примерно 4695 строку +XXXXXXXXXXXXXXXXXXXX +Deleted АОС-ИТС-8АМТШ Перечень 2_20190917_1.xlsx +Deleted Исправление замечаний ГЛИЦ 07.06.2019 10 43 37 17734.png +266 Количество ссылок +262 Количество документов +2022-09-30 10:48:04.659143 stop date