Рандомный заголовок запроса.

download.py

@@ -4,24 +4,13 @@ import re
 import os
 import sys
 import ast
-import net_tree
 import requests
+from include import net_tree
+from include.http_header import get_headers
 
 # компилируем регулярку поиска ipv4 адреса
 ipv4_find_str=re.compile(r"[^0-9.]?(25[0-5]|2[0-4][0-9]|1?[0-9][0-9]|[0-9])\.(25[0-5]|2[0-4][0-9]|1?[0-9][0-9]|[0-9])\.(25[0-5]|2[0-4][0-9]|1?[0-9][0-9]|[0-9])\.(25[0-5]|2[0-4][0-9]|1?[0-9][0-9]|[0-9])(/([0-9]{1}[0-9]*))?[^0-9.]?")
 
-# заголовок HTTP запроса
-headers = {
-    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) "
-                  "AppleWebKit/537.36 (KHTML, like Gecko) "
-                  "Chrome/124.0.0.0 Safari/537.36",
-    "Accept": "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8",
-    "Accept-Language": "en-US,en;q=0.5",
-    "Accept-Encoding": "gzip, deflate, br",
-    "Connection": "keep-alive",
-    "Upgrade-Insecure-Requests": "1",
-}
-
 # метод сбора словаря ip адресов ipv4 из текста
 def ipv4_find(strip:str, size:int):
     """
@@ -77,7 +66,7 @@ def list_ip(c_dict: dict = []):
                 # бежим весь список ссылок пока не код 200
                 for c_url in c_list['url']:
                     try:
-                        if (result:=requests.get(c_url, headers=headers)) and result.status_code == 200 and result.text:
+                        if (result:=requests.get(c_url, headers=get_headers())) and result.status_code == 200 and result.text:
                             print(f"URL: {c_url}")
                             # пополняем словарь ipv4_list
                             if ipv4: ipv4_list.update(ipv4_find(result.text,ipv4))
@@ -141,7 +130,7 @@ if __name__ == "__main__":
         try:
             # если файл list ссылка, загружаем и парсим его
             with open(list_file, "r") as file:
-                if (result:=requests.get(url_list_file:=file.readline().strip(), headers=headers)) and result.status_code == 200 and result.text:
+                if (result:=requests.get(url_list_file:=file.readline().strip(), headers=get_headers())) and result.status_code == 200 and result.text:
                     ip_list = ast.literal_eval(result.text)
                 print(f"Список выгрузки по url: {url_list_file}")
         except requests.exceptions.MissingSchema: