Учимся добывать прокси сами

Alex_FFF · 19 Июл 2020

Теперь нам нужно проверить наши прокси на валид.
Выставляем нужные нам настройки(потоки выкручиваем на максимум, таймаут и количество попыток по желанию. Выбираем тип наших проксей, я буду проверять Socks4)

Загружаем прокси из файла и нажимаем Check

Ждём пока проверятся наши судьи прокси

Началась проверка наших прокси

Затем жмём кнопку Export чтобы сохранить наши прокси

Теперь у нас есть прокси Socks4 следующим нашим действием будет поиск прокси сайтов, на которых побывали наши проокси, чтобы спарсить ещё больше прокси и проверить на валид.

Дальше нам потребуется парсер ссылок по запросам, я буду использовать YaGo Parser v4.3 By CyberBro - [Cracked By PC-RET]
Скачать - https://yadi.sk/d/I8jwjBdiblvslA
VT на архив - https://www.virustotal.com/gui/file...8d41836ab32f6169b6a20e0d466668b4611/detection

Открываем софт

Затем нам необходимо вписать наши "Ключевые слова(Keywords)" туда мы будем вписывать наши прокси, которые мы проверили на валид.

Выставляем нужные нам настройки, а именно поисковую систему(желательно Google),прокси и ядра.
В качестве проксей можем использовать те, которые проверили на валид.

Жмём кнопку Start Parsing

Парсер начал свою работу

UPD: Желательно поставьте в этом пункте галочку, если у вас не будут парсится ссылки, попробуйте новые прокси(лучше всего подходят HTTPS)

Начался сбор ссылок

Чем больше ждём, тем больше ссылок, следовательно проксей.

Я не стал дожидаться конца работы программы и остановил на том моменте, когда набралось почти 3к ссылок

У нас создался текстовый документ, в котором находятся ссылки

Дальше нам нужно отсортировать битые ссылки.
Заходим в Notepad++

Жмём ctrl+f, у нас открывается поиск, заходим во вкладку пометки

Ставим галочку напротив пункта "Помечать Закладкой"

Далее смотрим на ссылки которые есть в нашем документе.
*Красной обводкой помечен мусор

чтобы от него избавиться вписываем что-то общее между ссылками.
В нашем случае, это слово Search. Жмём кнопку пометить всё.

Дальше удалим ссылки гугла. После того, как мы пометили мусорные ссылки, заходим во вкладку поиск, закладки, удалить все строки с закладкой.

Отлично! Мы удалили мусор(не весь конечно, но парсеру проксей уже будет легче). Теперь нам необходимо спарсить эти прокси.

В качестве парсера проксей я буду использовать софт, который называется unfx-proxy-parser.

Скачать - https://openproxy.space/software/proxy-parser
VT - https://www.virustotal.com/gui/file...ae08ea52575c91e2a9d0c087dac945b907d/detection

Запускаем программу.
Спойлер: Интерфейс

Выставляем мои настройки

Следующим действием необходимо вставить наши ссылки и нажать кнопку Parse

Начался парс проксей

Когда процесс закончится, вы увидите это

Это значит, что мы спарсили 480к прокси. Дальше нужно их сохранить, жмём на кнопку сохранения(дискету).
Ждём пока появиться файл там, где мы сохраняли прокси.

Ну всё, теперь нам нужно только проверить эти прокси.
Заходим в самую первую программу. Повторяем те же действия и ждём.

В итоге мы получаем прокси

В среднем можно получить около 3-х к, но это не точно.

Ну вот и закончился мой туториал, если он кому-то зайдёт, то я попробую написать ещё статью на эту тему, но получить уже будет сложнее.
Всем удачи, всем пока.

UPD(13.07.2020): Решил запустить ещё другой прокси чекер, по скорости такой же мб даже быстрее, находить в 2 раза больше проксей, но в первом прокси чекере и в этом разные результаты, следовательно кто хочет получить гораздо больше проксей советую использовать 2 этих прокси чекера вместе, эффективность возрастает в 2 раза)
Скачать - https://yadi.sk/d/7lVfo1sHtD_5OQ
VT - https://www.virustotal.com/gui/file...f02ab737803df2a717a488fb81cc0de00bd/detection

Привет, гость!

Учимся добывать прокси сами

Alex_FFF

Похожие темы