Фиды прокси.
Сбор бесплатных
прокси из списков.

Верх страницы фидов прокси: вкладки модуля и период — сутки, 7 или 30 дней; от периода зависит воронка ниже. Под ними — главное предупреждение страницы, которое стоит прочитать до любой настройки. Через бесплатный прокси проходит письмо целиком — адреса получателей, текст, ссылки, — и его владелец может прочитать и подменить содержимое. Вывод простой: бесплатные адреса годятся для очистки базы и проверок, но не для боевой рассылки с рабочих доменов. Адрес класса D с закрытым портом 25 к почте не допускается вовсе, откуда бы он ни пришёл. Ниже — воронка за выбранный период.

Увеличить

• Вкладка и период — эта страница — «Источники»; период меняет воронку.
• Красная строка — бесплатный прокси — чужая машина: адреса получателей, текст и ссылки идут через неё.
• Вторая строка — бесплатные адреса — для очистки базы и проверок, а не для боевой рассылки с рабочих доменов.

Адрес класса D с закрытым портом 25 к почте не допускается вовсе.

Воронка фидов прокси за 7 дней — пять чисел от строки в списке до годного адреса. Справа у каждого шага — доля от предыдущего, поэтому видно, где отсеивается поток. Из 416 272 найденных адресов новых только 2 372, почти все они не прошли проверку, и годных осталось 10. Экран честно показывает цену бесплатных списков: много строк, единицы пригодных адресов, и даже они сами в отправку не идут. Если источник неделями не даёт годных адресов, его можно выключить. Отбракованные адреса запоминаются по отпечатку, поэтому следующий сбор не добавит их снова и не потратит на них проверки.

Увеличить

• Найдено адресов — 416 272 за период, все источники.
• Новых — 2 372 (0,6 %) — остальные уже были в парке или отбракованы раньше.
• Проверено — 2 357 (99,4 %) — очередь идёт порциями по 60.
• Отбраковано — 2 347 (99,5 %) — не ответили или с закрытым портом 25.
• Годных — 10 (0,4 %), в работе 0.

Годный адрес из списка ещё не в отправке: собранное само в рассылку не идёт.

Список подключённых фидов прокси — здесь решают, какой источник держать. Их четыре, и у каждого видно состояние, протокол, способ разбора, расписание, ссылку и улов последнего сбора. Цветная полоса показывает долю годных, ждущих проверки и отбракованных адресов, и у бесплатных списков она почти целиком красная. Справа — кнопки «Собрать», «Выключить» и «Убрать», вверху — «Собрать со всех включённых»; если сбор сломался, строка подсказывает, что делать. Собранные адреса сами в отправку не идут, а отбракованные бесплатные убираются сразу после проверки; уже убрано 13 747.

Увеличить

• SOCKS5 · текстовый список — работает раз в час: дал 2 306, новых 10, годных всего 4 — меньше 0,1 %, 10 ждут проверки.
• Таблица с карточками — читается по ссылкам таблицы: 296, новых 5, годных всего 6 — 0,2 %.
• Порты в скрипте — нужен браузер: сайт закрыт защитой Cloudflare; строка подсказывает скачать список вручную и загрузить файлом.
• HTTP · зеркало списка — выключено, последний сбор 12.10.
• Полоса — зелёное — годные, жёлтое — ждут проверки, красное — отбракованы, вместе с убранными.

Собранное не идёт в отправку само. Отбракованные бесплатные адреса убираются сразу после проверки, остатки — ночной уборкой; уже убрано 13 747.

Форма, через которую добавляют новый фид прокси. Нужны четыре поля: ссылка на страницу или файл списка, название, протокол и расписание сбора — раз в час, раз в сутки или вручную. Кнопка «Проверить и добавить» сразу скачивает страницу и не сохранит источник, если адресов на ней нет, так что пустая ссылка в список не попадёт, а протокол можно определить по странице или задать вручную. Ссылку на страницу GitHub Хаб сам переделывает в ссылку на «сырой» файл. Как читать страницу, Хаб выберет сам при первом сборе — об этом следующий экран.

Увеличить

• Ссылка — на страницу или файл списка.
• Название — как показывать источник в списке.
• Протокол — определить по странице или задать вручную.
• Сбор — раз в час, раз в сутки или вручную.

Ссылку на страницу GitHub Хаб сам переделывает в ссылку на «сырой» файл — иначе он нашёл бы там ноль адресов.

Справочный блок о том, как Хаб читает страницы со списками прокси, — пригодится, если источник вдруг перестал давать адреса. Способов три: адреса в тексте страницы, адрес и порт в ссылках таблицы и порт, который выводит скрипт. Способ выбирается сам при первом сборе и запоминается, а если перестал находить адреса — выбирается заново. Внизу объяснено, почему Хаб представляется браузером: часть сайтов отвечает роботам отказом. Поломки названы словами: проверка браузера, сайт не ответил, перестал отдавать адреса. Такие строки видны в истории сборов ниже.

Увеличить

• Текст страницы — всё, что похоже на адрес с портом, где бы оно ни лежало.
• Ссылки таблицы — адрес и порт из ссылки на карточку; оттуда же протокол.
• Порты в скрипте — порт печатается выражением; считается без браузера, но ломается при правке сайта.

Один из проверенных сайтов отвечает 406 на запрос без заголовков браузера — без маскировки источник выглядел бы мёртвым.

История фидов прокси: последние двенадцать сборов, каждый отдельной строкой — когда, какой источник, чем закончился, сколько строк дал и сколько из них новых. Цвет полосы слева — итог сбора, поэтому сломанный источник видно сразу. Например, «Таблица с карточками» в 16:20 дала 296 строк, но новых из них только 5, а «Порты в скрипте» в 13:50 упёрлись в проверку браузера. Внизу объяснено, почему отбракованный адрес не вернётся со следующим сбором. Если источник раз за разом упирается в проверку браузера, список скачивают вручную и загружают файлом на экране импорта.

Увеличить

• Таблица с карточками в 16:20 — 296 строк → 5 новых; уже было 16, отбраковано ранее 275.
• SOCKS5 · текстовый список в 16:20 — 2 306 строк → 10 новых.
• Порты в скрипте в 13:50 — закрыт проверкой браузера — 0 → 0 новых и подсказка, что делать.

Отбракованный адрес запоминается: следующий сбор того же списка не заведёт его снова, иначе один и тот же мусор ходил бы по кругу каждый час.