- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
FAQ по добыче прокси.
В этой статье мы рассмотрим следующие способы добычи прокси:
Так же рассмотрим некоторые методы проверки на прокси (чек), сортировки, фильтрации, проверки на страны и т.д.
Я не буду здесь описывать, что такое прокси сервер, для чего они нужны и мы не будем рассматривать ряд устаревших программ.
Сканирование ip адресов и последующая их проверка (чек) на прокси.
Сканировать можно по стране или по определенному диапазону на определённые порты.
Диапазоны.
Диапазоны стран можно взять на сайтах:
http://www.proxyserverprivacy.com/ipaddress_range.php
http://www.ipaddresslocation.org/ip_ranges/get_ranges.php
http://www.find-ip-address.org/ip-country/
http://www.proxysecurity.com/ip-address-range.php
и т.д. Весь диапазон ip адресов: 0.0.0.0-255.255.255.255
Порты.
Мы будем сканировать на порты:
Http: 80, 8080, 3128
Socks4 и Socks5: 1080
Это основные порты. Есть очень много других хороших портов, на которых есть http прокси, например: 81, 82, 6855, 8000, 8082, 8090, 8888 и т. д.
Как же узнать, на какие порты сканировать?
Есть много способов, я предложу один из простых и верных. Регистрируемся на нескольких прокси форумах:
http://proxyfire.net/forum/
http://dcsproxy.com
http://forum.my-proxy.com
http://proxygod.com/forum/
Собираем все прокси, что там выкладывают за сегодня, удаляем дубликаты (как их удалить читайте ниже) и чекаем оставшиеся (как это сделать читайте ниже).
Весь диапазон портов: 0-65535
Proxyfire
Качаем Proxyfire Master Suite Free 1.22 или покупаем ProxyFire Master Suite Professional 1.22($29)
Можно найти крякнутую версию, Google в помощь.
Proxyfire - это целая лаборатория для работы с прокси. Можно выкидывать весь старый софт! Вам больше не нужны: сканнеры, грабберы, личеры, сёрчеры, чеккеры, бат-криейдеры, фильтры, дубликат-ремоуторы, парсеры отчётов сканнера и прочий мусор. Proxyfire объединяет все эти утилиты в одной компактной программе, поэтому мы будем работать с ним. Proxyfire не требует установки и с ним очень удобно работать на дедике. Есть скрытый режим.
Приступаем к настройкам программы.
Settings
Здесь есть окно редактирование прокси судей (Proxy Judges). Их можно нагуглить, а можно сделать свои, надёжные. Для этого вам понадобиться зарегистрировать несколько хостингов и разместить там скрипт azenv.php:
В программе указать путь к этому файлу, нажмите "Add" и пропишите как на скриншоте:
На самом деле легче это сделать вручную, заходим в папку с программой, открываем файл check.ini и пишем в нём:
и т.д. Потом сохраняем и перезагружаем программу, заходим во вкладку Settings и видим наши пути к прокси судьям. 10 будет достаточно, подходящий хостинг из бесплатных freehostia.com
Proxy Filter
Все мы знаем, что прокси могут иметь разный вид, к порту приписывают различную информацию, порт 8080 и 808 (это одно и то же), переодически нужно удалять дубликаты, перемешивать прокси листы, удалять прокси с ненужными портами и т.д.
Современнее и новороченнее фильтра-парсера, чем в Proxyfire я не встречал! Это машина для работы с прокси листами.
В окно "In" можно пихать любой мусор, Proxyfire вытащит из него прокси.
P-Scan
Вкладка "Scanner". Здесь можно включить "Auto Check", задать приоритет "Scan process Priority". Устанавливаем количество потоков "Threads". Если у вас интернет канал 6 метров и более ставим 3000 потоков. Проверить скорость интернет соединения можно здесь: http://2ip.ru
Таймаут "Timeout(s)" ставим от 5 до 20. Выбираем метод сканирования "TCP" (метод "SYN" сейчас не работает, на сколько мне известно). Далее вбиваем диапазоны, которые будем сканировать, диапазоны должны быть вида:
Можно сканировать диапазоны определённой страны, можно сканировать просто свои диапазоны, а можно создать диапазоны из хороших прокси. Для этого переходим на вкладку "Make IP Ranges", вбиваем хорошие прокси в окно "Input proxies here", выставляем на сколько расширять диапазоны до и после "Up Expand" и "Down Expand" 1000 - оптимальное число. Можно отсеять по странам, жмём кнопку "Sel..." и выбираем страны. Далее жмём "Go" видим в соседнем окне сгенерированные диапазоны и ниже порты.
Жмём "Copy to Scanner" и мы опять во вкладке "Scanner".
Proxyfire сканирует на 1 порт, на тот, что первый прописан в списке.
P-Search
Очень эффективный способ поиска прокси. Если вам нужно быстро найти рабочие прокси - это то что вам нужно.
Здесь всё просто, выбираем поисковый движок: Google, Baidu, Yahoo! или MSN. Далее меняем код, жмём "Edit" напротив интересующего нас поисковика:
После выбора поисковика устанавливаем количество потоков "Serch Threads:" (в free версии оно ограниченно пятью!).
Можно так же включить "Auto Check" проверка прокси после достижения установленного вами количества найденных прокси.
Жмём "Keywords" и пишем там хорошие прокси с портами, их и будем искать + то, что вместе с ними выкладывают. Жмём "Go".
P-Leecher
Другими словами граббер прокси. Тут так же всё просто, устанавливаем "Loop" и "Auto Check" если надо. Указываем количество потоков и количество тем. Жмём "Edit Forum List" вбиваем туда наши прокси листы.
Прокси листы можно легко нагуглить, вот мой старый лист (нужно чекать) http://dump.ru/file/3764102
Check
Прокси чеккер. Жмём кнопку "Options...", далее выставляем потоки "Threads:" я ставлю 300 как то больше и не надо. Повтор "Retry:" 0
Далее указываем, нужно ли прогонять, через уже настроенный нами фильтр, прокси перед чеком "Filter proxies in the Proxy Filter Tab before Check"
Показать время отклика "Show response time"
Тут есть одна хитрая кнопка на панели "SOCKS4/5" нажав на нее, откроются 2 текстовых файла с разделёнными Socks4 и Soсks5 прокси
Proxylist
Если ваш компьютер случайно выключиться, вам нужно зайти сюда, чтобы забрать прокси, которые вы сканировали или искали.
P.S. Моя первая статья.
Меняем в настройках judges строку "https://www.google.com/accounts/ManageAccount" на "https://www.google.com/accounts/ServiceLogin".
Вот в общем то и всё. Ссылка на оригинальный топик: http://www.proxyfire.net/forum/showthread.php?p=88274
Удачи...
mff, полезная статья, пригодилась, спасибо
А на каких портах живут соксы: 1080, или не только?
-=Sveta=-, не только.
-=Sveta=-, воспользуйтесь вкладкой "P-Search", насобирайте проксей (50000-100000), прочекайте их на socks и потом отберите часто встречающиеся порты ;)
-=Sveta=-, воспользуйтесь вкладкой "P-Search", насобирайте проксей (50000-100000), прочекайте их на socks и потом отберите часто встречающиеся порты ;)
Какой то бред, дернул я 70к проксей с гугла, прочекал ни одного сокса
Dodgy, в каком плане бред? Может это руки кривые?! Чеккер настроили? Прокси-судьи работают?
Dodgy, в каком плане бред? Может это руки кривые?! Чеккер настроили? Прокси-судьи работают?
Прокси судьи это скрипт на хостах? Я не могу понять они то работают то нет ... создан на 100вебспейсе 1 ак там 5 сабов и на них залил, вначале все работало.
Я вот закидую свои листы находит 60-70к проксей, чекаю - выходит 5-10 прокси, соксов вобще нет, ищу в гугле тоже нахожу, чекаю почти ничего нет.
Все сделал как в описании.
Если не сложно, стукнись в аську 491407672
Dodgy, попробуйте паблик судьи заюзать:
Чекните их, все BAD - удалите. Оставьте 10-15 рабочих, быстрых. Так же обратите внимание на пост: #2Dodgy, попробуйте паблик судьи заюзать:
Чекните их, все BAD - удалите. Оставьте 10-15 рабочих, быстрых. Так же обратите внимание на пост: #2
Вот уже получше, я так понял, если чекать большое количество, то нада очень много судей, они как то отмирают на время