Поиск и проверка HTTP прокси, бесплатные прокси и полезные сервисы
Вообще прокси сервер это что-то вроде «посредника» между вами и сайту, сервису, к которому вы обращаетесь. Сначала происходит подключение к этому прокси, а потом он коннектится к конечной точке назначения. Использовать это в работе можно по разному — кто-то для скрытия своих следов (анонимности) в интернете, кто-то для нехороших целей, а кому-то это просто нужно для профессиональной деятельности. Так, например, сеошникам и вебмастерам прокси дают возможность беспрепятственно (без каптч, банов IP) снимать показатели выдачи и т.п. С одной стороны для этого можно использовать проекты, предоставляющие платные списки работающих и стабильных прокси серверов, но с другой можно в сети отыскать и бесплатные прокси чем мы сейчас и займемся.
Изначально хотел написать конкретный и более четкий обзор подобных сервисов, но потратив часа 3 на их поиск, изучение, тестирование, понял, что вопрос весьма неоднозначный. Результаты иногда выдавались и вовсе противоречивые. Поэтому набросаю небольшую заметку о своих поиска, опыте и выводах по работе с прокси + набор полезных ссылочек. Возможно, это кому-то пригодится.
Начнем с самого простого — если нужно что-то найти, идем в Google и вбиваем интересующий поисковых запрос, будь то «free proxy list», «free http proxy» либо «free http proxy list». Нам нужны именно http прокси. Сам google, кстати, подскажет еще дополнительные поисковые варианты запросов:
Ну и, конечно, можно искать русские ключевые слова и выражения. Сайтов в выдаче очень много и все они разные, хотя некоторые повторяются с завидной регулярностью — таким, следовательно, чуть больше «доверия» (если это понятие здесь уместно). Итак, парочка сайтов со списками проксей:
Spys.ru — один из самых популярных проектов, удобно собраны все прокси с указанием их типа, анонимности, страны и времени проверки.
Если воспользоваться формой справа, то можно подобрать нужные варианты. Обновления проксей также весьма радует, чуть ли не в реальном времени.
Hidemyass.com — здесь есть разные возможности, как премиум (платные), так и бесплатные. Заходим в раздел IP:PORT Proxiex где найдем спеицальные фильтры для поиска прокси:
Можно отобрать по типу, скорости, стране и т.п., что очень удобно. Кстати, сервис автоматически обновляет списки при появлении новый проксей пока вы находитесь на страницу.
HTTP Proxy list отображает список последних добавленных прокси. Автоматического обновления нет, но также представлена вся информация по ним — от страны до анонимности. Напротив каждого прокси есть ссылка check для его проверки.
Немного неудобно, что IP и PORT в разных колонках (копировать дольше) + проверка идет в отдельном окне — приходится ждать. Видимо, для того чтобы покупали более удобный премиум список проксей (есть оплата по webmoney).
Free Public Proxy Servers List — сервис тоже достаточно часто встречался в выдаче, помню когда-то использовал отсюда прокси. Есть разные варианты выборки — самые последние проверенные, самые быстрые, анонимные элитные и т.п.
Правда иногда разобраться сходу во всех этих мелких менюшках очень сложно, вот, допустим, последние проверенные HTTP прокси. Если смотреть на время обновления, то «давность» проксей около 4х частов — не сильно много, но сверху были и более актуальные результаты. Также есть ссылочки на RSS, наверное, можно подписаться на обновления.
Freeproxylist.org — опять же владельцам платных услуг все самое лучшее, но и с помощью специальной формы можно найти бесплатные прокси для работы, которые обновились в течении последних 10 минут — неплохо.
Если просмотреть выдачу, то можно найти еще больше разных сайтов, которые предоставляют списки бесплатных прокси для работы.
Проверка прокси, онлайн прокси чекеры
Теперь, когда у вас есть немало таких вот адресов в формате ip:port, нужно знать какие из них рабочие, а какие нет. Вообще время жизни проксей небольшое, поэтому перед работой их нужно проверять, отсеивая ненужные. Раз уж мы говорим про онлайн, то рассмотрим парочку интернет сервисов прокси чекеров. Искать их можно точно также как списки прокси через Google.
Чекер со множеством различных параметров. Единственное, что в нем плохо — проверка по одному прокси за раз, что, конечно, не подходит для большого их количества.
Бесплатный онлайн прокси чекер
Добавляете список проксей и нажимаете кнопку «Старт», после чего получите 2 списка рабочих HTTP и SOCKS прокси, который можно легко экспортировать в txt файл. Нерабочие варианты будут удалены.
Onlinechecker.freeproxy.ru — еще один онлайн чекер прокси, вводите список, выбираете таймаут и тип прокси. В результате каждый из них будет проверен и отобразится сообщение рабочий он или нет.
Proxyfree.ru — интересная «сырая» наработка по сервису проверки прокси, которая в данный момент продается. Что понравилось — здесь можно не просто проверить список проксей, но и извлечь его (спарсить) из введенной вами ссылки.
Потом, конечно делаете проверку и получаете информацию по каждому прокси. В самом низу страницы полезными будут ссылки на уже готовые списки рабочих HTTP прокси как в Яндексе, так и под Google.
Раньше была общедоступная проверка прокси в панели сайтов Site Control, однако сейчас она только для пользователей программы
Дальше можно сразу скопировать работающие прокси под один или другой поисковик. К сожалению, их в примере получилось немного. Вообще, что меня немного озадачивает так это противоречивость результатов прокси чекеров — вводя один и тот же список во все онлайн сервисы я получал постоянно разные отчеты, местами очень и очень разные.
Если говорить о программах-чекерах прокси, то могу вспомнить недавний обзор адурилки CM2: ЧОрный человек (YADD) . В программе достаточно удобно реализован механизм поиск проксей и их проверки. Вы сначала задаете ключевое слово для поисковика, выбираете Яндекс, Google для поиска, например, 10-20 первых сайтов. Дальше из выдачи парсятся списки проксей, отсеиваются дубли и запускается проверка. Потом можно удалить неработающие и экспортировать хорошие в файл.
Работать с этим инструментом быстро и удобно. Единственное опять же непонятно насколько там результаты совпадают с действительностью. Выбирал некоторые хорошие прокси и проверял через онлайн сервисы — доступными оказались единицы. Да, прокси быстро устаревают, но не настолько же чтобы через 1-2 минуты уже быть нерабочими.
Все это конечно классно. Расписано. Вот только заумно и не для ознакомления, а для заучивания :D
прокси — это спасибо, чую скоро с трекеров просто так не покачаешь — палить айпишники будут
Немного не понял. Я когда-то для друга накручивал счетчик с помощью заходов с проксей. А для чего еще можно их использовать с точки зрения вебмастера или СЕО?
Присоединяюсь к вопросу napoleonua
napoleonua, Дмитрий, прокси нужны для проверки позиций в поисковиках и различных seo сервисов и сайтов, которые не позволяют совершать множество запросов с одного IP. Самый просто пример это, конечно, позиции или вот недавно рассказывал про адурилки поисковиков — там тоже нужны прокси.
Предпочитаю для своих сайтов все делать вручную. Спасибо за статью и ответ. Ваш блог Tod очень полезен. Внимательно слежу за вашими статьями, много для себя подчеркнул интересного.