Что такое прокси-сервер, виды и как он работает

23 ДЕКАБРЯ 2022 • АНОНИМНОСТЬ • ЭКСПЕРТНОЕ МНЕНИЕ

Прокси-сервер — полезный и проверенный инструмент для работы арбитражников, SMM-специалистов, e-commerce и маркетологов. Мы решили собрать основную информацию о технологиях, сферах применения и преимуществах прокси.

У каждого компьютера, подключенного к интернету, есть публичный IP-адрес, по которому можно определить провайдера и страну, откуда приходят запросы пользователя. Этот IP-адрес может использоваться для идентификации посетителей сайтов.

Простыми словами, прокси-сервер — это посредник между вашим устройством и веб-сайтами. При подключении к прокси-серверу все исходящие и входящие данные проходят через него, а ваш IP-адрес заменяется на IP-адрес прокси-сервера.

Основная задача прокси — скрыть настоящий IP-адрес и текущее местоположение, заменив его на IP прокси-сервера. IP-адрес является частью цифрового отпечатка, о котором мы рассказывали в статье — Как браузерные отпечатки выдают нас веб-сайтам. Рядовые пользователи применяют прокси для анонимного серфинга, а веб-мастера активно используют их для арбитража трафика, продвижения аккаунтов в соцсетях, парсинга данных и многих других профессиональных задач.

Главные причины использовать прокси-сервер:
Обход блокировок по IP или снятие региональных ограничений при доступе к сайтам.
Повышение уровня анонимности и конфиденциальный просмотр контента в интернете.
Усиление онлайн-безопасности. Защита сети или устройств от сетевых атак и мошенников на самом базовом уровне посредством сокрытия вашего IP-адреса.
Вход в интернет с нескольких компьютеров под одним IP-адресом.

Обычно устройство напрямую отправляет запрос сайту. При этом веб-страница видит IP юзера, ведь именно на него она и доставляет ответ. Когда к процессу добавляется прокси-сервер, весь входящий и исходящий трафик проходит через него. Теперь запросы пользователя сначала попадают на удаленный сервер, а уже он передает их сайту. В обратную сторону все работает так же. Из-за того, что при использовании прокси сайт общается с ним, а не с устройством юзера напрямую, веб-страница не знает адрес пользователя.

Виртуальная частная сеть также работает как посредник между пользователем и сайтом и подменяет IP-адрес юзера. Но кроме этого, VPN создает зашифрованный канал связи между отправителем и получателем, чтобы никто, кроме них, не получил доступ к передаваемой информации. Даже если мошенник, интернет-провайдер или кто-то еще украдет данные, он не сможет их расшифровать. Некоторые прокси-серверы также шифруют трафик. Понять, есть ли шифрование, можно по протоколу. HTTPS, SSH, SOCKS5 считаются самыми безопасными.

Прокси работают как браузерные расширения, а VPN — как отдельные приложения. Из-за этого прокси покрывает только тот трафик, который передается через браузер. Например, вы включили прокси и зашли в приложение Telegram. IP изменится только для сайтов, посещенных из браузера, а вот Telegram по-прежнему будет видеть IP вашего устройства. Чтобы обойти такую слежку, можно использовать VPN или зайти в веб-версию мессенджера.

Еще одно различие прокси-сервера и VPN — в способах применения. Кроме базовой функции подмены IP, прокси может работать как балансировщик нагрузки. Все внешние запросы поступают на прокси, а он делит трафик между несколькими серверами, чтобы каждый из них справлялся с наплывом входящего трафика. Также прокси-серверы кэшируют запросы пользователя, чтобы ускорять интернет-серфинг. Для этого сервис сохраняет запросы юзера и, если они повторяются, выдает ответ без обращения к сайту. VPN не может кэшировать сообщения и распределять нагрузку, но через виртуальную частную сеть компании или учебные учреждения фильтруют входящие данные. Таким образом они защищают локальную сеть от хакерских атак.

Прокси используют для анонимности в интернете, но это не значит, что инструмент априори безопасен. При выборе сервиса нужно обращать внимание на репутацию провайдера, отзывы, а перед тем, как начать работать, — проверять сервис. Как это сделать, можно прочитать в статье. Сейчас перечислим основные риски, с которыми сталкиваются пользователи.

Списки бесплатных прокси-серверов собираются с общедоступных мест. Эти адреса известны любому желающему и чаще всего уже заблокированы антифрод-системами сайтов. Не рекомендуем использовать их для работы — это грозит баном аккаунтов.

Поскольку все IP-запросы проходят через прокси-серверы, они видят, куда вы заходите в интернете. Недобросовестные поставщики могут собирать и продавать метаданные или красть личную информацию. Также некоторые прокси сохраняют историю браузера у себя на серверах в незашифрованном виде. В таком случае ваши запросы и IP-адрес не будут конфиденциальными.

Мы уже писали, что не все прокси-серверы используют безопасные протоколы передачи данных. Например, если вы работаете через HTTP-запросы, мошенники могут получить доступ к передаваемым сведениям, в том числе логинам, паролям, персональным и банковским данным.

HTTP-proxy
HTTP-proxy — это прокси-сервер, который использует протокол передачи HTTP для подключения к веб-серверу и клиенту (браузеру). HTTP — самый распространенный протокол передачи данных в интернете.

HTTPS-proxy
HTTPS-proxy работают через криптографический протокол TLS (Transport Layer Security), который применяется для сквозного шифрования трафика и предотвращения перехвата данных во время передачи. Это улучшенный и более безопасный вариант HTTP-прокси.

SOCKS-proxy
SOCKS-proxy используют протокол более низкого уровня для маршрутизации трафика, чем HTTP. При использовании протокола SOCKS даже сам прокси-сервер не может перехватить ваши данные, передавая их без изменения.

SOCKS5 поддерживает сетевой протокол UDP и может использоваться в рамках схем со строгой аутентификацией, но не все продавцы SOCKS5-прокси смогли качественно реализовать работу с UDP на своих серверах.

Какой протокол выбрать для работы?
HTTP-соединение устроено проще, чем SOCKS, и парсеры и боты быстрее устанавливают соединение через HTTP/HTTPS-прокси. SOCKS5 — это более безопасный и универсальный вариант для обхода блокировок и анонимного посещения любых онлайн-площадок.

Существуют две действующие версии адресов — IPv4 и IPv6.

IPv4 — это интернет-протокол с длиной адресного пространства в 32-бита, содержащий около 4,29 миллиарда адресов. Сейчас эта версия IP-адреса считается основной и поддерживается всеми веб-ресурсами. Проблема в том, что из-за исчерпания свободных адресов этот формат устарел и постепенно вытесняется IPv6.

IPv6 — это новая версия интернет-протокола, в которой адрес длиннее в 4 раза. Количество адресов IPv6 в 10 в 28 степени раз больше числа адресов IPv4. IP-адреса шестой версии более безопасны за счет механизмов аутентификации и шифрования. Чаще всего протокол IPv6 используется для мобильного доступа.

Динамику распространения IPv6 можно посмотреть на сервисе Google.

Оба формата IP-адресов активно предоставляются прокси-провайдерами. Выбор зависит от цели применения прокси. Найти свободное место на протоколе IPv4 сложнее из-за дефицита адресов, поэтому у большинства продавцов аренда IPv6 обходится дешевле, но не все веб-ресурсы поддерживают IPv6, а некоторые прокси-серверы некорректно работают с новой версией IP.

Прозрачные прокси-серверы подходят для контроля доступа, сжатия и кэширования трафика, но не влияют на анонимность. При их использовании сайты получают настоящий IP-адрес.

Анонимные прокси скрывают IP вашего устройства, обеспечивая минимальную анонимность, но сайты могут распознать, что соединение осуществляется через прокси-сервер.

Элитные прокси-серверы подменяют ваш IP и скрывают от веб-серверов, что вы пользуетесь протоколом посредником. Но даже в этом случае крупные сервисы могут анализировать пакеты через netfilter и выявить подключение через прокси.

Серверные прокси
Серверные прокси, как правило, размещаются на серверах крупных компаний и обеспечены высокоскоростным интернет-соединением. Это могут быть тысячи IP-адресов, расположенных в одном дата-центре, и потому серверные прокси — самые быстрые, с низким пингом.

Но у серверных прокси есть проблема — высокая вероятность обнаружения подмены IP-адреса. Из-за указания типа ASN (ISP / hosting / business / education / government), который имеют все крупные подсети интернета, сайты и поисковые системы легко определяют, что к ним подключаются, используя прокси.

Резидентные прокси
Резидентные прокси-серверы — это настоящие компьютеры реальных людей, подключенные к домашнему интернету и имеющие точную геолокацию. Продавец резидентных прокси на самом деле не владеет ими, а просто арендует IP-адреса и передает через них трафик. Сайты видят в таких прокси настоящих пользователей, и потому редко блокируют их. Но важно, чтобы прокси-серверы были динамическими и автоматически предлагали новый IP, если устройство резидента отключится.

Мобильные прокси
Мобильные прокси — это настоящие смартфоны, планшеты и ноутбуки. Они подключены к мобильному интернету и, как и резидентные прокси-серверы, используются для удаленного доступа.

Для обеспечения работы мобильного интернета сотовые операторы предоставляют абонентам динамически меняющиеся IP-адреса. Но поскольку пул таких адресов ограничен, на каждом IP-адресе могут сидеть десятки тысяч обычных пользователей, поэтому сайты опасаются блокировать мобильные прокси-серверы.

Shared-прокси — это прокси-адрес, с которого работают одновременно несколько пользователей. Преимущество этого способа доступа к прокси только в его стоимости. Для серьезных задач стоит приобрести приватные прокси-серверы. Они обойдутся дороже shared-прокси, но они более безопасны, быстры и надежны, а чаще всего требуется именно это.
Выбор прокси — это поиск баланса между качеством и ценой, поэтому в первую очередь стоит ориентироваться на свои потребности и задачи.

Мы рекомендуем проверять работоспособность проксификаторов через специальные онлайн-сервисы и бесплатные прокси-чекеры.

Дополнительно стоит проверить:

• ASN Lookup и type – нахождение в блеклистах, основанных на идентификаторах ASN и IP-блоках.
• TCP/IP fingerprinting – проверка на стороне сервера MSS и IP-фрагментации.
• Задержку / количество хопов.
• Утечки WebRTC.
• Открытые порты.
• Утечка DNS.
• HTTP-заголовки.