Автоматизация проверки доменов в зоне .ru позволяет сократить время подбора имени с 4-6 часов ручного поиска до 15-20 минут машинной обработки. При использовании стандартного WHOIS-запроса риск блокировки IP-адреса сервера наступает уже после 50-100 запросов в час, что делает наивные скрипты бесполезными для массового сканирования.
Методы проверки: WHOIS против DNS-запросов
Большинство новичков используют функцию `fsockopen` для подключения к WHOIS-серверу (порт 43). Это медленно: один запрос занимает от 200 до 800 мс. Вторая стратегия — проверка через `dns_get_record` или `checkdnsrr`. Если DNS-запись (A или MX) существует, домен занят с вероятностью 99%. Однако этот метод пропускает «спящие» домены, которые зарегистрированы, но не делегированы.
Кейс: при проверке списка из 1000 доменов метод WHOIS занял 12 минут и привел к временному бану IP, тогда как DNS-проверка прошла за 15 секунд без блокировок. Вывод: для первичного фильтрации списка используйте DNS, и только для финального подтверждения — WHOIS.
Обход ограничений и лимиты реестра
Реестр .ru (Coordination.ru) жестко лимитирует частоту запросов. Превышение порога в 100-150 запросов в час с одного IP ведет к блокировке на срок от 1 до 24 часов. Чтобы масштабировать скрипт до 10 000+ проверок в сутки, необходимо внедрять ротацию прокси-серверов (HTTP/SOCKS5) или использовать API регистраторов, где стоимость одного запроса в рамках пакета составляет от 0.1 до 2 рублей.
Практика показывает, что задержка (sleep) в 2-3 секунды между запросами позволяет обходить базовые фильтры, но замедляет работу до критического уровня. Мой опыт: оптимально использовать пул из 5-10 чистых IPv4 адресов с интервалом в 5 секунд на каждый поток.
Техническая реализация на PHP: подводные камни
Основная ошибка — отсутствие обработки таймаутов. При использовании `stream_socket_client` без жесткого `timeout` (рекомендую 2-3 секунды), зависший ответ сервера может «повесить» весь PHP-процесс. Также критично использовать регулярные выражения для парсинга ответа WHOIS, так как формат вывода может незначительно меняться в зависимости от сервера реестра.
Для повышения производительности стоит применить Оптимизация готовых PHP-скриптов через внедрение многопоточности (например, через расширение pthreads или запуск нескольких процессов через `exec`), что ускоряет обработку списка в 4-8 раз при наличии многоядерного сервера.
Сравнение стоимости: самописный скрипт vs API
Разработка собственного парсера на PHP занимает около 4-8 рабочих часов программиста (стоимость разработки от 5 000 до 15 000 руб.). Эксплуатация через прокси обходится в 300-700 руб./мес. Использование профессиональных API (например, WhoisXML или локальных регистраторов) стоит от 2 000 до 10 000 руб. в месяц в зависимости от объема.
Сравнение: самописный скрипт на прокси дает экономию в 10-20 раз по деньгам, но требует ручного обновления регулярных выражений при смене формата ответа реестром. Вывод: для разового подбора имени достаточно скрипта, для сервиса мониторинга — только платный API.
Вывод
Для эффективной проверки доменов в зоне .ru выбирайте гибридную схему: первичный отсев через DNS-запросы, затем детальная проверка через WHOIS с ротацией прокси. Избегайте прямого обращения с одного IP при объеме более 50 доменов. Начинайте с реализации простого PHP-скрипта с таймаутами в 3 секунды и обязательно внедряйте логирование ошибок, чтобы отличать «свободный домен» от «ошибки сервера».