404

  1. Lord_Alfred

    Как прочитать первые N байт HTTP HEAD запроса с использованием Proxy? Быстрая проверка на 404 error

    Быть может, кто-то уже реализовывал похожий функционал для задачи быстрой проверки на 404 ошибку огромного списка URL'ов? По сути, нужно только получить первые 11-14 байт от сервера и закрыть соединение (этого должно быть достаточно чтоб получить первую строку с кодом ответа). Получать целиком...
  2. footashes

    Удаление 404 ошибок через Яндекс.Вебмастер

    Предистория. Мой сайт проксировали и вывели через IP на чужом домене, заметил только через месяц. Заблокировал IP в роботсе, чужой сайт начал отдавать ошибку 404, но в индекс успело попасть около 5 000 мусорных страниц. Ждал несколько месяцев, пока Яндекс их выкинет, но с каждым месяцем их...