Недавний контент nomer8

Наконец-то я смог найти с# код пинга! Спасибо и @gexweb и @Zymlex

Спасибо за шаб! Легко приделал список, прописал тхт файл, и многопоток готов.

Шаблон справился отлично, конечно пришлось чистить от мусора, но это ок. Чисто по субьективным ощущениям: посты с тайтлами сидят в индексе чаще-лучше чем посты без них на моих сплогах. Ещё раз спасибо за отличный шаблон!

Обработка текста -> в переменную -> вставляешь переменную, перед переменной ставишь пробелы, сохраняешь в ту же переменную.

мне в первую очередь для сплогов, где будет спиненый контент, а не для дорвеев и трафа. Задача: максимум очеловечить текст под гугл, что б из индекса не выплёвывал веб20льки. Для этого собирался заюзать эти тайтлы, и внутри ещё проставлять h* человеческие. Поэтому сильно сомневаюсь что мой опыт...

чистил функцией зенки "удалить дубли". Где-то читал что зенка плохо работает со списками больше 1кк стандартными экшонами. Возможно это. Возможно вторая страница была с уникальным урлом но редиректом на первую которая уже есть в базе. Не критично, уже хорошо. Всё понятно, спасибо ещё раз!

Ого, такой быстрый ответ, я почему-то думал что ответ прийдётся ждать неделю. В любом случае, спасибки. Единственная ошибка которая есть в логе: Спасибо, чёт поленился сначала разбиратся и запускал с расчётом что всё само пойдёт. Судя по логике шаблона, он сначала все урлы загоняет в базу, и...

Не могу понять что я сделал не так. Добавил 200к урлов с 1.2к доменов. Некоторые могли быть мёртвыми, да, но не все же. Проблема как у @Astraport - пусто в аутпуте. Делал так же - отключил фильтрацию и запустил, оставил на выходные в 50 потоков. В самой базе тоже тайтлов нет. база...

Чем тебя xenu не устраивает? Он находит всё что только можно найти. Ещё для этого можно скриминг фрог или нетпик чекер юзать.

https://stackoverflow.com/questions/754307/regex-to-replace-characters-that-windows-doesnt-accept-in-a-filename Регулярка [\\/:*?\"<>|] вроде подходит

Как очистить переменную от лишних символов для создания папки в Windows? У меня название переменной используется для того что бы записывать с таким же названием папку и файлы в ней, но попадаются запрещённые символы либо неправильное окончание как например ...