Парсер вики и импорт в бд

Wide

Client
Регистрация
04.02.2013
Сообщения
944
Благодарностей
253
Баллы
63
Сам движок здесь Нужно спарсить все статьи в пределах одного поддомена. Остальное в лс. Здесь не чего обсуждать.
 

bashka

Client
Регистрация
13.06.2017
Сообщения
183
Благодарностей
130
Баллы
43

Wide

Client
Регистрация
04.02.2013
Сообщения
944
Благодарностей
253
Баллы
63
Какой под домен? fr.wiki или de.wiki? Вы представляете себе сколько весит одна такая база?
Поддомен в посте. Да представляю, медия +80 гб, бд меньше будет, но утверждать не буду, будет ясно только после наполнения.
 

Roman48

Client
Регистрация
28.02.2016
Сообщения
2 058
Благодарностей
742
Баллы
113
Поддомен в посте. Да представляю, медия +80 гб, бд меньше будет, но утверждать не буду, будет ясно только после наполнения.
80гб бывает с 10 тысячами новостями на сайте.На этом движке нет базы данных, там все в файлах храниться.
 

Wide

Client
Регистрация
04.02.2013
Сообщения
944
Благодарностей
253
Баллы
63
80гб бывает с 10 тысячами новостями на сайте.На этом движке нет базы данных, там все в файлах храниться.
Пзд... рука лицо, ты хоть ссылку что ли бы открыл, прежде чем утверждать) Тема для предложений а не обсуждений...
 

Wide

Client
Регистрация
04.02.2013
Сообщения
944
Благодарностей
253
Баллы
63
Актуально...
 

Wide

Client
Регистрация
04.02.2013
Сообщения
944
Благодарностей
253
Баллы
63
Парсим ссылки со старт страницы. Скачиваем движок, разбираемся со связями. Добавляем в бд статью с разметкой, шаблоны из статьи, категории. Скачиваем медиа. Получаем 15К.
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)