Проверка на наличие строки в Excell

Kazza

Client
Регистрация
17.09.2015
Сообщения
78
Благодарностей
5
Баллы
8
Здравствуйте, подскажите пожалуйста самый быстрый способ проверки на наличие строки в Excell?
Пишу парсер, сохраняю всё в Excell, но не могу понять как быть с дублями? Как продолжить парсить с последней остановки?
Если файл большой(50 000 строк), как можно быстро проверять?
Подскажите пожалуйста, в какую сторону копать?
 

Sergodjan

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
19 469
Благодарностей
8 691
Баллы
113
Здравствуйте, подскажите пожалуйста самый быстрый способ проверки на наличие строки в Excell?
Пишу парсер, сохраняю всё в Excell, но не могу понять как быть с дублями? Как продолжить парсить с последней остановки?
Если файл большой(50 000 строк), как можно быстро проверять?
Подскажите пожалуйста, в какую сторону копать?
Дубли можно удалить так:

upload_2018-9-12_15-31-39.png


Насчет продолжения парсинга, новые данные просто будут дописываться в конец таблицы,
в новых пустых строках.
 
  • Спасибо
Реакции: Kazza

Kazza

Client
Регистрация
17.09.2015
Сообщения
78
Благодарностей
5
Баллы
8
Дубли можно удалить так:

Посмотреть вложение 31887

Насчет продолжения парсинга, новые данные просто будут дописываться в конец таблицы,
в новых пустых строках.
Спасибо большое за ответ.
Может подскажите как быть с парсингом? Пасринг сайта, допустим я всё спарсил сегодня, завтра были добавлены новые темы, как спарсить только новые, которых нет в базе ещё.)
 

romanov

Client
Регистрация
14.05.2016
Сообщения
57
Благодарностей
3
Баллы
8
Спасибо большое за ответ.
Может подскажите как быть с парсингом? Пасринг сайта, допустим я всё спарсил сегодня, завтра были добавлены новые темы, как спарсить только новые, которых нет в базе ещё.)
При добавлении в таблицу, проверять наличие этого элемента.
 

Sergodjan

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
19 469
Благодарностей
8 691
Баллы
113
Спасибо большое за ответ.
Может подскажите как быть с парсингом? Пасринг сайта, допустим я всё спарсил сегодня, завтра были добавлены новые темы, как спарсить только новые, которых нет в базе ещё.)
Можно таким образом:
upload_2018-9-12_18-47-55.png
 

Вложения

Последнее редактирование:
  • Спасибо
Реакции: Kazza

Kazza

Client
Регистрация
17.09.2015
Сообщения
78
Благодарностей
5
Баллы
8
  • Спасибо
Реакции: Sergodjan

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)