Как сравнить два ооочень больших списка (на 30 лямов строк)?

[leva001]

Меня давно выручал этот код:

List<string> bad = project.Lists["стоплист"].ToList();//стопслова
List<string> mix = project.Lists["все в куче"].ToList();//потенциальные счастливцы
var good =project.Lists["листсчастья и печенек"];//те, кого будем осчастливливать точно
List<string> kostyl = new List<string>();//важный элемент индусского кода
//блок очень сложного индусского кода
kostyl=mix.Except(bad).ToList();
foreach(string data in kostyl)
{good.Add(data);}

Но сейчас он не работает, потому что сравниваю два списка, в каждом из которых по 30кк строк. Если уменьшить количество строк до около 5кк, то работает. Подскажите, это лимиты зенки или файловой системы? И есть ли варианты как это исправить?

 

[Sergodjan]

Попробуйте увеличить буфер обмена:

 

[traffman]

Вам нужно только с использованием зенки?

 

[leva001]

Попробуйте увеличить буфер обмена:

Посмотреть вложение 54411

Помогло! Спасибо)

 

[leva001]

Вам нужно только с использованием зенки?

Не обязательно. Еще есть какие-то варианты?

 

[traffman]

Вот есть софтинка, нагуглите как пользоваться. Если вкратце то в верхнее поле искомые данные, в нижнее блек лист, Гоу и имеем файл Оутпут.txt c необходимо разницей. Работает молниеносно.

 

[Senior Pomidor]

Меня давно выручал этот код

Данный код делает добавление в список построчно, что на больших списках сказывается на быстродействии.

Попробуйте сравнить на ваших объемах таким способом.