C# переход на страницу и взять source

ooops сказал(а):

Благодарю
А без использования браузера не получить source ?)

Нажмите, чтобы раскрыть...

List<string> list = new List<string>();

var resultHttpGet = ZennoPoster.HttpGet("https://www.yandex.ru/", instance.GetProxy(), "UTF-8", ZennoLab.InterfacesLibrary.Enums.Http.ResponceType.BodyOnly,30000,"","",true,1,new string[] {""},"");
if (String.IsNullOrEmpty(resultHttpGet))
    throw new Exception("не смогли загрузить страницу");

var matches = Regex.Matches(resultHttpGet,@"[\wа-я]+").Cast<Match>().Select(match => match.Value).ToList();;
return string.Join("\r\n",matches);

CSS сказал(а):

C#:

List<string> list = new List<string>();

var resultHttpGet = ZennoPoster.HttpGet("https://www.yandex.ru/", instance.GetProxy(), "UTF-8", ZennoLab.InterfacesLibrary.Enums.Http.ResponceType.BodyOnly,30000,"","",true,1,new string[] {""},"");
if (String.IsNullOrEmpty(resultHttpGet))
    throw new Exception("не смогли загрузить страницу");

var matches = Regex.Matches(resultHttpGet,@"[\wа-я]+").Cast<Match>().Select(match => match.Value).ToList();;
return string.Join("\r\n",matches);

Нажмите, чтобы раскрыть...

serg1208 сказал(а):

а как взять DOM просто в переменную без загрузки страницы ?

Спасибо

Нажмите, чтобы раскрыть...

string pageSource = instance.ActiveTab.GetSourceText("UTF-8"); // Page.Source
 
string pageDom = instance.ActiveTab.DomText; // Page.Dom
 
string pageText = instance.ActiveTab.PageText; // Page.Text

Zennonub сказал(а):

C#:

string pageSource = instance.ActiveTab.GetSourceText("UTF-8"); // Page.Source

string pageDom = instance.ActiveTab.DomText; // Page.Dom

string pageText = instance.ActiveTab.PageText; // Page.Text

​

Нажмите, чтобы раскрыть...

Zennonub сказал(а):

C#:

string pageSource = instance.ActiveTab.GetSourceText("UTF-8"); // Page.Source

string pageDom = instance.ActiveTab.DomText; // Page.Dom

string pageText = instance.ActiveTab.PageText; // Page.Text

​

Нажмите, чтобы раскрыть...

serg1208 сказал(а):

Но разве это не для уже загруженной страницы в инстанс ?

Нажмите, чтобы раскрыть...

serg1208 сказал(а):

а как взять DOM просто в переменную без загрузки страницы ?

Спасибо

Нажмите, чтобы раскрыть...

black_pariah сказал(а):

DOM без браузера не взять, можно собрать его(но это морока не стоит того), так как это модель страницы со скриптами и всем тем, что гет запрос отдать не может, можно взять source.

Нажмите, чтобы раскрыть...

Denomm сказал(а):

Мне кажется, если последовательно выполнять правильные запросы, то можно вернуть все что надо.

Нажмите, чтобы раскрыть...

CSS сказал(а):

C#:

List<string> list = new List<string>();
instance.ActiveTab.Navigate("https://www.yandex.ru/","");
instance.ActiveTab.WaitDownloading();
string src = instance.ActiveTab.GetSourceText("UTF-8");
var matches = Regex.Matches(src,@"[\wа-я]+").Cast<Match>().Select(match => match.Value).ToList();;
return string.Join("\r\n",matches);

Нажмите, чтобы раскрыть...

twisterrr сказал(а):

подскажите плз как правильно вписать регулярку (?<=publishers"><p>).*(?=</p>) в этот код

Нажмите, чтобы раскрыть...

List<string> list = new List<string>();
instance.ActiveTab.Navigate("https://www.yandex.ru/","");
instance.ActiveTab.WaitDownloading();
string src = instance.ActiveTab.GetSourceText("UTF-8");
var matches = Regex.Matches(src,@"(?<=publishers""><p>).*(?=</p>)").Cast<Match>().Select(match => match.Value).ToList();
return string.Join("\r\n",matches);

Sorrow сказал(а):

Подскажите пожалуйста, как этот кубик переписать в C# код? Выше объясняли как взять DOM и регулярку в нем, а как взять определенный селектор не понятно, помогите кто знает.

Нажмите, чтобы раскрыть...

Sorrow сказал(а):

Подскажите пожалуйста, как этот кубик переписать в C# код? Выше объясняли как взять DOM и регулярку в нем, а как взять определенный селектор не понятно, помогите кто знает.

Нажмите, чтобы раскрыть...

instance.ActiveTab.QuerySelector(".serp-item > div h2 > a").GetAttribute("href");

var items = instance.ActiveTab.QuerySelectorAll(".serp-item > div h2 > a");
if (items == null && items.Count == 0) return "count 0";

foreach (var item in items)
    project.Lists["Ссылки"].Add(item.GetAttribute("href"));

Маломальский сказал(а):

1 элемент

CSS Selector:

instance.ActiveTab.QuerySelector(".serp-item > div h2 > a").GetAttribute("href");

Множество элементов

C#:

var items = instance.ActiveTab.QuerySelectorAll(".serp-item > div h2 > a");
if (items == null && items.Count == 0) return "count 0";

var list = new List<string>();
foreach (var item in items)
    list.Add(item.GetAttribute("href"));

File.AppendAllLines(project.Directory + @"\result.txt", list);

Нажмите, чтобы раскрыть...

Sorrow сказал(а):

Спасибо,


Спасибо, а как результат положить в список проекта?

Нажмите, чтобы раскрыть...