Я хочу сканировать данные из Интернета, я использую HtmlWeb, HtmlDocument из HtmlAgilityPack (c#)
, но я получаю только сообщение «включить JavaScript и файлы cookie для продолжения» из загруженных данных. p>
ссылка: https://www.kqxs.vn/mien-nam
мой сервер (winserver 2019) может открыть ссылку в любом другом браузере (Edge, Chrome, Firefox...), мой ноутбук (Windown 11) может использовать код и загружать данные по ссылке, код, который я публикую выше, может загружать любую другую ссылку. это означает, что моя проблема в том, что я не могу загрузить данные с помощью HtmlAgilityPack на winserver 2019 только для ссылки, я пытался получить весь html, но есть только сообщение «включить javascript и файлы cookie для продолжения»
HtmlWeb web = new HtmlWeb();
//HtmlDocument doc = web.Load("https://www.kqxs.vn/mien-nam");
HtmlDocument doc = web.Load("https://xosodaiphat.com/xsmn-thu-7.html");
Thread.Sleep(500);
doc.OptionFixNestedTags = true;
var elements = doc.DocumentNode.SelectNodes($"//span")?.ToArray();
int line = 0;
for (int i = 0; i < (18 * max); i++)
{
var content = elements.InnerText.Replace(" ", string.Empty).Replace(".", string.Empty);
}
Подробнее здесь: https://stackoverflow.com/questions/790 ... -when-craw
Почему я получаю сообщение «Включить JavaScript и файлы cookie для продолжения» при сканировании с помощью HtmlAgilityPa ⇐ C#
Место общения программистов C#
1727141797
Anonymous
Я хочу сканировать данные из Интернета, я использую HtmlWeb, HtmlDocument из HtmlAgilityPack (c#)
, но я получаю только сообщение «включить JavaScript и файлы cookie для продолжения» из загруженных данных. p>
ссылка: https://www.kqxs.vn/mien-nam
мой сервер (winserver 2019) может открыть ссылку в любом другом браузере (Edge, Chrome, Firefox...), мой ноутбук (Windown 11) может использовать код и загружать данные по ссылке, код, который я публикую выше, может загружать любую другую ссылку. это означает, что моя проблема в том, что я не могу загрузить данные с помощью HtmlAgilityPack на winserver 2019 только для ссылки, я пытался получить весь html, но есть только сообщение «включить javascript и файлы cookie для продолжения»
HtmlWeb web = new HtmlWeb();
//HtmlDocument doc = web.Load("https://www.kqxs.vn/mien-nam");
HtmlDocument doc = web.Load("https://xosodaiphat.com/xsmn-thu-7.html");
Thread.Sleep(500);
doc.OptionFixNestedTags = true;
var elements = doc.DocumentNode.SelectNodes($"//span")?.ToArray();
int line = 0;
for (int i = 0; i < (18 * max); i++)
{
var content = elements[i].InnerText.Replace(" ", string.Empty).Replace(".", string.Empty);
}
Подробнее здесь: [url]https://stackoverflow.com/questions/79014022/why-do-i-receive-a-enable-javascript-and-cookies-to-continue-message-when-craw[/url]
Ответить
1 сообщение
• Страница 1 из 1
Перейти
- Кемерово-IT
- ↳ Javascript
- ↳ C#
- ↳ JAVA
- ↳ Elasticsearch aggregation
- ↳ Python
- ↳ Php
- ↳ Android
- ↳ Html
- ↳ Jquery
- ↳ C++
- ↳ IOS
- ↳ CSS
- ↳ Excel
- ↳ Linux
- ↳ Apache
- ↳ MySql
- Детский мир
- Для души
- ↳ Музыкальные инструменты даром
- ↳ Печатная продукция даром
- Внешняя красота и здоровье
- ↳ Одежда и обувь для взрослых даром
- ↳ Товары для здоровья
- ↳ Физкультура и спорт
- Техника - даром!
- ↳ Автомобилистам
- ↳ Компьютерная техника
- ↳ Плиты: газовые и электрические
- ↳ Холодильники
- ↳ Стиральные машины
- ↳ Телевизоры
- ↳ Телефоны, смартфоны, плашеты
- ↳ Швейные машинки
- ↳ Прочая электроника и техника
- ↳ Фототехника
- Ремонт и интерьер
- ↳ Стройматериалы, инструмент
- ↳ Мебель и предметы интерьера даром
- ↳ Cантехника
- Другие темы
- ↳ Разное даром
- ↳ Давай меняться!
- ↳ Отдам\возьму за копеечку
- ↳ Работа и подработка в Кемерове
- ↳ Давай с тобой поговорим...
Мобильная версия