Я создаю парсер, который должен удалять некоторый веб-контент. Я столкнулся с проблемой, на странице, которую мне нужно сканировать, есть множество сценариев java, и кажется, что вызовы сценариев java устанавливают некоторые файлы cookie и некоторые параметры строки запроса для следующих запросов.

Я могу устанавливать файлы cookie, отправляя запросы к файлам js, но, похоже, параметры строки запроса генерируются некоторыми закодированными вызовами javascript.

Я не могу их расшифровать, я пытался поискать в Google инструменты для компиляции JS на C #, но тщетно. Если кто-то уже решал аналогичные проблемы ранее, прольите немного света на то, как я могу скомпилировать файл javascript, например браузер, и напрямую сгенерировать html из моего кода C #.

Любая помощь будет принята с благодарностью.

c# javascript web-crawler
1
Sumit Ghosh 8 Авг 2010 в 11:32

2 ответа

Лучший ответ

Почему бы не использовать веб-прокси, например fiddler, чтобы узнать, какие заголовки и файлы cookie настроены, и использовать эти данные непосредственно в твой C #?

Таким образом, вам не нужно будет выполнять JS только для определения заголовков и файлов cookie.

Обновление:

Вы также можете использовать пакет веб-автоматизации, такой как WatiN для сканирования сайта - я считаю, что он уже поддерживает JS, так что вам не нужно делать намного больше.

Обновление2:

Поскольку WatiN не подходит для ваших требований, возможно, его компиляция напрямую с использованием компилятора javascript в .NET будет возможна - см. JScript.NET , хотя я сомневаюсь, что в результате будут какие-либо манипуляции с DOM.

4
Oded 8 Авг 2010 в 21:14

Это может быть сложнее, чем вы думаете. Взгляните на эти две темы:

Любой движок Javascript для .NET / C #?

Встраивание движка JavaScript в .NET

1
Community 23 Май 2017 в 11:48

Похожие вопросы

30 Как я могу проверить наличие пустой / неопределенной / нулевой строки в JavaScript?
30 Как я могу изменить класс элемента с помощью JavaScript?
23 Получить выбранное значение в раскрывающемся списке с помощью JavaScript
25 Pretty-Print JSON с использованием JavaScript
30 Есть ли стандартная функция для проверки нулевых, неопределенных или пустых переменных в JavaScript?
💵 Получи $100 на хостинг на 60 дней.
Регистрируйся!

Новые вопросы

5 Случайная дата и время C# за последнюю неделю
1 Ярлык для и/или оценки
1 Как внедрить объект репозитория в мою доменную сущность/модель?
3 Как проверить, установлен ли динамический флажок
1 С# linq, как получить все первые элементы вложенного динамического списка?
2 Перенаправление на HTTPS в web. Конфигурация
3 Можно ли вызвать `Func`, как если бы он был универсальным в С#
2 Как прочитать несколько элементов узла из данных xml в С#
3 Тело запроса HTTP POST не привязывается к ASP .NET MVC
2 Создавать экземпляры с разными классами?
Все вопросы по теме c# >

c#

C # (произносится как «резкий») - это высокоуровневый, статически типизированный язык программирования с несколькими парадигмами, разработанный Microsoft. Код C # обычно нацелен на семейство инструментов и сред выполнения Microsoft .NET, включая, среди прочего, .NET Framework, .NET Core и Xamarin. Используйте этот тег для вопросов о коде, написанном на C # или в формальной спецификации C #.

Подробнее про c#...