Возможно ли реализовать? спарсить код с такой страницы ...

[stu_dent]

Всем доброго времени суток! Вопрос вот в чём: ...возможно ли спарсить код с такой страницы (view-source:https://*********.com/login) ? именно
(view-source:) ! Если да ,то как это реализовать? Заранее всем спасибо

[Пепел Феникса]

view-source это просто отображение того что дает адрес после :
тоесть view-source:http://programmersforum.ru/showthread.php?p=1587198
даст исходный код страницы http://programmersforum.ru/showthread.php?p=1587198

вам нужно просто сделать GET запрос на нее.

[stu_dent]

Сообщение от Пепел Феникса

view-source это просто отображение того что дает адрес после :
тоесть view-source:http://programmersforum.ru/showthread.php?p=1587198
даст исходный код страницы http://programmersforum.ru/showthread.php?p=1587198

вам нужно просто сделать GET запрос на нее.

Спасибо, ...да ,я так и делаю ,но там есть скрытые поля и при парсинге они не попадают в результат ( Вообщем при открытии кода страницы - их видно ,включая их содержание ,а вот при парсинге их нет на результате =( Пожалуй лучше объяснить по другому ,вообщем на сайте есть есть скрытый текст - как его получить ,возможно ли спарсить ,есть какой-то способ ?

[p51x]

Значит не правильно парсите. При парсинге доступны все поля, возможно прийдется повозится если они создаются динамически javascript

[Пепел Феникса]

если вы их видите в view-source должны и так.

[stu_dent]

Вообщем ,для входа на сайт используется спец. код ,расположен он в форме входа ,но скрыт. При открытии кода страницы - он виден ,но при парсинге страницы входа - его нет. Как - же его добыть? Не могу понять ,помогите плиз =( Вот страница входа : http://www.bkcapper.ru/node
А вот форма с кодом :

[Alex11223]

Чего нет? Код свой покажите.

[stu_dent]

в спарсеном коде страницы - нет этого кода для входа на сайт.
Для парсинга использую код:

PHP код:

private void button1_Click(object sender, EventArgs e)
        {
            HttpWebRequest req;
            HttpWebResponse resp;
            StreamReader sr;
            string content;

            req = (HttpWebRequest)WebRequest.Create("http://www.bkcapper.ru/node");
            resp = (HttpWebResponse)req.GetResponse();
            sr = new StreamReader(resp.GetResponseStream(), Encoding.GetEncoding("windows-1251"));
            content = sr.ReadToEnd();
            sr.Close();


            textBox1.Text = content;
        } 


[stu_dent]

сорри - код найден ,понимаю в чём дело =) Другой вопрос - если в адресной строке ,перечёркнут замок и https - что это значит? И опять же ,то что код найден ,не снимает вопроса ,как спарсить ? Дело в том ,что этот сайт ,лишь пример того ,что там в форме входа есть код для авторизации ,я использую другой сайт ,там в адресной строке ,как раз перечёркнуты замок и https красной чертой ,Возможно ли спарсить такую страницу всю целиком ,или из-за зачёркнутого замка и https - это не возможно? Думаю понятно всё объяснил ) Заранее Спасибо!

[Alex11223]

Словом "парсинг" обычно называют процесс разбора данных (HTML кода страницы например) для получения оттуда нужной информации.

Для парсинга HTML есть много библиотек. Например HtmlAgilityPack (с помощью языка запросов XPath).


Ну HttpWebRequest вроде и с https умеет работать без проблем.

Только нет смысла показывать не тот сайт который вам нужен, мало ли что там на другом, может JavaScript'ом часть данных генерируется.

И еще вы куки не сохраняете/не отправляете, смотрите CookieContainer.

перечёркнуты замок

Видимо что-то не так с https сертификатом сайта.