keon Junior Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору   При парсинге HTML на Delphi заметил такой косяк, метод GET возвращает не весь HTML: когда искал нужные ноды не смог их найти в дереве DOM, начал исследовать и обнаружил пропажу. Если зайти на сайт и сохранить страницу ручками - разница размера с результатом TIdHTTP - более чем в 2 раза. Мой код:   Код:   function GetWebPage(const url: string): string; const   agent = 'Mozilla/5.0 (iPad; CPU OS 16_6 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/16.5 Mobile/15E148 Safari/604.1'; var   SSL: TIdSSLIOHandlerSocketOpenSSL;   HTTP: TIdHTTP; begin   HTTP := TIdHTTP.Create;   SSL := TIdSSLIOHandlerSocketOpenSSL.Create(nil);   try     SSL.SSLOptions.Method := sslvTLSv1_2;     SSL.SSLOptions.SSLVersions := [sslvTLSv1_2];     HTTP.IOHandler := SSL;     HTTP.HandleRedirects := True;     HTTP.Request.Accept := 'text/html';     HTTP.Request.ContentType := 'text/html';     HTTP.Request.UserAgent := agent;     Result := HTTP.Get(url).Trim;   finally     HTTP.Free;     SSL.Free;   end; end;     Ответ из HTTP.Response:   Код:   ResponseCode: 200 ResponseText: HTTP/1.1 200 OK Server: cloudflare CacheControl: no-cache, no-store, must-revalidate CharSet: utf-8 Connection: keep-alive ContentType: text/html TransferEncoding: chunked GetNamePath: TIdHTTPResponse     Подскажите, может я где допустил ошибку, или подскажите через какой компонент (под Delphi) лучше делать GET запросы.   Всего записей: 164 | Зарегистр. 21-12-2006 | Отправлено: 21:09 05-11-2023

keon Junior Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Mavrikii Цитата: 1) зачем создали новую тему, а не спросили в предыдущей? потому что это разные темы, а не личный чатик   Цитата: 3) нужно сравнивать не размер, а содержимое сравнение по содержимому не возможно, конечная страница генерируется динамически, некоторые блоки меняют свое расположение, появляются пустоты и т.д., страница отличается от предыдущей на считанные килобайты. Например при ручном сохранении в файле 1500+ строк и размер 780к, а если сохранять через GET то размер 380к, но строк под 4к...кароче винегрет   я переписал запрос к странице через THttpClient, не знаю на сколько он лучше работает. но по крайне мере нужные мне теги по ID и CLASS я нахожу, далее практика покажет.   Пока через HttpClient отпала необходимость в SSL библиотеках, картинки также дергает и довольно резво. Всего записей: 164 | Зарегистр. 21-12-2006 | Отправлено: 22:53 05-11-2023

Компьютерный форум Ru.Board » Компьютеры » Прикладное программирование » Неправильно отрабатывает компонент TIdHTTP в Delphi

Переход по форумам  Закладки   » Компьютеры Цифровое изображение Программы Microsoft Windows UNIX Другие OS Hardware В помощь сисадмину Прикладное программирование Игры Форумные игры   » Интернет Web-программирование В помощь вебмастеру Графика Хостинг Зацените-ка!   » Тематические Ikonboard v.2 Ikonboard v.3 Invision Board Другие форумы PHP-Nuke и другие порталы Мобила   » Общие Спорт Флейм Темы по региональным встречам Музыка и Кино Юмор Литература и Живопись   » Ru.Board Новости Помощь по форуму   » Андеграунд eBookz Варезник Раздачи и акции Мобильный варезник Андеграунд Игры и фильмы   » Специальные Тестирование