Форум по Delphi программированию

Delphi Sources



Вернуться   Форум по Delphi программированию > Все о Delphi > Интернет и сети
Ник
Пароль
Регистрация <<         Правила форума         >> FAQ Пользователи Календарь Поиск Сообщения за сегодня Все разделы прочитаны

Ответ
 
Опции темы Поиск в этой теме Опции просмотра
  #1  
Старый 28.01.2021, 12:55
softa softa вне форума
Прохожий
 
Регистрация: 28.01.2021
Сообщения: 2
Версия Delphi: Delphi 10.4
Репутация: 10
По умолчанию Парсинг ДомКлик

Здравствуйте. Для парсинга ДомКлик использую IdHTTP. Код:

Код:
   url:='https://kurgan.domclick.ru/search?deal_type=sale&category=living&offer_type=flat';
   Inter :=  TIdConnectionIntercept.Create;
   ht := TidHTTP.Create;
   SSL :=  TIdSSLIOHandlerSocketOpenSSL.Create(ht);
   SSL.SSLOptions.Method := sslvTLSv1_2;
   ht.Intercept := Inter;
   ht.IOHandler := SSL;
   ht.HandleRedirects := true;
    ht.Get(url,stream);

Но выдает 401 ошибку, хотя страница-то обычная, не авторизация. Я уже и dll-ки для ssl менял, и SSL.SSLOptions.Method менял.
Ответить с цитированием
  #2  
Старый 28.01.2021, 23:19
Аватар для Admin
Admin Admin вне форума
Администратор
 
Регистрация: 03.10.2005
Адрес: Россия, Москва
Сообщения: 1,560
Версия Delphi: Delphi 7
Репутация: выкл
По умолчанию

Цитата:
Сообщение от softa
Здравствуйте. Для парсинга ДомКлик использую IdHTTP. Код:

Код:
   url:='https://kurgan.domclick.ru/search?deal_type=sale&category=living&offer_type=flat';
   Inter :=  TIdConnectionIntercept.Create;
   ht := TidHTTP.Create;
   SSL :=  TIdSSLIOHandlerSocketOpenSSL.Create(ht);
   SSL.SSLOptions.Method := sslvTLSv1_2;
   ht.Intercept := Inter;
   ht.IOHandler := SSL;
   ht.HandleRedirects := true;
    ht.Get(url,stream);

Но выдает 401 ошибку, хотя страница-то обычная, не авторизация. Я уже и dll-ки для ssl менял, и SSL.SSLOptions.Method менял.
Нужно посмотреть чего ему не хватает.
Скорее всего идет проверка на наличие реферера, куки, юзер-агент.
Ответить с цитированием
Ответ


Delphi Sources

Опции темы Поиск в этой теме
Поиск в этой теме:

Расширенный поиск
Опции просмотра
Комбинированный вид Комбинированный вид

Ваши права в разделе
Вы не можете создавать темы
Вы не можете отвечать на сообщения
Вы не можете прикреплять файлы
Вы не можете редактировать сообщения

BB-коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.
Быстрый переход


Часовой пояс GMT +3, время: 13:12.


 

Сайт

Форум

FAQ

RSS лента

Прочее

 

Copyright © Форум "Delphi Sources" by BrokenByte Software, 2004-2023

ВКонтакте   Facebook   Twitter