Проблема с получение iframe при парсинге сайта на ASP.NET

Question

Необходимо получать автоматом список запчастей с сайта epc.brp.com. Сайт написан на ASP.NET

Не получается подгрузить исходник из iframe все время редиректит на основную страницу. Уже продублировал почти полностью запрос как в Chrome в мониторе.

Запрос хрома:

General    
    Request URL: http://epc.brp.com/AssemblyTree.aspx?dealerid=&displayCatalog=20&s1=2e561b1c-a567-47bd-aabb-d6c94644d3ae&=&lang=E&siteid=1
    Request Method: GET
    Status Code: 200 OK
    Remote Address: 12.2.215.60:80
    Referrer Policy: strict-origin-when-cross-origin
Responce header
    Cache-Control: private
    Content-Encoding: gzip
    Content-Type: text/html; charset=utf-8
    Date: Tue, 30 Mar 2021 13:47:23 GMT
    Server: Microsoft-IIS/6.0
    Transfer-Encoding: chunked
    Vary: Accept-Encoding
    X-AspNet-Version: 2.0.50727
    X-Powered-By: ASP.NET
Request header
    Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9
    Accept-Encoding: gzip, deflate
    Accept-Language: ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7
    Connection: keep-alive
    Cookie: .BRP_PUBLICAuth=0FC74DD4B1158BE6FA17E6C61F7073AA1BD145F8364B21A574AE3A01AD3B02EC5529BA40178871A0D118DA4CFBD57147A42EF14C132132203A2813EB0BDF095BEA1066FCDC51A0667BB0AB2CD4AF1AD5FD17D7174FC5A2C108F2B309F0FF9518BA6F60010C73370D625C9EDE597B89D49CEA1CB75DC8048D62528B9A25577112521C7EA524B83BDC4A0A3F3764DA1749BB8FD4359F99E6E18FE17CCDC511DD7685FA7B9A
    Host: epc.brp.com
    Referer: http://epc.brp.com/Index.aspx?lang=E&s1=2e561b1c-a567-47bd-aabb-d6c94644d3ae&brands=atv
    Upgrade-Insecure-Requests: 1
    User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36

полностью продублировал на PHP и CURL

*   Trying 12.2.215.60:80...
* TCP_NODELAY set
* Connected to epc.brp.com (12.2.215.60) port 80 (#0)
> GET /AssemblyTree.aspx?dealerid=&amp;displayCatalog=20&amp;s1=d306ede9-b590-4f98-8ba7-2bc80ed2a2ba&amp;=&amp;lang=E&amp;siteid=1 HTTP/1.1
Host: epc.brp.com
User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36
Accept-Encoding: gzip,deflate
Cookie: .BRP_PUBLICAuth=9B7F3F985C05C916766B2BF1F3BE8CDB129B30CF6DAF77782EEE0D628AAEC3DFCD65B51B0D3DF78E6F35EC97A2C6FC396F7126F2F3A5AB0A2969837042CE6CF4F2FF73ECA692C3F3F57A4A95F6F7F15A70CEDDFA8E61BA250E560C585F767A66837D46321B630A3CAA993E37E322DD324E13ADFCEDF2012492282365B70825FAFF096757A2C09E09899F1E6A8A5BF4A5972BA8AD7B973D54451498C660D566ECA22D0E9C
Referer: http://epc.brp.com/Index.aspx?lang=E&s1=d306ede9-b590-4f98-8ba7-2bc80ed2a2ba&brands=atv
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9
Connection: keep-alive
Upgrade-Insecure-Requests: 1
Accept-Language: ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7

Ну за исключение динамических кук и какого-то ключа s1 и все равно получаю редирект(

Кто может подсказать что не так?

Спасибо

Кажется сам разглядел свой косяк и разобрался в проблеме. Не знаю как удалить вопрос(

БЛОГ НА HUSL

Проблема с получение iframe при парсинге сайта на ASP.NET

Ответы (0 шт):