程序问答   发布时间:2022-06-02  发布网站:大佬教程  code.js-code.com
大佬教程收集整理的这篇文章主要介绍了问题 Web 抓取 Python ASPX 特定请求大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。

如何解决问题 Web 抓取 Python ASPX 特定请求?

开发过程中遇到问题 Web 抓取 Python ASPX 特定请求的问题如何解决?下面主要结合日常开发的经验,给出你关于问题 Web 抓取 Python ASPX 特定请求的解决方法建议,希望对你解决问题 Web 抓取 Python ASPX 特定请求有所启发或帮助;

我正在尝试抓取当地超市中产品的特定数据。 该网站是https://www.veadigital.com.ar/Comprar/Home.aspx#_atCategory=false&_atGrilla=true&_id=446266 但是,我成功通过网站获取请求,但我的问题是设置了超市的特定城市。默认城市是首都联邦。我检测到分析 cookie ID_local 如何与超市城市的数量有关,但我设置了一个特定的城市,例如Bahía Blanca,但它没有用。

如果我是手动用户,我可以在“tu ubicacion”窗口(图片中的黑色圆圈)中单击更改位置。

图片网页:

问题 Web 抓取 Python ASPX 特定请求

我正在使用来自 python 的请求库。就像 aspx 会话一样,我从主网站获得了 aspx 编号会话。

有什么想法吗?非常感谢,如果我的代码效率很低,请见谅。

我的代码

import re
import Json
import requests

ID_local="9122" #bahia blanca city

s = requests.Session() #because is aspx I used a Session

a=s.get("https://www.veadigital.com.ar/Login/PreHome.aspx")

response_header=Dict(a.headers) #get reponse header

match = re.search('\w{16,}',responde_header['Set-cookie'])

ID_session=str(match[0]) #aspx ID session

payload= {'IDMenu':446266,'textoBusqueda':"",'producto':"",'marca':"",'pager':"",'ordenamIEnto':'0','precioDesde':"",'precioHasta':""} 

head= {'Content-Type': 'application/Json; charset=utf-8','cache-control': 'no-cache,max-age=0','X-requested-With': 'XMLhttprequest','Origin': 'https://www.veadigital.com.ar','Connection': 'keep-alive','Referer': 'https://www.veadigital.com.ar/Login/PreHome.aspx','cookie': 'ShopperCatch-d3d3LnZlYWRpZ2l0YWwuY29tLmFy-siteSALEChAnnelObjectType=variable; ShopperCatch-d3d3LnZlYWRpZ2l0YWwuY29tLmFy-siteSALEChAnnelObjectname=cc; ShopperCatch-d3d3LnZlYWRpZ2l0YWwuY29tLmFy-customcatSS=https://console.shoppercatch.com/resources/clIEnt/veaar/custom-veaar.CSS; ShopperCatch-d3d3LnZlYWRpZ2l0YWwuY29tLmFy-customJs=https://console.shoppercatch.com/resources/clIEnt/veaar/custom-veaar.Js; ShopperCatch-d3d3LnZlYWRpZ2l0YWwuY29tLmFy-customerUUID=b9c21c00-5edb-4ea7-81f2-0f44ce72d101; ASP.NET_SessionID='+ ID_session + '; _gcl_au=1.1.1495116074.1616988170; _ga=GA1.3.1661999592.1616988176; _gID=GA1.3.1399531855.1616988176; _fbp=fb.2.1616988183823.774437577; _hjTLDTest=1; _hjID=4511e7e8-1d7c-4198-89e7-5427dd72d2c7; _IDx={"IDx":"Sh3e14Klws84FAtqZmie6EIvIhdx16Jp5KX9lSuVOdzH2LC8cbAblS5TOkmiiN8FwaPsFlf1MyIITfZLRQnrn26Wz2uGtU12qxOuwX0fa4w=001ZJR9FP","t":"2021-03-29T03:43:54.022Z"}; _IDxe=[{"ID":"Sh3e14Klws84FAtqZmie6EIvIhdx16Jp5KX9lSuVOdzH2LC8cbAblS5TOkmiiN8FwaPsFlf1MyIITfZLRQnrn26Wz2uGtU12qxOuwX0fa4w=001ZJR9FP","type":7,"w":0.3,"t":"2021-03-29T03:43:50.482627022Z"},{"ID":"HE7f1YOgx89uRwxqmdsKvUV9iBMgi6Rr4/inkynGbtzBg7TvceZPkyEPOEn50YpRl6e+ElfwMCFdHKscQF6/y9omuZneRYQd+bwfXbDW8ww=001ZJR9FP","type":8,"w":0.25,"t":"2021-03-29T03:43:50.482627349Z"},{"ID":"HByE1dbzxZ5jFVpvMWDU6xUvdRB21KVo5fjwk3iRad6Wi7fuKuNLkysPPU/0394Clfa4EwfzY3AKHvoeFQu8mS8KnAicFUGaSxpuZdX52Rg=001ZJR9FP","type":9,"w":0.225,"t":"2021-03-29T03:43:50.482627818Z"}]; latitud=null; longitud=null; nolocalizar=true; IDLocalMasCercano=null; IDLocalElegIDoUsuario=' + ID_local + '; _gat_UA-2998448-15=1; _gat_UA-2998448-6=1; _gat_UA-107982627-14=1'}


req=s.post("https://www.veadigital.com.ar/Comprar/Homeservice.aspx/ObtenerArticulosPorDescripcionmarcaFamiliaLevex",headers=head,data=Json.dumps(payload),verify=falsE)

products= req.text # I get the prices and products but I receive data from CAPItal Federal city
print(products)

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)

大佬总结

以上是大佬教程为你收集整理的问题 Web 抓取 Python ASPX 特定请求全部内容,希望文章能够帮你解决问题 Web 抓取 Python ASPX 特定请求所遇到的程序开发问题。

如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。