最近爬取网站遇到的一些难题总结出来;GET与POST;form data与json;表单数据与请求载荷;Python爬取知识
发布时间
阅读量:
阅读量
关于验证码的问题,相对来说比较简单,将获取到的验证码图片存储在本地设备中,由人工操作完成的肉眼看懂并输入验证信息即可。
POST和GET,这是HTTP协议中向网站发送请求的两种方法,
每个网站使用的功能可能有所不同,并且即使是同一个网站的不同网页也可能采用不同的功能。
HTTP GET方法最为简便,
因为它能够将所需的数据显示于响应头部分,
因此只需要一条响应头就可以轻松实现状态码200返回指定资源。
然而,在使用POST方法时会遇到一定的挑战。由于其数据参数并未直接嵌入URL中,因此操作相对隐晦,通常需要通过浏览器的开发者工具(F12)进入调试模式,并查看后台请求中的各个参数数据以确认是否正确提交.

找到要查找的网页,看它用的是POST还是GET.
当采用POST方法时,还需分析其提交的数据类型,就目前而言,观察到的是FormData数据和JSON格式两种情况;其中FormData的翻译结果即为表单数据

还没有任何评论哟~
