本人正在学习爬虫高阶操作,但是遇到一些问题,比如在http://tariffdata.wto.org/default.aspx中,我们输入一段商品代码(例如330741)可以查询到hxr中提交了一个post表单信息(如下图所示),其中_viewstate值不断变化(每次查询某商品代码或点击“clear”之后该值都会发生变化)
而在代码表单赋值时,无法知晓_viewstate值,服务器将不会返回数据。但该值是有前端生成的,各位大佬有解决办法吗?
(_viewstate无法绕过、无法赋空值,也无法通过网页源代码中的viewstate直接赋值给爬虫)导致无法批量对数据进行爬取