小程序
小游戏
企业微信
微信支付
扫描小程序码分享
在7月2日发现,微信爬虫的请求头 Content-type 变成了 application/x-www-form-urlencoded; boundary=------------------------21cecef60adb4e47
之前应该一直是application/x-www-form-urlencoded;
导致服务端在获取参数的时候出错了,而返回了错误的结果,导致爬虫获取不到正确的内容了, 请问这个是什么原因导致的。
另外7月6日之后, 微信爬虫数量就越来越少了。
2 个回答
加粗
标红
插入代码
插入链接
插入图片
上传视频
具体是什么appid,什么页面,可以发我看一下
你好,麻烦通过点击下方“反馈信息”按钮,提供出现问题的。
appId: wx6e72282bcc43a3c5
page: subPages/trade/supply-detail/index
refer: https://servicewechat.com/wx6e72282bcc43a3c5/119/page-frame.html
这个只是其中一个页面, 好像有很多页面都有类似的请求。 麻烦帮忙定位一下。
谢谢
关注后,可在微信内接收相应的重要提醒。
请使用微信扫描二维码关注 “微信开放社区” 公众号
具体是什么appid,什么页面,可以发我看一下
page: subPages/trade/supply-detail/index
refer: https://servicewechat.com/wx6e72282bcc43a3c5/119/page-frame.html
帮忙看看,谢谢!
appId: wx6e72282bcc43a3c5
page: subPages/trade/supply-detail/index
refer: https://servicewechat.com/wx6e72282bcc43a3c5/119/page-frame.html
这个只是其中一个页面, 好像有很多页面都有类似的请求。 麻烦帮忙定位一下。
谢谢
{"real_ip":"123.207.185.152","headers":"[Host:\"appapi.cnhnb.com\", X-Forwarded-For:\"123.207.185.152, 123.207.185.152\", Content-Length:\"16\", RemoteIp:\"123.207.185.152\", Accept:\"*/*\", Accept-Encoding:\"gzip, deflate\", Accept-Language:\"en-US\", Referer:\"https://servicewechat.com/wx6e72282bcc43a3c5/119/page-frame.html\", User-Agent:\"Mozilla/5.0 (iPhone; CPU iPhone OS 11_0 like Mac OS X) AppleWebKit/604.1.38 (KHTML, like Gecko) Version/11.0 Mobile/15A372 Safari/604.1 MicroMessenger/6.5 mpcrawler\", hn-app-id:\"xapp\", ostype:\"xapp\", runtime-headers:\"content-type,osType,hn-app-id,access-token,X-CLIENT-ID,X-CLIENT-UA,X-CLIENT-TICKET,X-CLIENT-SID,X-CLIENT-APPID,X-B3-TRACEID,X-CLIENT-TIME,X-CLIENT-PAGE,X-HN-JOB,X-CLIENT-NONCE,X-CLIENT-SIGN\", x-b3-traceid:\"0KQPF866P9SZTR87\", x-client-appid:\"2\", x-client-id:\"f81fe86-1a95-50ad-8caa-d49d9af76\", x-client-page:\"subPages/trade/supply-detail/index\", x-client-sid:\"S_0KQPF866P9SZTR87\", x-wx-application-proto:\"0\", x-wx-cascade-timeout:\"10000\", Content-Type:\"application/x-www-form-urlencoded; boundary=------------------------735a09a0c4ef748e\", applicationName:\"pigsy-app\", x-real-ip:\"123.207.185.152\", agenttype:\"web_wechat\", client-type:\"wechat_xapp\"]","code":"510001","httpMethod":"POST","duration":"3","path":"/pisces/api/transform/supply/detail/desc","x-client-id":"f81fe86-1a95-50ad-8caa-d49d9af76","pigsy_profile":"app","http_status":"200 OK"}
里面有一些字段是我们自己加的, 关键就是 'content-type'这个字段有点异常,导致解析参数出错了。