本文介绍: 有的会加强监控的，有的则是会使用一些算法，让你无法通过非浏览器或者app的方式访问到数据。其实我们不难发现，我们的这个sign的只其实是通过l赋值来的，这个l呢其实又是u这个函数的执行之后的结果。那么我们复制u函数中的数据来看一下。当我们通过浏览器中的F12抓取到了我们搜索的商品的数据的时候，如果我们copy这个json数据的url,然后通过request库进行访问的时候，我们是访问不到。然后我我们点击下一步，就可以查看到对相应的变量的信息了，这里我们可以看到sign的值，以及t、appKey的值等等。
如果我们想要获取某宝的商品信息或者商品的评论信息的话。可能其中的一条途径就是爬虫了【淘宝商品详情API】。放在以前的话，爬虫还是挺简单的。但是放到现在呢，其实并不容易了。因为现在各个平台的反爬机制都加强了。有的会加强监控的，有的则是会使用一些算法，让你无法通过非浏览器或者app的方式访问到数据。其中淘宝就是，它现在不但需要登录，同时还会设计一些复杂的算法来阻止你使用非合规的手段来访问。
比如下面的这个：
当我们通过浏览器中的F12抓取到了我们搜索的商品的数据的时候，如果我们copy这个json数据的url,然后通过request库进行访问的时候，我们是访问不到。
这是为什么呢，其实这是因为，它设置了sign值，主要就是为了防止爬虫
声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。
