使用selenium+Chrome()无图版模拟浏览器进行抓取淘宝商品信息

说起淘宝,大家肯定先想起来的是各种各样的吃的喝的玩的,那么什么样的吃的喝的玩的销量高呢,有没有一种方法将商品信息抓下来我们做一个参考呢,下边就为大家带来我之前在崔庆才大神的参考下,将代码改写了,相对没有那么麻烦,喜欢的小伙伴快来看看吧。。

1,首先打开淘宝先让咱们看看,咱们要做的就是在下边的输入框中输入商品名称,通过selenium拿到相关商品的信息

打开f12,在Element中中找到输入框所在的位置,使用selenium的css选择器来定位,顺便配上代码


 

然后在找到搜索按钮,依旧使用css选择器定位

拿到了输入框的定位,那咱们怎么输入商品名称呢,别急,慢慢道来

上面的submit.click()是点击搜索按钮,以下会出结果:

我们要抓取前一百页,然后我们进行翻页,依旧是按照以上方式进行定位,定位找到数字输入框,然后点击确定按钮,就会翻转到下一页了,好了基本上就是这样了,下边附上全部代码,灰色部分是参照崔大神的代码,被注释掉了,没有注释的是我改写后的,如有错误,请大家指出!

下面是配置文件

以上就是使用selenium+chrome()模拟浏览器,对淘宝进行抓取,希望对大家有帮助!

猜你喜欢

转载自blog.csdn.net/qq_39928840/article/details/81132418