CSS
偏移反爬虫,利用爬虫程序无法渲染css
,但是浏览器能渲染css
的特性设计出来的反爬虫手段
上面的网页信息,页面显示的内容和实际的HTML
文档不一样,这样爬虫就不能拿到准确的数据,因为网页显示数据不仅使用来i
标签的数据,也使用来b
标签的数据
观察发现:没有i
标签的b
标签都有一个left
属性,利用left
的值来做偏移,覆盖掉i标签中的数据
import requests
import re
from parsel import Selector
u
CSS
偏移反爬虫,利用爬虫程序无法渲染css
,但是浏览器能渲染css
的特性设计出来的反爬虫手段
上面的网页信息,页面显示的内容和实际的HTML
文档不一样,这样爬虫就不能拿到准确的数据,因为网页显示数据不仅使用来i
标签的数据,也使用来b
标签的数据
观察发现:没有i
标签的b
标签都有一个left
属性,利用left
的值来做偏移,覆盖掉i标签中的数据
import requests
import re
from parsel import Selector
u