python:爬虫:技术路线

如果想处理javaScript表单提交等相关功能,可以用第三方库PhantomJS(非常优秀的轻量级的浏览器库 ,可以很好的解析 javaScript,并从其解析中获取相关数据)

对于scripe爬虫,我们可以在pypi网站上看到一批以scripe-开头的第三方库,他们 都是 完善scrape框架相关功能的单元

可以尝试在scrape框架中配置这些单元

参考视频:

https://www.bilibili.com/video/av9784617?p=1

发布了260 篇原创文章 · 获赞 119 · 访问量 51万+

猜你喜欢

转载自blog.csdn.net/weixin_38750084/article/details/103519248