0元無料IPリスト
最初に波を共有する：無料のプロキシはサードパーティのサーバーによって提供され、IPの品質は高くありません。
IPアドレスとポート番号の匿名性の程度は、プロトコル領域の安定した時間更新時間をサポートします
無料114.233.51.1114257 JiangsuProvinceのTaizhouCityでの超高HTTP5〜1440分2020/10/18 11:00:01
無料49.71.99.1104226江蘇省楊州市での超高HTTP5-1440分2020/10/1810：00：01
無料183.4.66.224205超高HTTP5-1440分、広東省江門市2020/10/18 09:00:01
無料119.7.231.1364261超高HTTPYa'an City、Sichuan Province 5--1440 minutes 2020/10/18 08:00:01
無料60.19.239.1594258超高HTTP5-1440分、遼寧省安山市2020/10/18 07:00:01
無料140.237.14.304206超高HTTPプーティアン市、福建省5-140分2020/10/18 06:00:01
IPアドレスとポート番号の匿名性の程度は、プロトコル領域の安定した時間更新時間をサポートします
無料183.4.66.224205超高HTTP5-1440分、広東省江門市2020/10/18 09:00:01
無料119.7.231.1364261超高HTTPYa'an City、Sichuan Province 5--1440 minutes 2020/10/18 08:00:01
無料60.19.239.1594258超高HTTP5〜1440分、遼寧省安山市2020/10/18 07:00:01
無料140.237.14.304206超高HTTPプーティアン市、福建省5-140分2020/10/18 06:00:01
無料125.111.144.1114205超高HTTP5〜1440分、浙江省寧波2020/10/18 05:00:01
無料221.236.167.2354278超高HTTP5--1440分、四川省Leshan City 2020/10/18 04:00:01
使用法とコードは次のとおりです。
上記のip + port番号をプロキシ内の次の辞書に置き換えましょう。プロキシ設定が追加され、クライアントユーザーのリクエストをシミュレートして、相手のWebサイトのクローラー防止メカニズムを防止します。
シンプルで実用的なpythonに付属のrequestsモジュールを使用してください。beautifulsoupからラベル要素を見つけます。ページ番号を循環させて、ウェブページの各ページのページコンテンツを取得します〜
pythonの詳細については、Fangbaoブログをフォローしてください。
上記のコードは、Xiaobianによって作成された小さなクローラーツールです。主に、自分のブログWebサイトのコンテンツをクロールするために使用されます。このメソッドは、selenium + beautifulsoupを使用して実装することもできます。Webサイトクローラーは、ページをめくり、クロムブラウザーを自動的に操作します。セレンをクロールする方法については、エディターが後でチュートリアルを共有します！セレン+美しいスープの方法は、あなたが必要とするウェブサイトへのトラフィックをブラッシングすることもできるので、あなたはそれを研究することができます！