我々は、深さのデータ爬虫類を続けなければならない。この時間は、いくつかのページに直接HTMLコードによって要求されたデータは、我々はデータをページアップにAJAXによってレンダリングされる必要はあり得ることができない、この時間は、私たちは、Ajaxを分析する方法を見てみましょう
私たちは、このネットワークライブラリを使用するか、要求の一つに、MongoDBは、(ライブラリをインストールする必要がありpymongo事前に)オープンマルチスレッドクロール結果を格納するために使用されます。
分析:開封後は多くのページがありますが、私たちは、HTMLソースコードを取得し、私たちが望むデータを得ることができない、そのサイトをロードするために、AJAXを介してデータである可能性が高いです。
私たちは、デバッグモードF12をオンにし、[ネットワーク]をクリックし、我々は、私は非表示にしたいデータを分析する必要があります
私たちは、私たちに必要なデータが出てAJAXによってロードされて見ることができます。
プロジェクト:見出しをつかむためのAjaxの分析今日ストリートは水戸を撃ちます
コード住所:https://gitee.com/dwyui/toutiao_jiepai.git
単に当社の経営成績を見て: