今日と一緒に、誰もが簡単な練習Pythonの爬虫類体験するために一緒に、以上の12306票クエリ（pycharm + python3.7を）達成のpythonについて話して
、我々はのブラウザで開発者ツール（F12）を開いてみましょうと述べたが、複数回投票してみてくださいクエリは、開発者ツールによって発行された要求パケットを表示します
あなたはそれがどのような、具体的で、URLリクエストの赤いボックスは、当社12306サーバーに送信され見ることができますか？私たちは見て取りhttps://kyfw.12306.cn/otn/leftTicket/queryZ?leftTicketDTO.train_date=2019-01-21&leftTicketDTO.from_station=CDW&leftTicketDTO.to_station=SZQ&purpose_codes=ADULT
、あなたが要求を行っているいくつかのフィールドを見ることができました：
leftTicketDTO.train_date：日付クエリ
leftTicketDTO.from_station：クエリ出発
leftTicketDTO.to_station：先のクエリ
purpose_codes：このフィールドは使用されているが、それがデフォルトになります何をすべきか、明確ではありません
私たちは、対応する番号、例えば、成都（CDW）になってきた私たちは成都、深セン、入力し、URLを提出した要求から見る深セン（SZQ）ので、我々はプロセスについてするプログラムを入力すると、12306することができます文書に対応するコードでこれらの都市の名前を格納する場所の：https://kyfw.12306.cn/otn/resources/js/framework/station_name.js?station_version=1.8971
あなたがプログラミングの世界ではまだ混乱している場合は、Pythonのバックルqun学ぶために私たちに参加することができます：784758214を、高齢者が学んでいる方法を見て。経験の交換。基本的なWeb開発Pythonスクリプトから、爬虫類、ジャンゴ、データマイニングや他のプロジェクトへのゼロベースのデータを戦うために仕上げています。どんな小さなPythonのパートナーに与えられました！いくつかの学習方法を共有し、細部に注意を払う必要があり、私たちに参加をクリックしてPythonの学習者の集い
ここでは、これらの都市の名前と番号が抽出された、小さなプログラムを書きます：
import re,requests
url = "https://kyfw.12306.cn/otn/resources/js/framework/station_name.js?station_version=1.8971"
response = requests.get(url,verify=False)
#将车站的名字和编码进行提取
chezhan = re.findall(r'([\u4e00-\u9fa5]+)\|([A-Z]+)', response.text)
chezhan_code = dict(chezhan)
#进行交换
chezhan_names = dict(zip(chezhan_code.values(),chezhan_code.keys()))
#打印出得到的车站字典
print(chezhan_names)
印刷以下の結果が得られた（部分的にのみ取り込ま示します）：
{'VAP': '北京北', 'BOP': '北京东', 'BJP': '北京', 'VNP': '北京南', 'BXP': '北京西', 'IZQ': '广州南', 'CUW': '重庆北', 'CQW': '重庆', 'CRW': '重庆南', 'CXW': '重庆西', 'GGQ': '广州东', 'SHH': '上海', 'SNH': '上海南', 'AOH': '上海虹桥', 'SXH': '上海西', 'TBP': '天津北', 'TJP': '天津', 'TIP': '天津南', 'TXP': '天津西', 'XJA': '香港西九龙', 'CCT': '长春', 'CET': '长春南', 'CRT': '长春西', 'ICW': '成都东', 'CNW': '成都南', 'CDW': '成都', 'CSQ': '长沙', 'CWQ': '长沙南',}
接下来我们就动手开始程序的主要代码编写：
在学习过程中有什么不懂得可以加我的
python学习交流扣扣qun，784758214
群里有不错的学习视频教程、开发工具与电子书籍。
与你分享python企业当下人才需求及怎么从零基础学习好python，和学习什么内容
def main():
date = input("请输入时间(如2019-01-22)：\n")
from_station = chezhan_code[input("请输入起始站点：\n")]
to_station = chezhan_code[input("请输入目的站点：\n")]
url = "https://kyfw.12306.cn/otn/leftTicket/queryZ?"
headers = {
"User-Agent": "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.26 Safari/537.36 Core/1.63.5702.400 QQBrowser/10.2.1893.400"
}
url=url+"leftTicketDTO.train_date="+date+"&leftTicketDTO.from_station="+from_station+"&leftTicketDTO.to_station="+to_station+"&purpose_codes=ADULT"
#print(url) 已经检查过生成的URL是正确的
#request请求获取主页
r = requests.get(url,headers=headers)
r.raise_for_status() #如果发送了一个错误的请求，会抛出异常
r.encoding = r.apparent_encoding
showTicket(r.text)
ユーザーの入力時には、最初のサイト、宛先サイトは、その後、取得によって要求し、その後、我々は、Webページによって返された情報を解析します。私たちは今、どのような情報を返すために私たちの要求の後に見て、コード印刷の上r.text、その後、我々は解決すべきかを決定します
私たちは、メモ帳、詳細な分析に貼り付けて、とても不便に見えました：
、クエリのために、21の最後の時間である日20190123：12306を表示された情報と比較することができ、K829は旅行、CDWであるとBJQは、10：10開始時間は、午前6時13分到着時間が44である出発地です残りは投票の一連の情報のすべての種類です。
以下は、主要事実を分析することにより、返された情報に基づいており、これはPythonの爬虫類で、解決されます！！！
私たちは、あなたが使用している見ることができますJSON形式に情報を入れて、「|」区切り、その後、我々は、スプリット機能と別れ、コードの主な機能は次のとおりです。
def showTicket(html):
html = json.loads(html)
table = PrettyTable([" 车次 ","出发车站","到达车站","出发时间","到达时间"," 历时 ","商务座"," 一等座","二等座","高级软卧","软卧","动卧","硬卧","软座","硬座","无座","其他","备注"])
for i in html['data']['result']:
name = [
"station_train_code",
"from_station_name",
"to_station_name",
"start_time",
"arrive_time",
"lishi",
"swz_num",
"zy_num",
"ze_num",
"dw_num",
"gr_num",
"rw_num",
"yw_num",
"rz_num",
"yz_num",
"wz_num",
"qt_num",
"note_num"
]
data = {
"station_train_code": '',
"from_station_name": '',
"to_station_name": '',
"start_time": '',
"arrive_time": '',
"lishi": '',
"swz_num": '',
"zy_num": '',
"ze_num": '',
"dw_num": '',
"gr_num": '',
"rw_num": '',
"yw_num": '',
"rz_num": '',
"yz_num": '',
"wz_num": '',
"qt_num": '',
"note_num": ''
}
#将各项信息提取并赋值
item = i.split('|') #使用“|”进行分割
data["station_train_code"] = item[3] #获取车次信息，在3号位置
data["from_station_name"] = item[6] #始发站信息在6号位置
data["to_station_name"] = item[7] #终点站信息在7号位置
data["start_time"] = item[8] #出发时间在8号位置
data["arrive_time"] = item[9] #抵达时间在9号位置
data["lishi"] = item[10] #经历时间在10号位置
data["swz_num"] = item[32] or item[25] #特别注意，商务座在32或25位置
data["zy_num"] = item[31] #一等座信息在31号位置
data["ze_num"] = item[30] #二等座信息在30号位置
data["gr_num"] = item[21] #高级软卧信息在21号位置
data["rw_num"] = item[23] #软卧信息在23号位置
data["dw_num"] = item[27] #动卧信息在27号位置
data["yw_num"] = item[28] #硬卧信息在28号位置
data["rz_num"] = item[24] #软座信息在24号位置
data["yz_num"] = item[29] #硬座信息在29号位置
data["wz_num"] = item[26] #无座信息在26号位置
data["qt_num"] = item[22] #其他信息在22号位置
data["note_num"] = item[1] #备注信息在1号位置
color = Colored()
data["note_num"] = color.white(item[1])
#如果没有信息，那么就用“-”代替
for pos in name:
if data[pos] == "":
data[pos] = "-"
tickets = []
cont = []
cont.append(data)
for x in cont:
tmp = []
for y in name:
if y == "from_station_name":
s = color.green(chezhan_names[data["from_station_name"]])
tmp.append(s)
elif y == "to_station_name":
s = color.red(chezhan_names[data["to_station_name"]])
tmp.append(s)
elif y == "start_time":
s = color.green(data["start_time"])
tmp.append(s)
elif y == "arrive_time":
s = color.red(data["arrive_time"])
tmp.append(s)
elif y == "station_train_code":
s = color.yellow(data["station_train_code"])
tmp.append(s)
else:
tmp.append(data[y])
tickets.append(tmp)
for ticket in tickets:
table.add_row(ticket)
print(table)
その後、我々は成功、それをプログラム！！！
しかしPrettytableグリッド内のコンパイラが整列されていない、心配しないで、我々は端末にスクリプトを実行するには、非常に素晴らしい友人の出力を見ることができます：
コンプリート！！！ここでは完全なコードです
main.py
# -*- coding: utf-8 -*-
import re,requests,datetime,time,json
from prettytable import PrettyTable
from colorama import init,Fore
from stationinfo import chezhan_code,chezhan_names
init(autoreset=False)
class Colored(object):
def yeah(self,s):
return Fore.LIGHTCYAN_EX + s + Fore.RESET
def green(self,s):
return Fore.LIGHTGREEN_EX + s + Fore.RESET
def yellow(self,s):
return Fore.LIGHTYELLOW_EX + s + Fore.RESET
def white(self,s):
return Fore.LIGHTWHITE_EX + s + Fore.RESET
def blue(self,s):
return Fore.LIGHTBLUE_EX + s + Fore.RESET
def showTicket(html):
html = json.loads(html)
table = PrettyTable([" 车次 ","出发车站","到达车站","出发时间","到达时间"," 历时 ","商务座"," 一等座","二等座","高级软卧","软卧","动卧","硬卧","软座","硬座","无座","其他","备注"])
for i in html['data']['result']:
name = [
"station_train_code",
"from_station_name",
"to_station_name",
"start_time",
"arrive_time",
"lishi",
"swz_num",
"zy_num",
"ze_num",
"dw_num",
"gr_num",
"rw_num",
"yw_num",
"rz_num",
"yz_num",
"wz_num",
"qt_num",
"note_num"
]
data = {
"station_train_code": '',
"from_station_name": '',
"to_station_name": '',
"start_time": '',
"arrive_time": '',
"lishi": '',
"swz_num": '',
"zy_num": '',
"ze_num": '',
"dw_num": '',
"gr_num": '',
"rw_num": '',
"yw_num": '',
"rz_num": '',
"yz_num": '',
"wz_num": '',
"qt_num": '',
"note_num": ''
}
#将各项信息提取并赋值
item = i.split('|') #使用“|”进行分割
data["station_train_code"] = item[3] #获取车次信息，在3号位置
data["from_station_name"] = item[6] #始发站信息在6号位置
data["to_station_name"] = item[7] #终点站信息在7号位置
data["start_time"] = item[8] #出发时间在8号位置
data["arrive_time"] = item[9] #抵达时间在9号位置
data["lishi"] = item[10] #经历时间在10号位置
data["swz_num"] = item[32] or item[25] #特别注意，商务座在32或25位置
data["zy_num"] = item[31] #一等座信息在31号位置
data["ze_num"] = item[30] #二等座信息在30号位置
data["gr_num"] = item[21] #高级软卧信息在21号位置
data["rw_num"] = item[23] #软卧信息在23号位置
data["dw_num"] = item[27] #动卧信息在27号位置
data["yw_num"] = item[28] #硬卧信息在28号位置
data["rz_num"] = item[24] #软座信息在24号位置
data["yz_num"] = item[29] #硬座信息在29号位置
data["wz_num"] = item[26] #无座信息在26号位置
data["qt_num"] = item[22] #其他信息在22号位置
data["note_num"] = item[1] #备注信息在1号位置
color = Colored()
data["note_num"] = color.white(item[1])
#如果没有信息，那么就用“-”代替
for pos in name:
if data[pos] == "":
data[pos] = "-"
tickets = []
cont = []
cont.append(data)
for x in cont:
tmp = []
for y in name:
if y == "from_station_name":
s = color.green(chezhan_names[data["from_station_name"]])
tmp.append(s)
elif y == "to_station_name":
s = color.yeah(chezhan_names[data["to_station_name"]])
tmp.append(s)
elif y == "start_time":
s = color.green(data["start_time"])
tmp.append(s)
elif y == "arrive_time":
s = color.yeah(data["arrive_time"])
tmp.append(s)
elif y == "station_train_code":
s = color.yellow(data["station_train_code"])
tmp.append(s)
else:
tmp.append(data[y])
tickets.append(tmp)
for ticket in tickets:
table.add_row(ticket)
print(table)
def main():
date = input("请输入时间：\n")
from_station = chezhan_code[input("请输入起始站点：\n")]
to_station = chezhan_code[input("请输入目的站点：\n")]
url = "https://kyfw.12306.cn/otn/leftTicket/queryZ?"
headers = {
"User-Agent": "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.26 Safari/537.36 Core/1.63.5702.400 QQBrowser/10.2.1893.400"
}
url=url+"leftTicketDTO.train_date="+date+"&leftTicketDTO.from_station="+from_station+"&leftTicketDTO.to_station="+to_station+"&purpose_codes=ADULT"
#print(url) 已经检查过生成的URL是正确的
#request请求获取主页
r = requests.get(url,headers=headers)
r.raise_for_status() #如果发送了一个错误的请求，会抛出异常
r.encoding = r.apparent_encoding
showTicket(r.text)
#print(r.text)
main()
stationinfo.py
在学习过程中有什么不懂得可以加我的
python学习交流扣扣qun，784758214
群里有不错的学习视频教程、开发工具与电子书籍。
与你分享python企业当下人才需求及怎么从零基础学习好python，和学习什么内容
import re,requests
url = "https://kyfw.12306.cn/otn/resources/js/framework/station_name.js?station_version=1.8971"
response = requests.get(url,verify=False)
#将车站的名字和编码进行提取
chezhan = re.findall(r'([\u4e00-\u9fa5]+)\|([A-Z]+)', response.text)
chezhan_code = dict(chezhan)
chezhan_names = dict(zip(chezhan_code.values(),chezhan_code.keys()))
#print(chezhan_names)