马上就要过年了,听说还有人买不到票?
不要慌,今天咱们来用Python做一个自动查票抢票的脚本,24小时抢票,谁抢的过你!
准备工作
环境
- Python 3.8
- Pycharm
插件
谷歌浏览器驱动
模块
需要安装的第三方模块,直接pip安装即可。
requests # 数据请求模块 prettytable # 打印好看一些 selenium # 模拟人的行为去操作浏览器
文件素材
city.json文件 # 下图素材、视频、代码、插件安装教程我都准备好了,直接在这个q君羊708525271自取就好了
一点小TIPS
12306 每天只能退票三次
查票
购票
建议谷歌或者火狐…
爬虫思路
分析数据来源
车票信息:来源哪个数据包 <车票信息请求那个网站url地址可以得到>
开发者工具:F12
代码实现步骤
1、发送请求, 对于刚刚分析得到url地址发送请求。
2、获取数据, 获取服务器返回响应数据, response
3、解析数据, 提取我们想要车次信息。
# 导入数据请求模块 import requests # 导入格式化打印 import prettytable as pt # 导入json import json # 导入自动化测试模块 from selenium import webdriver # 导入账号密码 from password import account, Password # 导入时间模块 import time # 导入键盘控制 from selenium.webdriver.common.keys import Keys
打开浏览器。
driver = webdriver.Chrome()
绕过检测机制
driver.execute_cdp_cmd(\"Page.addScriptToEvaluateOnNewDocument\", {\"source\": \"\"\"Object.defineProperty(navigator, \'webdriver\', {get: () => undefined})\"\"\"})
输入网址
driver.get(\'https://kyfw.12306.cn/otn/resources/login.html\')
输入账号密码
先找到账号密码输入框, 再进行输入操作。
try: # 输入账号 driver.find_element_by_css_selector(\'#J-userName\').send_keys(account) # 输入密码 driver.find_element_by_css_selector(\'#J-password\').send_keys(Password) # 点击登陆 driver.find_element_by_css_selector(\'#J-login\').click() # 延时 driver.implicitly_wait(10) time.sleep(1)
点击弹窗
driver.implicitly_wait(10) # 延时等待 为了让网页元素加载 time.sleep(1) driver.find_element_by_css_selector(\'.btn\').click()
点击车票预定
driver.find_element_by_css_selector(\'#link_for_ticket\').click()
选择城市以及时间, 点击查询
driver.find_element_by_css_selector(\'#fromStationText\').click() # 点击输入框 driver.find_element_by_css_selector(\'#fromStationText\').clear() # 清空输入框 driver.find_element_by_css_selector(\'#fromStationText\').send_keys(\'长沙\') # 输入内容 driver.find_element_by_css_selector(\'#fromStationText\').send_keys(Keys.ENTER) # 回车按钮 # 输入到达的城市 driver.find_element_by_css_selector(\'#toStationText\').click() # 点击输入框 driver.find_element_by_css_selector(\'#toStationText\').clear() # 清空输入框 driver.find_element_by_css_selector(\'#toStationText\').send_keys(\'上海\') # 输入内容 driver.find_element_by_css_selector(\'#toStationText\').send_keys(Keys.ENTER) # 回车按钮 # 输入时间 driver.find_element_by_css_selector(\'#train_date\').click() # 点击输入框 driver.find_element_by_css_selector(\'#train_date\').clear() # 清空输入框 driver.find_element_by_css_selector(\'#train_date\').send_keys(\'2022-11-09\') # 输入内容 # 点击查询按钮 driver.find_element_by_css_selector(\'#query_ticket\').click() # 点击预定 driver.find_element_by_css_selector(\'#queryLeftTable tr:nth-child(1) .btn72\').click() # 选择乘车人 driver.find_element_by_css_selector(\'#normalPassenger_1\').click() # 点击提交提单 driver.find_element_by_css_selector(\'#submitOrder_id\').click() # 选择座位 # driver.find_element_by_css_selector(\'#erdeng1 > ul:nth-child(4) > li:nth-child(2)\').click() # 点击提交 time.sleep(3) driver.find_element_by_css_selector(\'#qr_submit_id\').click() driver.find_element_by_css_selector(\'#qr_submit_id\').click()
发送请求, 模拟浏览器对url地址发送请求
# 读取文件 城市字母文件 f = open(\'city.json\', encoding=\'utf-8\') # f.read() 返回字符串数据类型 把字符串转成json字典数据 --> 根据键值对取值 json_data = json.loads(f.read()) # 输入内容 from_city = input(\'请输入你要出发城市: \') to_city = input(\'请输入你要到达城市: \') date = \'2022-11-09\' # 确定请求链接 url = f\'https://kyfw.12306.cn/otn/leftTicket/query?leftTicketDTO.train_date={date}&leftTicketDTO.from_station={json_data[from_city]}&leftTicketDTO.to_station={json_data[to_city]}&purpose_codes=ADULT\' # 模拟伪装 ---> headers 请求头 headers = { # Cookie 用户信息, 表示常用于检测是否有登陆账号 \'Cookie\': \'_uab_collina=165650330916153394558455; JSESSIONID=34AFEC7D7370756179A2976A79434D6A; _jc_save_wfdc_flag=dc; _jc_save_fromStation=%u957F%u6C99%2CCSQ; BIGipServerotn=1911030026.24610.0000; BIGipServerpassport=770179338.50215.0000; guidesStatus=off; highContrastMode=defaltMode; cursorStatus=off; RAIL_EXPIRATION=1668129535127; RAIL_DEVICEID=TbHG0I9N4zNOVXocTOo6JdSREGznbbsYb5f_xQPshKLa1Y8Qx7LbGMu_h4Zwb6MyBOk_1zvlhZn85dlBcC4F1SEL1hwpTWuAkNkA7dSIqQ-dgdZAcoL1jMCS4bWfKSgKEstpGs8BAzfO-ItsTfKkP6YQL9Y24vGA; fo=uyys4j4q4rs7diywCDbOKBwdzYaDJcHjbyEG0hwDDZbF9Swz2dB79o6CCDC_EOHwJ7XidDtuZKQKjz6vYdfE3PDpSX9YvVulaMDDQmKGRPhrjzRZHlNGKC2S6egp70_4PJGqyv770aRXnJgffGRwkABzbJZDDiUtaTyHzatcoZpt_YO-T-dfbdjNQrQ; route=9036359bb8a8a461c164a04f8f50b252; _jc_save_toStation=%u4E0A%u6D77%2CSHH; _jc_save_fromDate=2022-11-09; _jc_save_toDate=2022-11-07\', # User-Agent 用户代理 表示浏览器基本身份信息 \'User-Agent\': \'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.0.0 Safari/537.36\' } # 发送请求 response = requests.get(url=url, headers=headers) # <Response [200]> 表示请求成功了 print(response)
获取数据,获取服务器返回响应数据。
为什么获取response.json() 数据的时候报错?
simplejson.errors.JSONDecodeError: Expecting value: line 1 column 4 (char 3)
一定获取的数据, 不是完整json数据格式
解决方法:
- 获取response.text 看数据返回情况
发现自己获取的数据, 和开发者工具里面所看到不一样 <因为你被反爬了 [要么得不到数据, 要么得到数据不是想要的]> - 因为没有伪装, 加headers 伪装一下
解析数据, 提取我们想要车次信息
response.json() # 获取响应json字典数据 完整的花括号 response.text # 获取响应文本数据 字符串数据
根据基础语法知识点: 字典取值 --> 键值对取值, 根据冒号左边的内容[键], 提取冒号有右边的内容[值]
# 实例化一个对象 tb = pt.PrettyTable() # 输出添加字段名 tb.field_names = [ \'序号\', \'车次\', \'出发时间\', \'到达时间\', \'耗时\', \'特等座\', \'一等\', \'二等\', \'软卧\', \'硬卧\', \'硬座\', \'无座\', ] # 添加序号 每次循环+1 page = 0 # for循环遍历, 把列表里面元素 一个一个提出来 for i in response.json()[\'data\'][\'result\']: # 先用 split 分割, 再用列表取值: 根据索引位置 index = i.split(\'|\') num = index[3] # 车次 start_time = index[8] # 出发时间 end_time = index[9] # 到达时间 use_time = index[10] # 耗时 topGrade = index[32] # 特等座 first_class = index[31] # 一等 second_class = index[30] # 二等 hard_sleeper = index[28] # 硬卧 hard_seat = index[29] # 硬座 no_seat = index[26] # 无座 soft_sleeper = index[23] # 软卧 dit = { \'序号\': page, \'车次\': num, \'出发时间\': start_time, \'到达时间\': end_time, \'耗时\': use_time, \'特等座\': topGrade, \'一等\': first_class, \'二等\': second_class, \'软卧\': soft_sleeper, \'硬卧\': hard_sleeper, \'硬座\': hard_seat, \'无座\': no_seat, } # print(dit) # 添加每行输出内容 tb.add_row([page, num, start_time, end_time, use_time, topGrade, first_class, second_class, soft_sleeper, hard_sleeper, hard_seat, no_seat, ]) page += 1 # 每次循环+1
今天的分享就到这里结束了,觉得有用的话,记得点餐收藏呀!
来源:https://www.cnblogs.com/hahaa/p/17033277.html
本站部分图文来源于网络,如有侵权请联系删除。