黄视频网站在线免费观看-黄视频网站在线看-黄视频网站在线观看-黄视频网站免费看-黄视频网站免费观看-黄视频网站免费

千鋒教育-做有情懷、有良心、有品質的職業教育機構

手機站
千鋒教育

千鋒學習站 | 隨時隨地免費學

千鋒教育

掃一掃進入千鋒手機站

領取全套視頻
千鋒教育

關注千鋒學習站小程序
隨時隨地免費學習課程

當前位置:首頁  >  技術干貨  > 爬蟲之圖片驗證碼處理

爬蟲之圖片驗證碼處理

來源:千鋒教育
發布人:qyf
時間: 2022-09-19 17:39:37 1663580377

  了解常見驗證碼

  在日常生活與工作中,在進行各類設計個人賬戶安全的操作時,往往需要填寫各種驗證碼來進行驗證,短信、語音、文字、問答、圖片、拖拽、旋轉騰挪、拼圖接圖.......千奇百怪,各種各樣,種類繁多,花樣迭起!就拿奇葩驗證碼鼻祖的12306來說,如今我們在12306中可以碰到各種有趣,各種類型的驗證碼的原因,要歸功于為搶票事業做出巨大貢獻的——黃牛們,它的“進化史”就是一部不斷與黃牛和搶票軟件“斗智斗勇”的歷史。

Picture

  目前我們常見的驗證碼,無非就是文本、圖像以及音頻這三大類。

Picture(1)

  而當文本驗證碼仍容易被機器“擊破”時,圖像驗證碼就應運而生了。通常是會提供一些物體、動物、植物、人、風景之類的圖像,讓我們選擇正確的圖像進行標記。這就是以12306為首的圖像驗證碼了,但是這個還不算后來圖像驗證碼又增加了新的玩法,比如旋轉圖片,比如拼圖以及宮格,目的還是為了對抗爬蟲這些機器。

Picture(2)

  接下來是音頻驗證碼,這種相比前兩種數量相對要小一些,主要是會給我們一段錄音,里面有隨機的單詞或數字,有的會加一些噪音,我們基于錄音輸入其中聽到的單詞或數字,或者把它讀出來。從安全性上來說,聲音驗證碼比文本和圖像等級要提升一個層級,因為機器想要聽錄音并分辨,這個難度會非常大。

Picture(3)

  驗證碼的處理方案

  • 手動輸入(input) 這種方法僅限于登錄一次就可持續使用的情況

  • 圖像識別引擎解析 使用光學識別引擎處理圖片中的數據,目前常用于圖片數據提取,較少用于驗證碼處理

  • 打碼平臺 爬蟲常用的驗證碼解決方案

  圖像識別引擎

  OCR,即Optical Character Recognition,光學字符識別,是指通過掃描字符,然后通過其形狀將其翻譯成電子文本的過程,對應圖形驗證碼來說,它們都是一些不規則的字符,這些字符是由字符稍加扭曲變換得到的內容,我們可以使用OCR技術來講其轉化為電子文本,然后將結果提取交給服務器,便可以達到自動識別驗證碼的過程

  tesserocr與pytesseract是Python的一個OCR識別庫,但其實是對tesseract做的一層Python API封裝,pytesseract是Google的Tesseract-OCR引擎包裝器;所以它們的核心是tesseract,因此在安裝tesserocr之前,我們需要先安裝tesseract。

  圖片識別引擎環境的安裝

  1 引擎的安裝

  • mac環境下直接執行命令

  brew install --with-training-tools tesseract

  • windows環境下的安裝 可以通過exe安裝包安裝,下載地址可以從GitHub項目中的wiki找到。安裝完成后記得將Tesseract 執行文件的目錄加入到PATH中,方便后續調用。

  • linux環境下的安裝

  sudo apt-get install tesseract-ocr

  2 Python庫的安裝

  # PIL用于打開圖片文件

  pip/pip3 install pillow

  # pytesseract模塊用于從圖片中解析數據

  pip/pip3 install pytesseract

  本次案例我們使用圖片識別引擎識別驗證碼登陸古詩文網

Picture(4)

  通過分析我們發現驗證碼點擊刷新的鏈接是:

Picture(5)

  所以我們請求10次本鏈接獲取10張圖片,進行圖片識別

  import time

  from PIL import Image

  import pytesseract

  import requests

  headers = {

  "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36"

  }

  image_url = 'https://so.gushiwen.org/RandCode.ashx'

  # 下載驗證碼圖片

  session = requests.Session() # 使用session是為了保證驗證碼的請求和登陸請求信息一致

  for i in range(10):

  r = session.get(image_url, headers=headers)

  with open('images/code'+str(i)+'.jpg', 'wb') as fp:

  fp.write(r.content)

  time.sleep(10)

  print('下載完成第'+str(i)+'張!')

  # 依次識別并保存到文件中

  # 進行二值處理

  def erzhihua(image, threshold):

  ''':type image:Image.Image'''

  image = image.convert('L')

  table = []

  for i in range(256):

  if i < threshold:

  table.append(0)

  else:

  table.append(1)

  return image.point(table, '1')

  # 對剛才保存的10張圖片進行識別

  for i in range(10):

  im = Image.open('images/code' + str(i) + '.jpg')

  im = erzhihua(im, 127)

  im.show()

  result = pytesseract.image_to_string(im, lang='eng')

  print(result)

  但是很遺憾10次或者更多次數才能打碼成功一次。

  打碼平臺

  此時我們就要尋求專業的打碼平臺,申請第三方的平臺,宋宋試了一下阿里提供的各種免費的打碼平臺。鏈接:https://market.aliyun.com/products/?keywords=圖片識別驗證碼,但是識別效果不是很佳(哈哈因為是免費的緣故吧!只有標記優品的那個還不錯其他的也可以自行試一試)。

Picture(6)

  為了測試它的識別效果,我們嘗試申請成交次數最多的那個,查看官方API說明如下:

Picture(7)

  因此我們使用驗證碼打碼平臺獲取驗證碼并登錄

  實現思路:

  使用requests.session獲取圖片并進行本地保存

  使用打碼平臺識別圖片

  獲取登錄鏈接,登陸鏈接是一個post請求,并攜帶了你的表單中填入的用戶名和密碼

  登陸獲取cookies, 才能去訪問用戶的個人頁

  import json

  from PIL import Image

  import pytesseract

  import requests

  import urllib.request

  import base64

  import ssl

  ssl._create_default_https_context = ssl._create_unverified_context

  # 1. 使用requests.session獲取圖片并進行本地保存

  headers = {

  "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36"

  , 'Host': 'www.xqb5200.com'

  , 'Referer': 'https://www.xqb5200.com/login.php'

  }

  session = requests.Session() # 使用session是為了保證驗證碼的請求和登陸請求信息一致

  code_image_url = "https://www.xqb5200.com/checkcode.php"

  r = session.get(code_image_url, headers=headers)

  with open('code.jpg', 'wb') as fp:

  fp.write(r.content)

  # 2. 使用打碼平臺識別圖片

  # 修改API說明修改接口地址

  url = 'https://imgurlocr.market.alicloudapi.com/urlimages'

  method = 'POST'

  appcode = '你的APPCODE'

  querys = ''

  bodys = {}

  f = open(r'code.jpg', 'rb')

  contents = base64.b64encode(f.read())

  f.close()

  bodys['image'] = bytes("data:image/jpg;base64,", encoding="utf8")+contents

  post_data = urllib.parse.urlencode(bodys).encode(encoding='UTF8')

  request = urllib.request.Request(url, post_data)

  # 根據API的要求,定義相對應的Content-Type

  request.add_header('Content-Type', 'application/x-www-form-urlencoded; charset=UTF-8')

  request.add_header('Authorization', 'APPCODE ' + appcode)

  ctx = ssl.create_default_context()

  ctx.check_hostname = False

  ctx.verify_mode = ssl.CERT_NONE

  response = urllib.request.urlopen(request, context=ctx)

  content = response.read()

  if (content):

  code = json.loads(content.decode('utf-8'))

  print(code)

  print(code['result']['words'])

  # 3. 獲取登錄鏈接,登陸鏈接是一個post請求,并攜帶了你的表單中填入的用戶名和密碼

  login_url = "https://www.xqb5200.com/login.php?do=submit"

  # 用戶名和密碼大家可以注冊一個新的用戶

  data = {

  "username": "你的用戶名",

  "password": "你的秘密",

  "checkcode": code,

  "action": "login",

  "submit": "%26%23160%3B%B5%C7%26%23160%3B%26%23160%3B%C2%BC%26%23160%3B"

  }

  # 4. 登陸獲取cookies, 才能去訪問用戶的個人頁

  response = session.post(url=login_url, headers=headers, data=data)

  response.encoding = 'utf-8'

  cookies = response.cookies

  # 查看登陸是否成功了

  with open('logsucess.html', 'wb') as fp:

  response.encoding = response.apparent_encoding

  fp.write(response.content)

  這樣我們還是可以識別這個驗證碼的,如圖

Picture(8)

  最后保存到本地的文件,顯示登陸成功

Picture(9)

  還有滑動驗證碼和點觸驗證碼的使用以及selenium+驗證碼登陸,期待下篇文章給大家分享...

tags:
聲明:本站稿件版權均屬千鋒教育所有,未經許可不得擅自轉載。
10年以上業內強師集結,手把手帶你蛻變精英
請您保持通訊暢通,專屬學習老師24小時內將與您1V1溝通
免費領取
今日已有369人領取成功
劉同學 138****2860 剛剛成功領取
王同學 131****2015 剛剛成功領取
張同學 133****4652 剛剛成功領取
李同學 135****8607 剛剛成功領取
楊同學 132****5667 剛剛成功領取
岳同學 134****6652 剛剛成功領取
梁同學 157****2950 剛剛成功領取
劉同學 189****1015 剛剛成功領取
張同學 155****4678 剛剛成功領取
鄒同學 139****2907 剛剛成功領取
董同學 138****2867 剛剛成功領取
周同學 136****3602 剛剛成功領取
相關推薦HOT
黄色福利片| 日本免费乱人伦在线观看| 天天综合在线观看 | 国产一区精品| 可以免费看毛片的网站| 精品久久久久久影院免费| 黄色短视频网站| 久久成人综合网| 国产a视频精品免费观看| 99久久网站| 国产不卡福利| 日本特黄特色aaa大片免费| 91麻豆爱豆果冻天美星空| 国产麻豆精品hdvideoss| 国产高清在线精品一区a| 青青久久精品| 日本伦理片网站| a级毛片免费观看网站| 国产高清在线精品一区a| 深夜做爰性大片中文| 青青青草影院| 国产麻豆精品免费密入口| 亚洲精品影院一区二区| 精品视频一区二区三区| 成人影院一区二区三区| 成人免费一级毛片在线播放视频| 国产高清在线精品一区a| 亚洲www美色| 国产视频一区在线| 中文字幕一区二区三区精彩视频| 亚洲第一页色| 天天做日日爱| 国产精品自拍一区| 免费国产在线视频| 国产视频一区二区在线播放| 亚洲精品影院一区二区| 韩国三级视频在线观看| 精品毛片视频| a级毛片免费全部播放| 你懂的福利视频| 四虎影视久久久免费| 日韩avdvd| 日韩avdvd| 青青久热| 久久99爰这里有精品国产| 可以免费看毛片的网站| 国产精品自拍在线观看| 可以免费看毛片的网站| 可以免费看污视频的网站| 黄视频网站免费观看| 国产精品自拍在线观看| 国产不卡精品一区二区三区| 欧美夜夜骑 青草视频在线观看完整版 久久精品99无色码中文字幕 欧美日韩一区二区在线观看视频 欧美中文字幕在线视频 www.99精品 香蕉视频久久 | 日韩专区亚洲综合久久| 亚洲精品影院一区二区| 中文字幕一区二区三区 精品| 国产视频久久久| 欧美电影免费看大全| 国产不卡在线观看| 九九干| 久久精品大片| 亚洲爆爽| 久久久成人网| 国产精品1024永久免费视频| 色综合久久久久综合体桃花网| 成人高清护士在线播放| 日韩在线观看免费| 亚飞与亚基在线观看| 日韩专区亚洲综合久久| 国产91精品一区二区| 国产极品白嫩美女在线观看看| 九九久久国产精品| 午夜久久网| 国产91丝袜在线播放0| 欧美爱色| 免费国产在线观看| 国产福利免费视频| 欧美另类videosbestsex| 亚洲 男人 天堂| 日本在线www| 午夜在线亚洲| 免费毛片播放| 国产伦理精品| 91麻豆爱豆果冻天美星空| 欧美激情伊人| 精品国产一区二区三区久| 97视频免费在线观看| 二级特黄绝大片免费视频大片| 国产一区二区精品久久| 亚洲 欧美 91| 美女免费毛片| 一级女性全黄生活片免费| 国产一区二区精品久久91| 久久精品免视看国产明星| 成人免费一级纶理片| 国产麻豆精品免费密入口 | 国产综合91天堂亚洲国产| 四虎影视库国产精品一区| 国产成人啪精品| 久久精品免视看国产成人2021| 欧美日本国产| 久草免费资源| 欧美18性精品| 99久久精品国产免费| 亚洲女人国产香蕉久久精品 | 天天色色色| 国产不卡高清在线观看视频| 午夜家庭影院| 99色吧| 99久久网站| 黄色福利片| 亚洲www美色| 日本特黄特色aa大片免费| 韩国三级视频在线观看| 日韩av成人| 国产一区二区福利久久| 国产美女在线一区二区三区| 超级乱淫黄漫画免费| 99热精品一区| 国产91精品系列在线观看| 久久精品欧美一区二区| 九九精品久久久久久久久| 日韩一级黄色| 国产不卡精品一区二区三区| 成人免费高清视频| 国产精品自拍在线观看| 日本久久久久久久 97久久精品一区二区三区 狠狠色噜噜狠狠狠狠97 日日干综合 五月天婷婷在线观看高清 九色福利视频 | 欧美夜夜骑 青草视频在线观看完整版 久久精品99无色码中文字幕 欧美日韩一区二区在线观看视频 欧美中文字幕在线视频 www.99精品 香蕉视频久久 | 欧美日本韩国| 九九国产| 成人免费观看视频| 欧美激情一区二区三区在线播放| 九九热精品免费观看| 欧美另类videosbestsex高清| 国产不卡福利| 99久久精品国产免费| 91麻豆tv| 美女免费精品高清毛片在线视| 九九热精品免费观看| 国产成人啪精品视频免费软件| 亚欧成人乱码一区二区| 国产网站免费| 精品国产一区二区三区久久久狼| 成人av在线播放| 九九热精品免费观看| 成人高清免费| 亚飞与亚基在线观看| 欧美a级片视频| 日韩欧美一及在线播放| 韩国三级香港三级日本三级| 免费一级片在线观看| 成人免费观看网欧美片| 国产a视频| 亚久久伊人精品青青草原2020| 日韩女人做爰大片| 精品久久久久久中文字幕一区| 美女免费毛片| 九九热精品免费观看| 国产一区精品| 九九干| 国产不卡精品一区二区三区| 午夜在线亚洲| 在线观看成人网 | 九九免费高清在线观看视频| 天堂网中文字幕| 四虎影视库| 成人影视在线播放| 青青青草视频在线观看| 久久99青青久久99久久| 四虎论坛| 青青青草影院 | 尤物视频网站在线| 日韩中文字幕一区| 日韩免费在线观看视频| 91麻豆精品国产自产在线| 亚欧成人毛片一区二区三区四区| 日韩免费在线观看视频| 麻豆系列国产剧在线观看| 青青青草视频在线观看| 欧美一区二区三区性| 可以免费在线看黄的网站| 色综合久久久久综合体桃花网| 国产一级强片在线观看| 高清一级做a爱过程不卡视频| 麻豆午夜视频| 好男人天堂网 久久精品国产这里是免费 国产精品成人一区二区 男人天堂网2021 男人的天堂在线观看 丁香六月综合激情 | 成人免费福利片在线观看| 二级特黄绝大片免费视频大片| 色综合久久天天综合| 午夜精品国产自在现线拍| 日韩一级黄色片| 欧美激情一区二区三区在线| 成人影院一区二区三区| 久久久成人网| 国产高清在线精品一区a| 香蕉视频亚洲一级| 国产精品自拍亚洲| 成人a大片在线观看| 色综合久久久久综合体桃花网| 日本在线不卡视频|