大战熟女丰满人妻av-荡女精品导航-岛国aaaa级午夜福利片-岛国av动作片在线观看-岛国av无码免费无禁网站-岛国大片激情做爰视频

專注Java教育14年 全國咨詢/投訴熱線:400-8080-105
動力節點LOGO圖
始于2009,口口相傳的Java黃埔軍校
首頁 hot資訊 獲取cookie的幾種方式

獲取cookie的幾種方式

更新時間:2021-08-05 16:52:56 來源:動力節點 瀏覽8282次

在爬蟲中cookie是非常有用的,可以解決反爬,封號等問題。接下來我們來說說獲取cookie的集中方式。

這里采用python2.7,本來我都是用python3.6的,來了公司之后,公司適用版本2.7,就2.7咯,反正就寫法上面有一些區別

第一種:mechanize

首先我們要使用mechanize,第一步:

pip install mechanize

第二步編寫獲取cookie代碼:

import os
import mechanize
import cookielib,re

br = mechanize.Browser()
cj = cookielib.LWPCookieJar()
br.set_cookiejar(cj)

br.set_handle_equiv(True)
br.set_handle_gzip(True)
br.set_handle_redirect(True)
br.set_handle_referer(True)
br.set_handle_robots(False)
br.set_handle_refresh(mechanize._http.HTTPRefreshProcessor(), max_time=1)
br.set_debug_http(True)

br.addheaders = [('User-agent', '用戶ua')]
br.set_proxies({"http": "代理"})
response = br.open('https://www.amazon.com')



cj = br._ua_handlers['_cookies'].cookiejar
for cookie in cj:
    print("cookieName:"+cookie.name)
    print("cookieValue:"+cookie.value)

cookie = [item.name + ":" + item.value for item in cj]
cookiestr={}
for item in cookie:
    name,value = item.split(":")
    cookiestr[name]=value

運行結果:

獲取cookie

第二種:urllib

import urllib2
import cookielib
from http import cookiejar
from bs4 import BeautifulSoup

User_Agent = 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'
header = {}
header['User-Agent'] = User_Agent

cookie = cookiejar.CookieJar()
cookie_handle=urllib2.HTTPCookieProcessor(cookie)
cookie_opener = urllib2.build_opener(cookie_handle)

# proxy_support = urllib2.ProxyHandler({"http":"5.62.157.47:8085"})
# proxy_opener = urllib2.build_opener(proxy_support)

urllib2.install_opener(cookie_opener)
# urllib2.install_opener(proxy_opener)

request = urllib2.Request("https://www.amazon.com",headers=header)
response = urllib2.urlopen(request)

for item in cookie:
    print('Name = ' +item.name)
    print('Value =' +item.value)

運行結果:

獲取cookie

第三種:requests

import requests
headers = {'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'}
r = requests.get('https://www.amazon.com', headers = headers)
for cookie in r.cookies:
    print(cookie.name)
    print(cookie.value)
    print("=========")

運行結果:

獲取cookie

第四種:selenium(個人感覺這個雖然加載比較慢,但是獲取cookie最全)

pip install selenium

代碼:

from selenium import webdriver
driver = webdriver.Chrome(executable_path='d:/seop/chromedriver.exe')
driver.get("https://www.amazon.com")
#for c in cookiestr.keys():
#    driver.add_cookie({'name':c,'value':cookiestr[c]})

#driver.get("https://www.amazon.com")

cookie = [item["name"] + "=" + item["value"] for item in driver.get_cookies()]
cookiestr = ';'.join(item for item in cookie)

運行結果:

獲取cookie

以上就是動力節點小編介紹的"獲取cookie的幾種方式",希望對大家有幫助,想了解更多可查看cookie工作原理。動力節點在線學習教程,針對沒有任何Java基礎的讀者學習,讓你從入門到精通,主要介紹了一些Java基礎的核心知識,讓同學們更好更方便的學習和了解Java編程,感興趣的同學可以關注一下。

提交申請后,顧問老師會電話與您溝通安排學習

免費課程推薦 >>
技術文檔推薦 >>
主站蜘蛛池模板: 日本乱人伦片中文字幕三区 | 国产区综合 | 成人免费视频在线 | 欧美日韩中文字幕在线观看 | 26uuu中文字幕 | 爆操白虎逼 | 四虎影音在线观看 | 亚洲不卡一区二区三区在线 | 99热热久久 | 男女羞羞视频免费观看 | 97视频在线观看视频最新 | 国产乱人伦精品一区二区 | 久久香蕉国产线看观看亚洲片 | 国产成社区在线视频观看 | 免费观看黄a一级视频日本 免费观看黄色 | 全黄大全大色全免费大片 | 久久久久久久久久免费视频 | 中文字幕精品视频在线观看 | 日本欧美一区二区三区乱码 | 日本三级11k影院在线 | 亚洲国产欧美国产第一区二区三区 | 国产高清视频青青青在线 | 日韩在线国产精品 | 欧美性一区二区三区五区 | 在线亚洲欧美日韩 | 久久精品这里只有精品 | 伊人五月 | 欧美激情在线一区二区三区 | 在线日本妇人成熟免费观看 | 射吧亚洲| www.99色.com| 久久影视免费体验区午夜啪啪 | 天天做天天爱夜夜想毛片 | 一级毛片高清大全免费观看 | 九九精品免费观看在线 | 九九热在线免费观看 | 色久优优 欧美色久优优 | www久久久久 | 99久久精品免费观看国产 | 免费的性生活视频 | 色花堂国产精品第二页 |