Python(四十九)——requests和httpx

这篇具有很好参考价值的文章主要介绍了Python(四十九)——requests和httpx。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

Python(四十九)——requests和httpx

1. 获取cookies

1.1 requests获取cookies

1.1.1 直接获取cookies

response = requests.get(url=url, headers=headers)
response.cookies.items()

1.1.2 session 获取cookies

session = requests.session()

1.2 httpx获取cookie

response.cookies.items()

1.3 获取Set-Cookie

response = requests.get(url=url, headers=headers)
set_cookies = response.headers.get('Set-Cookie')
# 注意,如果是重定向的话,会获取不到set-cookie,需要allow_redirects=False来禁止重定向
response = requests.get(url=url, headers=headers, allow_redirects=False)

1.4 cookie 失效

3.1 将cookie放在cookies参数里

1.5 获取cookie的问题

1.5.1 发生了302重定向

看请求是否发生了302重定向
使用requests.Session()方法,会使该连接持久化文章来源地址https://www.toymoban.com/news/detail-824011.html

1.5.2 发生了跨域请求

2、添加代理(requests和httpx的代理样式不一样)

2.1 requests添加代理


proxies={
    'http': 'http://ip:port',
    'https': 'http://ip:port',
}

2.1.1get或者post

import requests
url=""
response=requests.get(url=url, proxies=proxies)

2.1.2 session

import requests
url=""
session = requests.session()
session.proxies.update(proxy)

2.2 httpx添加代理

import httpx
proxies = {
    'http://': 'http://ip:port',
    'https://': 'http://ip:port',
}
url = ""
response = httpx.get(url=url, proxies=proxies)

到了这里,关于Python(四十九)——requests和httpx的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Python武器库开发-武器库篇之Git的分支使用(三十九)

    Git分支是一种用于在项目中并行开发和管理代码的功能。分支允许开发人员在不干扰主要代码的情况下创建新的代码版本,以便尝试新功能、修复错误或独立开发功能。一般正常情况下,开发人员开发一个软件,会有两个分支,一个叫 developer (开发分支),一个叫主分支(

    2024年02月03日
    浏览(42)
  • Python爬虫开发:Scrapy框架与Requests库

    Python爬虫开发中有两个非常流行的工具:Scrapy框架和Requests库。它们各自有自己的优点和适用场景。 Scrapy Scrapy是一个为了爬取网站并提取结构化数据而编写的应用框架,可以非常方便地实现网页信息的抓取。Scrapy提供了多种可配置、可重用的组件,如调度器、下载器、爬虫和

    2024年02月19日
    浏览(56)
  • ELK日志收集系统(四十九)

    提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 目录 前言 一、概述 二、组件 1. elasticsearch 2. logstash 2.1 工作过程 2.2 INPUT 2.3  FILETER 2.4  OUTPUTS 3. kibana 三、架构类型 3.1 ELK 3.2 ELKK 3.3 ELFK 3.5 EFK 四、案例 ELK日志收集系统是一种常用的开源系统,由三个主

    2024年02月10日
    浏览(43)
  • 第四十九回:DefaultTabBarController Widget

    我们在上一章回中介绍了TabBar Widget相关的内容,本章回中将介绍 DefaultTabBarController Widget.闲话休提,让我们一起Talk Flutter吧。 我们在这里说的 DefaultTabBarController Widget没有具体的物理形态,它主要充当TabBar的载体,进而把TabBar从界面上显示出来。本章回中将详细介绍它的使用方

    2024年02月08日
    浏览(46)
  • C#(四十九)之关于string的一些函数

    1:startswith 字符串以。。。开头 2:endswith 字符串以。。。结尾 3:IndexOf 查找第一次在字符串中出现的位置(字符串,找到那)如果找不到,返回-1 4:IndexOfAny 同时搜索多个字符串,直到找到其中一个位置 5:截取字符串substring (从那开始,截取几位) 6:拆分字符串 split 变

    2024年02月12日
    浏览(41)
  • 【Python爬虫开发基础⑪】requests库概述(GET和POST请求)

    🚀 个人主页 :为梦而生~ 关注我一起学习吧! 💡 专栏 :python网络爬虫从基础到实战 欢迎订阅!后面的内容会越来越有意思~ 💡 往期推荐 : ⭐️前面比较重要的 基础内容 : 【Python爬虫开发基础⑥】计算机网络基础(Web和HTTP) 【Python爬虫开发基础⑦】urllib库的基本使用

    2024年02月12日
    浏览(45)
  • 【100天精通python】Day42:python网络爬虫开发_HTTP请求库requests 常用语法与实战

    目录 1 HTTP协议 2  HTTP与HTTPS 3 HTTP请求过程  3.1 HTTP请求过程 3.2 GET请求与POST请求

    2024年02月12日
    浏览(62)
  • 第四十九章 Unity UI适配器组件

    首先,我们介绍内容大小适配器 (Content Size Fitter)组件。 我们新建一个“SampleScene6.unity”场景,然后添加一个Text UI元素,让其居中显示,并且尺寸设置为50*30。   由于我们设置Text的尺寸在水平方向上面太小,也就是Width值太小,里面的内容“New Text”无法全部显示。当然,我

    2024年02月04日
    浏览(50)
  • 大数据Flink(四十九):框架版本介绍和编程语言选择

    文章目录 框架版本介绍和编程语言选择 一、框架版本介绍 二、编程语言选择

    2024年02月15日
    浏览(53)
  • 《Netty》从零开始学netty源码(四十九)之PoolArena

    Netty中分配内存是委托给PoolArena来管理的,它主要有两个实现类: 默认情况下使用的DirectArena,它的数据结构如下: 从属性中我们看到PoolArena主要分配三种类型的内存,小于32KB的分配small类型的PoolSubpage,存储在smallSubpagePools,32KB~4MB的分配normal类型的PoolChunk,根据其利用率的

    2024年02月02日
    浏览(35)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包