爬虫—响应页面乱码问题解决方法

这篇具有很好参考价值的文章主要介绍了爬虫—响应页面乱码问题解决方法。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

爬虫—响应页面乱码问题解决方法

案例:腾牛网图片抓取

源代码如下:

import requests

url = 'https://www.qqtn.com/wm/meinvtp_1.html'
headers = {
    'user-agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36'
}

res = requests.get(url, headers=headers
data = res.content.decode()
print(data)

执行之后,报错如下:

爬虫—响应页面乱码问题解决方法,笔记,总结经验,爬虫案例,爬虫,python

解决办法:

  1. 方法一,设置解码格式为’GBK’
data = res.content.decode('GBK')
print(data)

运行结果如下:

爬虫—响应页面乱码问题解决方法,笔记,总结经验,爬虫案例,爬虫,python文章来源地址https://www.toymoban.com/news/detail-813181.html

  1. 方法二,自动获取解码格式
# 自动获取解码格式
res.encoding = res.apparent_encoding
data = res.text
print(data)

到了这里,关于爬虫—响应页面乱码问题解决方法的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 【zabbix】解决zabbix在web页面显示中文乱码问题

    问题所在处:在web页面来添加图形,实时监控数据的时候我们一般会写中文,可是,添加完成之后发现中文是乱码,那么我们这期就来解决这个问题;图如下👇 1、在zabbix服务端找到 defines.inc.php 文件;找不到的可以使用find 方法查找; 这里我们可以看到查找到了好几个,那

    2024年01月23日
    浏览(42)
  • Tomcat+Eclipse乱码问题解决方法

      概述 乱码问题是大家在日常开发过程中经常会遇到的问题,由于各自环境的不同,解决起来也费时费力,本文主要介绍一般性乱码问题的解决方法与步骤,开发工具采用Eclipse+Tomcat,统一设置项目编码UTF-8为例,供大家参考。 解决方法与步骤 步骤一:首先,检查JSP页面声明

    2024年02月13日
    浏览(37)
  • 解决JavaScript中文乱码问题的方法

    在JavaScript编程中,处理字符串时经常会遇到中文乱码的问题。这种问题通常发生在字符串截取操作中,特别是当截取的字符串中包含中文字符时。本文将介绍一些解决JavaScript中文乱码问题的方法,并提供相应的源代码示例。 方法一:使用Unicode编码 一种常见的解决方案是使

    2024年02月04日
    浏览(46)
  • IDEA中解决中文乱码问题的方法

    在IDEA中创建的java项目,会遇到一些中文乱码问题。一般都是在控制台上会显示中文乱码。 则可以用以下几种方式进行操作。 在IDEA左上角File----Setting中找到文件编码,如下: 如果使用的有Tomcat服务器的话,可以进行如下操作: 在IDEA上方菜单栏中找到Help----Edit Custome VM Opti

    2024年02月09日
    浏览(74)
  • Hive中处理中文乱码问题的解决方法

    中文乱码是在处理大数据时经常遇到的问题之一,尤其是在使用Hive进行数据分析和查询时。本文将介绍一些解决Hive中文乱码问题的方法,并提供相应的源代码示例。 设置Hive的字符集编码 在Hive中,可以通过设置字符集编码来解决中文乱码问题。通过在Hive会话中设置\\\"client.

    2024年02月04日
    浏览(40)
  • 串口输出乱码问题的解决方法汇总(持续更新):

    平时工作中程序员在调试时总会用到串口打印数据以及一些标志位查看程序是否出现问题。但是在使用时总会遇到各种各样的问题,最常见的就是输出乱码问题(指的是有收到数据但数据显示的是一堆不认识的汉字或字符),下面就我遇到过的串口乱码问题的相关几种解决方

    2024年02月02日
    浏览(48)
  • idea下tomcat运行乱码问题解决方法

    idea虚拟机选项添加 -Dfile.encoding=UTF-8

    2024年02月15日
    浏览(43)
  • Android问题笔记 - Android Studio日志乱码原因与解决

    专栏分享 点击跳转=Unity3D特效百例 点击跳转=案例项目实战源码 点击跳转=游戏脚本-辅助自动化 点击跳转=Android控件全解手册 点击跳转=Scratch编程案例 点击跳转=软考全系列 众所周知,人生是一个漫长的流程,不断 克服困难 ,不断反思前进的过程。在这个过程中会产生很多对

    2024年02月03日
    浏览(57)
  • STM32使用串口printf乱码问题解决方法

    使用stm32系列单片机串口打印问题,在使用HAL库重新定义printf为串口输出后,输出的内容全都是乱码,试了网上的方法后还是乱码。  像这样的    最后发现是串口调试助手和keil的文字编码方式不同, keil中是GB 2312,串口调试助手是UFT_8,所以打印出来才会乱码  将串口调试助

    2024年02月11日
    浏览(38)
  • VScode注释中文时乱码怎么办?VScode中文注释乱码问题的解决方法

    不管是在哪一种编辑器上,都会有自动默认的一种编码格式,在vscode编辑器中默认的编码格式是utf-8,但是在注释的时候,因为使用的字符会不一样,所以可能存在着默认的配置文件,有可能是其他的编码格式,所以因为编码格式不对应,导致了在注释的时候出现了乱码的情

    2024年02月11日
    浏览(63)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包