python爬虫-获取某某在线翻译的查询结果，爬取json文件并解析-Toy模板网

这篇具有很好参考价值的文章主要介绍了python爬虫-获取某某在线翻译的查询结果，爬取json文件并解析。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

从基础步骤下手

# 指定url
# 发出请求，get或post
# 获取响应
# 把目标文件转存为字符串形式
# 持久性保存

正确获取response数据

import requests

header = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/113.0.0.0 Safari/537.36 Edg/113.0.1774.50'}
userInput = input("请输入检索内容：")
# 指定url
url='https://fanyi.**.com/sug'
# 发出请求，get或post
data={'kw':userInput}
# 获取响应
response = requests.post(url=url,data=data,headers=header)
print(response.text)

关于url获取方式

python爬虫-获取某某在线翻译的查询结果，爬取json文件并解析

url，请求方式，请求格式，都在此请求的header中
（此内容浏览器不同显示内容应该也是一样的，我用的edge浏览器，我也试过chrom浏览器，效果一样）

python爬虫-获取某某在线翻译的查询结果，爬取json文件并解析

关于post方法的参数

ctrl + b进入方法体内即可
python爬虫-获取某某在线翻译的查询结果，爬取json文件并解析

关于payload参数填入

python爬虫-获取某某在线翻译的查询结果，爬取json文件并解析

运行效果

解读response.text，这是一个包含Unicode字符的JSON字符串编码

也许我们需要翻译一下

python爬虫-获取某某在线翻译的查询结果，爬取json文件并解析

解析json数据到文件中

将API接口返回的JSON数据解析为Python字典对象，并将其以JSON格式写入文件中

dic_obj = response.json()
fp=open(userInput + '.json','w',encoding='utf-8')
json.dump(dic_obj,fp=fp,ensure_ascii=False)

完整代码

import json
import requests

header = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/113.0.0.0 Safari/537.36 Edg/113.0.1774.50'}
userInput = input("请输入检索内容：")
# 指定url
url='https://fanyi.baidu.com/sug'
# 发出请求，get或post
data={'kw':userInput}
# 获取响应
response = requests.post(url=url,data=data,headers=header)

dic_obj = response.json()
fp=open(userInput + '.json','w',encoding='utf-8')
json.dump(dic_obj,fp=fp,ensure_ascii=False)