pandas(九) 数据读取-读取csv、excle、txt、mysql数据

这篇具有很好参考价值的文章主要介绍了pandas(九) 数据读取-读取csv、excle、txt、mysql数据。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、Pandas需要先读取表格类型的数据,然后进行分析

数据类型 说明 读取方法
CSV. tsV. txt 用逗号分隔、tab分割的纯文本文件 pd.read_csv
excel xls、xlsx文件 pd.read_excel
mysql 关系型数据库表 pd.read_sql
二、Pandas 读取数据

数据资料:https://grouplens.org/datasets/movielens/

  • 读取CSV, 使用默认的标题行、逗号分隔符号

    import pandas as pd
    fpath = '/Users/python/Desktop/means/ml-25m/ratings.csv'
    ratings = pd.read_csv(fpath)
    
  • 读取txt, 自己指定分隔符,标题行

    ratings = pd.read_csv(
        fpath,
        sep='\t',     # 指定分隔符、列名
        header=None,  # 告诉pd文件没有标题行
        names=['userId','movieId','rating','timestamp'] # 自己设置标题行
    )
    
  • 读取excel文件,使用默认的标题行、逗号分隔符

    数据有自己的标题行
    ratings = pd.read_excel(fpath)
    
  • 读取MySQL数据库

    import pymysql
    conn = pymysql.connect(
        host='',
        user='',
        password='',
        database='demo',
        charset='utf8'
    )
    ratings = pd.read_sql(sql='select * from sys_user', con=conn)
    
三、Pandas 其它操作
  • 查看前几行数据

    ratings.head()
    
     userId	movieId	rating	timestamp
    0	1	296	5.0	1147880044
    1	1	306	3.5	1147868817
    2	1	307	5.0	1147868828
    3	1	665	5.0	1147878820
    4	1	899	3.5	1147868510
    
  • 查看数据的形状,返回(行数、列数)

    ratings.shape
    (25000095, 4)   数据集:包含 250000954
  • 查看列明列表

    ratings.columns
    
    输出位列的名字
    Index(['userId', 'movieId', 'rating', 'timestamp'], dtype='object')
    
  • 查看索引列

    ratings.index
    
    输出开始行数,结束行数
    RangeIndex(start=0, stop=25000095, step=1)
    
  • 查看每一列数据类型文章来源地址https://www.toymoban.com/news/detail-523852.html

    ratings.dtypes
    
    输出: 每一列的数据类型
    userId         int64
    movieId        int64
    rating       float64
    timestamp      int64
    dtype: object
    

到了这里,关于pandas(九) 数据读取-读取csv、excle、txt、mysql数据的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Python两种读取txt与csv文件方式(利用numpy处理数据)

    一共80个数据(只截取前10个数据) 在excel中显示的内容 在pycharm中显示的内容 一共80个数据 在记事本中显示的内容 在pycharm中显示的内容 1、读取所有内容 data_pd打印结果 2、数据转为numpy data_np打印结果 1、读取所有内容 data_pd打印结果 2、数据转为numpy data_np打印结果 1、读取所

    2023年04月11日
    浏览(58)
  • 100天精通Python(数据分析篇)——第56天:Pandas读写txt和csv文件(read_csv、to_csv参数说明+代码实战)

    文本文件,主要包括csv和txt两种等,相应接口为 read_csv() 和 to_csv(),分别用于读写数

    2023年04月08日
    浏览(58)
  • 【数据处理】Pandas读取CSV文件示例及常用方法(入门)

    查看读取前10行数据 2067 向前填充 指定列的插值填充 使用某数据填充指定列的空值 示例: 类似切片 array([‘SE’, ‘cv’, ‘NW’, ‘NE’], dtype=object) 类似数据库查询中的groupby查询 先添加新的一列按月将数据划分 聚合,对指定的列按月划分求平均值等 min 最小值 max 最大值 sum

    2024年02月06日
    浏览(257)
  • 如何使用pandas读取csv文件中的某一列数据

    使用pandas读取csv文件中的某一列数据,可以这样做: 先导入pandas模块: import pandas as pd 使用 pd.read_csv 函数读取csv文件: df = pd.read_csv(\\\"文件名.csv\\\") 使用 df[\\\"列名\\\"] 读取某一列数据: column = df[\\\"列名\\\"] 例如,如果你有一个csv文件叫做 example.csv ,并且有一列叫做 age ,你可以这样

    2024年02月13日
    浏览(48)
  • ELK(Elasticsearch、Kibana、Logstash)以及向ES导入mysql数据库数据或CSV文件数据,创建索引和可视化数据

    地址:Past Releases of Elastic Stack Software | Elastic 在Products和version处分别选择需要下载的产品和版本,E(elasticsearch)L(logstash)K(kibana)三者版本必须相同 将下载好的elk分别解压到相同路径下 本文中elasticsearch=E=ES=es;L=logstash;K=kibana 一般情况下使用默认配置即可,下面对我的

    2024年02月15日
    浏览(58)
  • Flink读取mysql数据库(java)

    代码如下: 运行结果如下:

    2024年02月12日
    浏览(42)
  • unity链接MySQL数据库,并实现游戏数据的存储和读取。(一)

    先说明一下,本次测试中MySQL是安装在本机上的,如果你要想实现在任何地方访问你的数据库建议使用阿里云的RDS云数据库,你需要注册一个阿里云的账号,然后购买实例等等,这些购买实例、创建白名单、创建数据库、创建账号等在阿里云的帮助文档里都写的很详细了,翻

    2024年02月07日
    浏览(47)
  • unity存储信息的方式,保存读取背包、游戏进度,连接MySQL数据库

    为了在Unity中存储信息,有几种方法可供选择。最常见的方法是 PlayerPrefs、Serialization和Database 。 PlayerPrefs是一种简单的存储小量数据(如玩家偏好或游戏设置)的方法。它易于使用,不需要任何外部库。但是,不建议用于存储大量数据或敏感信息。 Serialization是另一种在Unit

    2024年02月09日
    浏览(62)
  • 【Python笔记】Python + xlrd + pymysql读取excel文件数据并且将数据插入到MySQL数据库里面

    这篇文章,主要介绍Python + xlrd + pymysql读取excel文件数据并且将数据插入到MySQL数据库里面。 目录 一、Python读取excel 1.1、安装xlrd库 1.2、打开excel工作簿 1.3、获取sheet工作表 1.4、操作row数据行 1.5、操作column数据列 1.6、操作单元格 二、读取excel数据保存到MySQL 2.1、完整代码 2.

    2024年02月15日
    浏览(58)
  • python读取txt文件内容,写入csv文件中去。

    txt文件中的内容大概是这样的: 2.在图3中,当开关断开时,R1、R2_______(串联/并联),当开关闭合时, 被短路。开关由断开转为闭合时,总电阻 ,总电流_______,通过R2的电流_______(变大/变小/不变)。 3.如图3,当开关闭合时,R2两端电压为3V,若R2=10Ω,则电流为_______。断开

    2023年04月08日
    浏览(68)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包