python如何处理数据_python数据处理之如何选取csv文件中某几行的数据

前言

有些人看到这个问题觉得不是问题,是嘛,不就是df.col[]函数嘛,其实忽略了一个重点,那就是我们要省去把csv文件全部读取这个过程,因为如果在面临亿万级别的大规模数据,得到的结果就是boom,boom,boom。

我们要使用一下现成的函数里面的参数nrows,和skiprows,一个代表你要读几行,一个代表你从哪开始读,这就可以了,比如从第3行读取4个

示例代码

import pandas as pd

df = pd.DataFrame({'a':[1,2,3,4,5,6,7,8,9],'b':[22,33,44,55,66,77,88,99,10]})

df.to_csv('test.csv')

dt = pd.read_csv('test.csv',skiprows=5,nrows=3)

print(dt)

out:

4 5 66

0 5 6 77

1 6 7 88

2 7 8 99

3 8 9 10

就可以了,不过这个列头不知道是怎么回事,顺便如果想根据列值找index,可以参考下面的

然后

df = pd.DataFrame({'BoolCol': [1, 2, 3, 3, 4],'attr': [22, 33, 22, 44, 66]},

index=[10,20,30,40,50])

print(df)

a = df[(df.BoolCol==3)&(df.attr==22)].index.tolist()

print(a)

df = pd.DataFrame({'BoolCol': [1, 2, 3, 3, 4],'attr': [22, 33, 22, 44, 66]},

index=[10,20,30,40,50])

print(df)

a = df[(df.BoolCol==3)&(df.attr==22)].index.tolist()

print(a)

问题得到了解决

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对谷谷点程序的支持。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/428279.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

HTML文件可通过www进行传输,使用 zssh 进行 Zmodem 文件传输

Zmodem 最早是设计用来在串行连接(uart、rs232、rs485)上进行数据传输的,比如,在 minicom 下,我们就可以方便的用 Zmodem (说 sz 、rz 可能大家更熟悉)传输文件。只不过串口本身传输速度不快,文件大的话会让人有点崩溃。没有彻底把…

Linux下使用popen()执行shell命令

转载于&#xff1a;https://www.cnblogs.com/caosiyang/archive/2012/06/25/2560976.html 简单说一下popen()函数 函数定义 #include <stdio.h>FILE * popen(const char *command , const char *type ); int pclose(FILE *stream); 函数说明 popen()函数通过创建一个管道…

centos7安装python3.7.4_Centos7升级Python3.7.4

和大家技术分享一下当我们安装完成Centos7后&#xff0c;默认系统Python的版本为2.7.5。我们希望将Python升级到最新版本。 1、安装依赖项 yum install -y openssl-devel openssl-static zlib-devel lzma tk-devel xz-devel bzip2-devel ncurses-devel gdbm-devel readline-dev…

中年人可以学计算机吗,中老年人学计算机与上网的操作系统是windows xp还是window7...

中老年人学计算机与上网的操作系统是windows xp还是window7《中老年人学电脑与上网》想买这本书给爸妈学&#xff0c;但是不知道操作系统什么&#xff0c;简介上也没有写&#xff0c;有没有知道的告诉我是用什么系统教的。谢谢 我是想买这本书&#xff0c;请看过这本书的人告诉…

MyEclipse移动开发教程:迁移HTML5移动项目到PhoneGap(二)

MyEclipse开年钜惠 在线购买低至75折&#xff01;立即开抢>> 【MyEclipse最新版下载】 二、将文件从HTML5项目复制到PhoneGap项目中 1. 在HTML5 app项目的www/文件夹的资源中&#xff0c;单击右键&#xff0c;然后选择Copy。 从HTML5项目复制www资源2. 将资源粘贴到新Pho…

pb graph鼠标移上显示数据_Plotly数据可视化:离线版、微软vscode版的Python的基本作图...

1 介绍&#xff1a;1.1 Plotly 是一款用来做数据分析和可视化的在线平台&#xff0c;功能非常强大。1.2 Plotly是一个非常著名且强大的开源数据可视化框架&#xff0c;它通过构建基于浏览器显示的web形式的可交互图表来展示信息。1.3 具有多种语言python、javascript、matlab、…

Wireshark抓包常见问题解析(转)

1. tcp out-of-order&#xff08;tcp有问题&#xff09; 解答&#xff1a; 1&#xff09;、 应该有很多原因。但是多半是网络拥塞&#xff0c;导致顺序包抵达时间不同&#xff0c;延时太长&#xff0c;或者包丢失&#xff0c;需要重新组合数据单元 因为他们可能是通过不同的路径…

计算机专业论文范文精选,计算机毕业论文提纲范文精选

论文提纲&#xff0c;是指论文作者动笔行文前的必要准备&#xff0c;是论文构思谋篇的具体体现。下面是CN人才网为大家整理的计算机毕业论文提纲范文精选&#xff0c;欢迎参考~计算机毕业论文提纲范文精选论文题目 通过QoS配置解决大流量问题副标题 通过QoS配置保证智能化小区的…

centos安装无线网卡驱动_CentOS下显卡驱动安装的相关思考

背景&#xff1a;最近在安装显卡驱动&#xff0c;查找了一些网上的教程&#xff0c;但总感觉思路不够清晰&#xff0c;没办法弄清背后涉及的Linux原理&#xff0c;于是参考网上教程&#xff0c;并查阅了相关资料&#xff0c;希望能对显卡驱动安装作一个梳理&#xff0c;以做记录…

获取select被选中的option的值

<select id"select"> <option>绥江</option> <option>西江</option> <option>北江</option> <option>贺江</option> <option>新兴江</option> </select> $(funct…

红石32位cpu通用计算机,我的世界无命令方块32位红石电脑装置详解

来源&#xff1a;游戏园日期&#xff1a;2019-05-14 04:03:07我的世界无命令方块32位红石电脑装置详解。那下面给大家分享的是我的世界中的一个叫做机器编号为RSC-3230的红石电脑装置哦~有喜欢的顽疾啊不妨进来看看下的这个电脑哦~喜欢的话还可以下载下面的存档哦~本作品是一台…

c++心形代码_c语言心形告白代码实现

c语言心形告白代码实现1.彩色告白includeincludeincludeincludedefine U 0.1define V 0.053void SetColor(unsigned short ForeColor,unsigned short BackGroundColor){HANDLE hConGetStdHandle(STDOUTPUTHANDLE);SetConsoleTextAttribute(hCon,(ForeColor%16)|(BackGroundColo…

python字符串字面量有哪四种定义方式_Python学习笔记(四)字符串型

字符串是 Python 中最常用的数据类型。我们可以使用引号(或")来创建字符串。 在最新的Python 3版本中&#xff0c;字符串是以Unicode编码的&#xff0c;也就是说&#xff0c;Python的字符串支持多语言。 创建字符串很简单&#xff0c;只要为变量分配一个值即可 View Code …

python之os、sys和random模块

import os# print(os.getcwd())#获取当前目录&#xff0c;绝对路径# print(os.chdir(../))#更改当前目录&#xff0c;../的意思是退回上一级目录# print(os.getcwd())# print(os.curdir)#当前目录&#xff0c;相对路径# print(os.pardir)#当前目录&#xff0c;相对路径# print(…

审计署计算机培训心得体会,审计署计算机中级培训心得体会2018

《审计署计算机中级培训心得体会.doc》由会员分享&#xff0c;可免费在线阅读全文&#xff0c;更多与《审计署计算机中级培训心得体会2018》相关文档资源请在帮帮文库(www.woc88.com)数亿文档库存里搜索。1、要&#xff0c;课前要有一定的预习&#xff0c;预习时不必太细致&…

python执行效率有多低_python – Scapy的低性能

我正在创建一个脚本,将来自Tap0的所有流量发送到Eth0,并将来自Eth0的所有流量发送到Tap0.在网上找到很多例子后,我设法让它发挥作用.我遇到的问题是性能非常低. 在不使用脚本的情况下在2个VM之间进行ping操作,所需时间不到1毫秒.使用脚本需要大约15ms. 当我使用scp从VM向另一个…

用计算机写词,用遗传算法让电脑写宋词

该楼层疑似违规已被系统折叠 隐藏此楼查看此楼相逢缥缈,窗外又拂晓.长忆清弦弄浅笑,只恨人间花少. *菊不待清尊,相思飘落无痕.风雨重阳又过,登高多少黄昏.这首《清平乐.*菊》的作者是一台计算机&#xff0c;比我写的好&#xff0c;十分佩服。且平仄、押韵十分工整&#xff0c…

基本数据类型____字典

字典&#xff08;dictionary&#xff09; 形式&#xff1a;qq {key&#xff1a;value,key1&#xff0c;value1}>每一对用分号&#xff08;;&#xff09;,没两队之间用逗号(,)作用&#xff1a;存多个值&#xff0c;key-value键值对的方式存&#xff0c;取值速度快定义&#…

北京交通大学计算机系2018年录取情况,北京交通大学2018年高招录取分数线汇总...

近日&#xff0c;北京交通大学2018年高招录取分数线出炉&#xff0c;考生可查看理工、文史类一本线情况&#xff0c;具体内容如下&#xff1a;为方便您第一时间了解我校在各省的录取分数情况&#xff0c;特将相关数据发布&#xff0c;若数据有误&#xff0c;请以省招办最终公布…

[BZOJ 3647]

BZOJ 3647——可持久化并查集加强版 不会可持久化并查集先去做http://www.cnblogs.com/Fish-/p/8242582.html. 幼稚的以为直接交原来的就好了&#xff0c;结果T了&#xff01; 加个路径压缩&#xff0c;but一直RE&#xff0c;请了几位大神还是解决不了。。所以先留个坑。。 #in…