python 数据提取及拆分的实现代码

更新时间：2019年08月26日 11:40:08 作者：杜凯杰

这篇文章主要介绍了python 数据提取及拆分的实现代码，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧

K线数据提取

#### 原有数据集如下：

依据原有数据集格式，按要求生成新表:

1、每分钟的close数据的第一条、最后一条、最大值及最小值，

2、每分钟vol数据的增长量（每分钟vol的最后一条数据减第一条数据）

3、汇总这些信息生成一个新表

（字段名：[‘time',‘open',‘close',‘high',‘low',‘vol']）

import pandas as pd 
import time 
start=time.time()
df=pd.read_csv('data.csv')
df=df.drop('id',axis=1)    #删除id列 
df1=pd.DataFrame(columns=['time','open','close','high','low','vol'])#新建目标数据表

for i in df.groupby('time'):   #按时间分组
  new_df=pd.DataFrame(columns=['time','open','close','high','low','vol']) #新建空表用于临时转存要求数据
  new_df.time=i[1].time[0:1]  #取每组时间为新表时间
  new_df.open=i[1].close[0:1]  #取每组第一个close数据为新表open数据
  new_df.close=i[1]['close'].iloc[-1]  #取每组最后一个close数据为新表close数据
  new_df.high=i[1]['close'].max()  #取每组close数据最大值为新表hige数据
  new_df.low=i[1]['close'].min()  #取每组close数据最小值为新表low数据
  new_df.vol=i[1]['vol'].iloc[-1] - i[1]['vol'].iloc[0] #用每组vol数据最大值减去最小值为新表vol数据
  df1=pd.concat([new_df,df1],axis=0)  #纵向合并数据到目标数据表
  
df2=df1.sort_values('time')  #按time列值进行排序
df2.reset_index(inplace=True, drop=True)  #重置行索引
print(df2)  #打印目标数据表
stop=time.time()  #查看耗时
print('共计耗时：{}秒'.format(stop-start))

在这里插入图片描述

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。

您可能感兴趣的文章:

如何用python将文件夹内多个excel表格合并成总表
前几天遇见这么一个问题,手上有很多张表格,这些表格中都只有一个sheet,需要把这些表汇总到一张表,下面这篇文章主要给大家介绍了关于如何用python将文件夹内多个excel表格合并成总表的相关资料,需要的朋友可以参考下
2023-06-06
Django更新models数据库结构步骤
这篇文章主要介绍了Django更新models数据库结构的操作步骤，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2020-04-04
利用PyCharm Profile分析异步爬虫效率详解
这篇文章主要给大家介绍了关于如何利用PyCharm Profile分析异步爬虫效率的相关资料，文中通过示例代码介绍的非常详细，对大家学习或者使用PyCharm具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧
2019-05-05
Pytorch中index_select() 函数的实现理解
这篇文章主要介绍了Pytorch中index_select() 函数的实现理解，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2019-11-11
python np.arange 步长0.1的问题需要特别注意
这篇文章主要介绍了python np.arange 步长0.1的问题需要特别注意，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教
2022-05-05
Win10系统下Pytorch环境的搭建过程
今天给大家带来的是关于Python的相关知识,文章围绕着Win10系统Pytorch环境搭建过程展开,文中有非常详细的介绍及图文示例,需要的朋友可以参考下
2021-06-06
Python正规则表达式学习指南
本文介绍了Python对于正则表达式的支持，包括正则表达式基础以及Python正则表达式标准库的完整介绍及使用示例，非常不错，具有参考借鉴价值，需要的朋友一起学习吧
2016-08-08
用python一行代码得到数组中某个元素的个数方法
今天小编就为大家分享一篇用python一行代码得到数组中某个元素的个数方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2019-01-01
ActiveMQ:使用Python访问ActiveMQ的方法
今天小编就为大家分享一篇ActiveMQ:使用Python访问ActiveMQ的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2019-01-01
Python报错SyntaxError:unexpected EOF while parsing的解决办法
在运行或编写一个程序时常会遇到错误异常,这时python会给你一个错误提示类名,告诉出现了什么样的问题,下面这篇文章主要给大家介绍了关于Python报错SyntaxError:unexpected EOF while parsing的解决办法,需要的朋友可以参考下
2022-07-07