熊猫:将新列添加到作为索引列副本的数据框

Posted

技术标签:

【中文标题】熊猫:将新列添加到作为索引列副本的数据框【英文标题】:Pandas: Adding new column to dataframe which is a copy of the index column 【发布时间】:2016-08-24 06:51:19 【问题描述】:

我有一个要使用 matplotlib 绘制的数据框,但索引列是时间,我无法绘制它。

这是数据框(df3):

但是当我尝试以下操作时:

plt.plot(df3['magnetic_mag mean'], df3['YYYY-MO-DD HH-MI-SS_SSS'], label='FDI')

我显然遇到了错误:

KeyError: 'YYYY-MO-DD HH-MI-SS_SSS'

所以我想做的是在我的数据框中添加一个新的额外列(名为“时间”),它只是索引列的副本。

我该怎么做?

这是完整的代码:

#Importing the csv file into df
df = pd.read_csv('university2.csv', sep=";", skiprows=1)

#Changing datetime
df['YYYY-MO-DD HH-MI-SS_SSS'] = pd.to_datetime(df['YYYY-MO-DD HH-MI-SS_SSS'], 
                                               format='%Y-%m-%d %H:%M:%S:%f')

#Set index from column
df = df.set_index('YYYY-MO-DD HH-MI-SS_SSS')

#Add Magnetic Magnitude Column
df['magnetic_mag'] = np.sqrt(df['MAGNETIC FIELD X (μT)']**2 + df['MAGNETIC FIELD Y (μT)']**2 + df['MAGNETIC FIELD Z (μT)']**2)

#Subtract Earth's Average Magnetic Field from 'magnetic_mag'
df['magnetic_mag'] = df['magnetic_mag'] - 30

#Copy interesting values
df2 = df[[ 'ATMOSPHERIC PRESSURE (hPa)',
          'TEMPERATURE (C)', 'magnetic_mag']].copy()

#Hourly Average and Standard Deviation for interesting values 
df3 = df2.resample('H').agg(['mean','std'])
df3.columns = [' '.join(col) for col in df3.columns]

df3.reset_index()
plt.plot(df3['magnetic_mag mean'], df3['YYYY-MO-DD HH-MI-SS_SSS'], label='FDI')  

谢谢!!

【问题讨论】:

【参考方案1】:

我觉得你需要reset_index:

df3 = df3.reset_index()

可能的解决方案,但我认为inplace 不是好的做法,请检查this 和this:

df3.reset_index(inplace=True)

但如果您需要新列,请使用:

df3['new'] = df3.index

我认为你可以read_csv 更好:

df = pd.read_csv('university2.csv', 
                 sep=";", 
                 skiprows=1,
                 index_col='YYYY-MO-DD HH-MI-SS_SSS',
                 parse_dates='YYYY-MO-DD HH-MI-SS_SSS') #if doesnt work, use pd.to_datetime

然后省略:

#Changing datetime
df['YYYY-MO-DD HH-MI-SS_SSS'] = pd.to_datetime(df['YYYY-MO-DD HH-MI-SS_SSS'], 
                                               format='%Y-%m-%d %H:%M:%S:%f')
#Set index from column
df = df.set_index('YYYY-MO-DD HH-MI-SS_SSS')

【讨论】:

【参考方案2】:

您可以直接在索引中访问并绘制它,以下是一个示例:

import matplotlib.pyplot as plt
import pandas as pd
import numpy as np

df = pd.DataFrame(np.random.randn(1000), index=pd.date_range('1/1/2000', periods=1000))

#Get index in horizontal axis
plt.plot(df.index, df[0])
plt.show()

 #Get index in vertiacal axis
 plt.plot(df[0], df.index)
 plt.show()

【讨论】:

以上是关于熊猫:将新列添加到作为索引列副本的数据框的主要内容,如果未能解决你的问题,请参考以下文章

将新的字典值列添加到熊猫数据框

在将带有空字符串的新列添加到熊猫数据框时替换现有列名

将分组的聚合唯一列添加到熊猫数据框

确定一个点在哪个多边形中,然后将该多边形的名称作为一个新列应用到一个大熊猫数据框

R中的高效方法是将新列添加到具有大数据集的数据框中

拆分熊猫列并将最后一个元素添加到新列