使用熊猫将数据框附加到excel

Posted 2023-03-11

【中文标题】使用熊猫将数据框附加到excel

【英文标题】：append dataframe to excel with pandas

【发布时间】：2018-05-24 01:10:30

【问题描述】：

我希望将数据框附加到 excel 中

此代码几乎可以按预期工作。虽然它不是每次都附加。我运行它，它将数据框放入 excel 中。但是每次我运行它时它都不会附加。我还听说 openpyxl 是 cpu 密集型的，但没有听说过很多 workarounds。

import pandas
from openpyxl import load_workbook

book = load_workbook('C:\\OCC.xlsx')
writer = pandas.ExcelWriter('C:\\OCC.xlsx', engine='openpyxl')
writer.book = book
writer.sheets = dict((ws.title, ws) for ws in book.worksheets)

df1.to_excel(writer, index = False)

writer.save()

我希望每次运行时都附加数据，这不会发生。

数据输出看起来像原始数据：

A   B   C
H   H   H

我想在第二次运行后

A   B    C
H   H    H
H   H    H

如果这很明显我是 python 新手并且我练习的示例没有按预期工作，请道歉。

问题是 - 我如何在每次运行时附加数据。我尝试更改为 xlsxwriter 但得到 AttributeError: 'Workbook' object has no attribute 'add_format'

【参考方案1】：

如果有人需要，我找到了更简单的方法：

将 DF 转换为列表中的行

rows = your_df.values.tolist()

加载您的工作簿

workbook = load_workbook(filename=your_excel)

挑选你的床单

sheet = workbook[your_sheet]

遍历行以追加每个行：

for row in rows:
    sheet.append(row)

完成后保存工作簿

workbook.save(filename=your_excel)

把它们放在一起：

rows = your_df.values.tolist()
workbook = load_workbook(filename=your_excel)
sheet = workbook[your_sheet]
for row in rows:
    sheet.append(row)
workbook.save(filename=your_excel)

【参考方案2】：

这里所有的例子都很复杂。 在documentation，就简单多了：

def append_to_excel(fpath, df, sheet_name):
    with pd.ExcelWriter(fpath, mode="a") as f:
        df.to_excel(f, sheet_name=sheet_name)

append_to_excel(<your_excel_path>, <new_df>, <new_sheet_name>)

在 LibreOffice/OpenOffice excel 文件上使用它时，我收到错误：

KeyError: "There is no item named 'xl/drawings/drawing1.xml' in the archive"

这是here提到的openpyxl中的一个错误。

【讨论】：

这会将新的 DF 附加到新工作表中。

@Julios。这会将新的 df 作为新工作表附加到现有的 excel 文件中。

你也可以叠加。见pandas.pydata.org/pandas-docs/stable/reference/api/…

【参考方案3】：

可以使用append_df_to_excel()辅助函数，即defined in this answer：

用法示例：

filename = r'C:\OCC.xlsx'

append_df_to_excel(filename, df)

append_df_to_excel(filename, df, header=None, index=False)

append_df_to_excel(filename, df, sheet_name='Sheet2', index=False)

append_df_to_excel(filename, df, sheet_name='Sheet2', index=False, startrow=25)

【讨论】：

这是一个非常有用的功能，并且直到昨天都运行良好。现在使用这个辅助函数我得到一个错误“值必须是一个序列”。任何想法为什么会这样？

【参考方案4】：

首先，这篇文章是解决方案的第一部分，您应该在其中指定startrow=： Append existing excel sheet with new dataframe using python pandas

您也可以考虑header=False。 所以它应该看起来像：

df1.to_excel(writer, startrow = 2,index = False, Header = False)

如果您希望它自动到达工作表的末尾并附加您的 df 然后使用：

startrow = writer.sheets['Sheet1'].max_row

如果您希望它遍历工作簿中的所有工作表：

for sheetname in writer.sheets:
    df1.to_excel(writer,sheet_name=sheetname, startrow=writer.sheets[sheetname].max_row, index = False,header= False)

顺便说一句：对于writer.sheets，您可以使用字典理解（我认为它更干净，但这取决于您，它会产生相同的输出）：

writer.sheets = ws.title: ws for ws in book.worksheets

所以完整的代码是：

import pandas
from openpyxl import load_workbook

book = load_workbook('test.xlsx')
writer = pandas.ExcelWriter('test.xlsx', engine='openpyxl')
writer.book = book
writer.sheets = ws.title: ws for ws in book.worksheets

for sheetname in writer.sheets:
    df1.to_excel(writer,sheet_name=sheetname, startrow=writer.sheets[sheetname].max_row, index = False,header= False)

writer.save()

【讨论】：

这适用于 Python 2 的 pandas 0.24.2 中的我（在我尝试时也适用于 0.19.2）。

【参考方案5】：

我尝试读取 excel，将其放入数据框中，然后将 excel 中的数据框与所需的数据框连接起来。它对我有用。

def append_df_to_excel(df, excel_path):
    df_excel = pd.read_excel(excel_path)
    result = pd.concat([df_excel, df], ignore_index=True)
    result.to_excel(excel_path, index=False)

df = pd.DataFrame("a":[11,22,33], "b":[55,66,77])
append_df_to_excel(df, r"<path_to_dir>\<out_name>.xlsx")

【讨论】：

pf.concat 正是我要找的东西。简单有效。干得好维克多。