使用具有正确语法的 pandas to_datetime() 方法，无法识别的值类型：str？

Posted 2023-03-11

技术标签:

【中文标题】使用具有正确语法的 pandas to_datetime() 方法，无法识别的值类型：str？【英文标题】：using pandas to_datetime() method with correct syntax, Unrecognized value type: str? 【发布时间】：2018-11-27 18:44:09 【问题描述】：

我正在努力使用 pandas 的 to_datetime 函数将 csv 文件中的条目转换为日期时间对象，以便我可以将它们用于可视化。似乎我误解了有关如何创建日期时间对象或参数的简单内容。

我有一个 csv 文件，其中包含多条日期记录，一个日期/时间记录的示例（即一行 csv 文件的示例）...

date_column: 17-Apr-18 # day first (not-zero-padded), month abbrev, year
hour_and_seconds_column: 23:58:40 # hour, minute zero-padded, second

我想使用 matplotlib 可视化这个 csv 文件中的每个时间。我正在阅读文档，我记得看到 Matplotlib 与 datetime 对象配合得很好......所以我认为我需要使用 pandas 的 to_datetime() 方法来帮助我转换 csv 文件的每个日期/时间记录。

所以我有一个方法，它首先从 csv 文件中读取，创建一个列表列表，其中每个列表应该代表 csv 文件中的一条记录。我只读了 3 条记录。我不会包含该代码，因为我真的怀疑它与我遇到的问题有关，但我添加了一个打印语句，它向我建议记录正在被正确读取并保存在列表中......这是三个记录的示例

    time_records = [[ID_IDENTIFIER, '14-Mar-18', '23:58:40'], [ID_IDENTIFIER, '14-Mar-18', '23:58:21'], [ID_IDENTIFIER, '14-Mar-18', '23:57:24']]

（ID_IDENTIFIER在代码中有一个实际的id号）

我还想，因为这些日期不一定是 python 的传统格式来制作 datetime 对象，所以当我调用 pandas 的 to_datetime() 方法时，我需要使用 format 参数。所以我制作了以下字符串变量来表示格式。有可能是我写错了……

    time_format_from_csv_str = time.strftime("%#d-%b-%y %H:%M:%S")

所以最后一部分是我创建了一个 for 循环来组合time_records 中每个列表的最后两列。我只是要发布代码，但我将日期/时间信息与小时/分钟信息组合成一个字符串：

        for each in time_records:
            time_str = str(each[1]) + " " + str(each[2])
            print(time_str)
            a_date_object = pd.to_datetime(time_str, 
                format=time_format_from_csv_str)
    print(a_date_object)

程序一旦到达a_date_object 的行就会崩溃。错误消息有点长，分为两部分。

  Traceback (most recent call last):
      File "C:\Users\biney\AppData\Roaming\Python\Python36\site-packages\pandas\core\tools\datetimes.py", line 377, in _convert_listlike
      values, tz = conversion.datetime_to_datetime64(arg)
      File "pandas\_libs\tslibs\conversion.pyx", line 188, in pandas._libs.tslibs.conversion.datetime_to_datetime64
      TypeError: Unrecognized value type: <class 'str'>

  During handling of the above exception, another exception occurred:

  Traceback (most recent call last):
      File "basic_content_analysis.py", line 303, in <module>
         main()
      File "basic_content_analysis.py", line 292, in main
         timestamp_date_visualization()
      File "basic_content_analysis.py", line 204, in timestamp_date_visualization
         a_date_object = pd.to_datetime(time_str, dayfirst=True, format=time_format_from_csv_str)
      File "C:\Users\biney\AppData\Roaming\Python\Python36\site-packages\pandas\core\tools\datetimes.py", line 469, in to_datetime
         result = _convert_listlike(np.array([arg]), box, format)[0]
      File "C:\Users\biney\AppData\Roaming\Python\Python36\site-packages\pandas\core\tools\datetimes.py", line 380, in _convert_listlike
         raise e
      File "C:\Users\biney\AppData\Roaming\Python\Python36\site-packages\pandas\core\tools\datetimes.py", line 347, in _convert_listlike
errors=errors)
      File "pandas\_libs\tslibs\strptime.pyx", line 157, in pandas._libs.tslibs.strptime.array_strptime
        ValueError: time data '14-Mar-18 23:58:40' does not match format '18-Jun-18 17:08:54' (match)

此时我不知道如何解决这个问题，因为我认为 pd.to_datetime 可以接受一个字符串作为它的参数。我也看不出我的字符串与它给我的格式不符。

我该如何修复这个错误？最终我如何从我的 csv 文件中读取条目并将它们转换为日期时间对象（因为我很确定这将是我能够使用 matplotlib 可视化时间数据的最佳方式？）

【问题讨论】：

您似乎不小心将格式指定为'18-Jun-18 17:08:54'。你能把它打印出来'time_format_from_csv_str' 看看是不是这样吗？不管怎样，我认为您实际上只是希望 format="%d-%b-%y %H:%M:%S" 包含在 pd.to_datetime() 中 ughhhhhh 你是对的，这就是问题所在。 time_format_from_csv_str 是18-Jun-18 17:31:07。（也就是程序运行时的任何时间）我会...进行更改 【参考方案1】：

将格式参数更改为以下内容后，此问题已得到修复：