【问题标题】:Python pandas tz_localize throws NonExistentTimeError, then unable to drop erroneous timesPython pandas tz_localize 抛出 NonExistentTimeError,然后无法丢弃错误时间
【发布时间】:2023-04-02 12:17:01
【问题描述】:

python pandas 中,我有一个如下所示的数据集:

对于 2007-04-26 17:00:00 之前的数据,时区为美国/东部。对于之后的数据,时区为 American/Chicago。

当我运行这个时:

data.index = data[:'2007-04-26 16:59:59'].index.tz_localize('US/Eastern', ambiguous = 'NaT').tz_convert('Europe/London')

我收到一条错误消息:

NonExistentTimeError: 2006-04-02 02:00:00

这确实是因为夏令时。我在 2007 年遇到了同样的问题。随后几年我没有遇到同样的问题。理想情况下,我想要两个命令 - 一个将数据集的前半部分从东部转换为伦敦,另一个将后半部分从芝加哥转换为伦敦。

由于这不起作用,我尝试减少这些时间(我相信是一个小时),例如。 02:00:00 到 03:00:00 有夏令时。但是,当我运行

data.drop(data.ix['2005-04-03 2:00:00':'2005-04-03 3:00:00'], inplace=True)

我明白了

ValueError: labels ['open' 'high' 'low' 'close' 'volume'] not contained in axis

有谁知道我可以如何简单地转换这些时间?任何帮助将不胜感激。

谢谢,
亚历克斯

更新以添加更多信息:

好的,我使用了以下代码来减少违规时间:

更新 2:

mask =  ((data.index<datetime.strptime("2006-04-02 02:00:00","%Y-%m-%d %H:%S:%M")) | (data.index>datetime.strptime("2006-04-02 03:00:00","%Y-%m-%d %H:%S:%M"))) & ((data.index<datetime.strptime("2005-04-03 02:00:00","%Y-%m-%d %H:%S:%M")) | (data.index>datetime.strptime("2005-04-03 03:00:00","%Y-%m-%d %H:%S:%M"))) & ((data.index<datetime.strptime("2005-10-30 01:00:00","%Y-%m-%d %H:%S:%M")) | (data.index>datetime.strptime("2005-10-30 02:00:00","%Y-%m-%d %H:%S:%M"))) & ((data.index<datetime.strptime("2006-10-29 01:00:00","%Y-%m-%d %H:%S:%M")) | (data.index>datetime.strptime("2006-10-29 02:00:00","%Y-%m-%d %H:%S:%M")))
data_filtered = data[mask]
data_filtered.ix = data_filtered.tz_localize('US/Eastern', infer_dst=True).tz_convert('Europe/London')

但现在我得到了这个错误:

    data_filtered.ix = data_filtered.tz_localize('US/Eastern', infer_dst=True).tz_convert('Europe/London')
Traceback (most recent call last):

  File "<ipython-input-38-0fc8a9e68588>", line 1, in <module>
    data_filtered.ix = data_filtered.tz_localize('US/Eastern', infer_dst=True).tz_convert('Europe/London')

  File "C:\Anaconda\lib\site-packages\pandas\core\generic.py", line 1955, in __setattr__
    object.__setattr__(self, name, value)

AttributeError: can't set attribute

对此有什么想法吗?我做了一些谷歌搜索,但找不到任何真正相关的内容..

【问题讨论】:

  • 您能否发布“2006-04-02 02:00:00”的行以及您要删除的某些行?似乎这些数据点丢失了,很可能是因为您所说的 DST。

标签:
python
pandas
timezone
dst