使用多个数据帧的pandas时间偏移

Question

我有两个pandas数据帧：

一个名为sdtarray的浮点（代表秒）：

    z1  z2  z3  ...
0   NaN NaN NaN
1   2.6 3.4 63.0
2   NaN NaN NaN
3   0.1 1.1 60.7
4   4.7 5.2 64.9
5   0.1 0.6 61.1
...
[33945 rows x 95 columns]

还有一个格式化的日期（newtime）：

^{pr2}$

在float DataFrame（sdtarray）中，用相应的日期（相同的行索引，但是newtime数据帧）偏移每一行的最佳方法是什么？以日期的数据帧结尾？在

输出示例如下：

    z4                  z5                  z6              …
0   NaN                 NaN                 NaN 
1   01/09/2014 05:38:02 01/09/2014 05:38:03 01/09/2014 05:39:03 
2   NaN                 NaN                 NaN 
3   01/09/2014 06:27:00 01/09/2014 06:27:01 01/09/2014 06:28:00 
4   01/09/2014 06:37:04 01/09/2014 06:37:05 01/09/2014 06:38:04 
5   01/09/2014 06:57:00 01/09/2014 06:57:00 01/09/2014 06:58:01
…               

我使用的是pandas 0.13.1，我知道它没有什么帮助，但我还是坚持这个，因为它必须与nump1.7.1兼容，这是因为ArcGIS的要求。在

我设法在每一行上使用itertuples得到正确的输出（并使用timedelta，但是对于大数据（34k行乘以100col）来说速度非常慢，而且必须有一种更有效的方法，不依赖于在循环中检查每个rol/列。在

如有任何帮助和指导，我们将不胜感激：）

Answer 1

在下面，我首先检查了seconds（df1）不是NaN之后，将其转换为datetime.timedelta对象，然后将这些值添加到df2中的日期。在

在熊猫0.13.1下测试。在

import datetime as dt
import pandas as pd

df1 = pd.DataFrame({'z1': [None, 2.6, None, 0.1, 4.7, 0.1], 
                    'z2': [None, 3.4, None, 1.1, 5.2, 0.6], 
                    'z3': [None, 63, None, 60.7, 64.9, 61.1]})
df2 = pd.DataFrame({'Datetime': ['2014-09-01 05:22', '2014-09-01 05:38', '2014-09-01 06:08', 
                                 '2014-09-01 06:27', '2014-09-01 06:37', '2014-09-01 06:57']})
df2['Datetime'] = pd.to_datetime(df2.Datetime)

result = df1.applymap(lambda x: dt.timedelta(seconds=x) if not np.isnan(x) else None) 
         + np.tile(df2.values, (1, df1.shape[1]))

>>> pd.DataFrame(result)
                          z1                         z2                         z3
0                        NaT                        NaT                        NaT
1 2014-09-01 05:38:02.600000 2014-09-01 05:38:03.400000        2014-09-01 05:39:03
2                        NaT                        NaT                        NaT
3 2014-09-01 06:27:00.100000 2014-09-01 06:27:01.100000 2014-09-01 06:28:00.700000
4 2014-09-01 06:37:04.700000 2014-09-01 06:37:05.200000 2014-09-01 06:38:04.900000
5 2014-09-01 06:57:00.100000 2014-09-01 06:57:00.600000 2014-09-01 06:58:01.100000