Разница во времени внутри группы по объектам в Python Pandas

Я хочу группировать "from", а затем "to" столбцы, а затем сортировать "datetime" в порядке убывания, а затем, наконец, хочу рассчитать разницу во времени между этими группируемыми объектами между текущим временем и в следующий раз. Например, в этом случае, Я хотел бы иметь такую структуру данных, как:

Я не могу понять, как это сделать! Есть ли выход для этого? Любая помощь будет очень высоко оценена! Большое вам спасибо заранее!

Ответы

Ответ 1

df.assign(
    timediff=df.sort_values(
        'datetime', ascending=False
    ).groupby(['from', 'to']).datetime.diff(-1).dt.seconds.div(60).fillna(0))

Ответ 2

Думаю, вам нужно:

groupby с apply sort_values с diff, конвертировать Timedelta в минуты seconds и разделение пола 60

fillna и sort_index, удалите уровень 2 в индексе

df = df.groupby(['from','to']).datetime
       .apply(lambda x: x.sort_values().diff().dt.seconds // 60)
       .fillna(0)
       .sort_index()
       .reset_index(level=2, drop=True)
       .reset_index(name='timediff in minutes')

print (df)

   from  to  timediff in minutes 
0    11   1                 120.0
1    11   1                 255.0
2    11   1                 225.0
3    11   1                   0.0
4    11  12                 300.0
5    11  12                   0.0
6    11  18                   0.0
7    12   3                   0.0
8    12   3                   0.0

df = df.join(df.groupby(['from','to'])
               .datetime
               .apply(lambda x: x.sort_values().diff().dt.seconds // 60)
               .fillna(0)
               .reset_index(level=[0,1], drop=True)
               .rename('timediff in minutes'))
print (df)
   from  to            datetime other  timediff in minutes
0    11   1 2016-11-06 22:00:00     -                120.0
1    11   1 2016-11-06 20:00:00     -                255.0
2    11   1 2016-11-06 15:45:00     -                225.0
3    11  12 2016-11-06 15:00:00     -                300.0
4    11   1 2016-11-06 12:00:00     -                  0.0
5    11  18 2016-11-05 10:00:00     -                  0.0
6    11  12 2016-11-05 10:00:00     -                  0.0
7    12   3 2016-10-05 10:00:59     -                  0.0
8    12   3 2016-09-06 10:00:34     -                  0.0

Ответ 3

Почти как указано выше, но без apply:

result = df.sort_values(['from','to','datetime'])\
           .groupby(['from','to'])['datetime']\
           .diff().dt.seconds.fillna(0)