Самый быстрый способ сбросить дублированный индекс в Pandas DataFrame

Если я хочу сбросить дублированный индекс в фреймворке данных, то по очевидным причинам следующее не работает:

myDF.drop_duplicates(cols=index)

и

myDF.drop_duplicates(cols='index')

ищет столбец с именем 'index'

Если я хочу отбросить индекс, я должен сделать:

myDF['index'] = myDF.index
myDF= myDF.drop_duplicates(cols='index')
myDF.set_index = myDF['index']
myDF= myDF.drop('index', axis =1)

Есть ли более эффективный способ?

Ответы

Ответ 1

Просто: DF.groupby(DF.index).first()

Ответ 2

Метод 'duplicated' работает для dataframes и для ряда. Просто выберите те строки, которые не отмечены как имеющие дубликат индекс:

df[~df.index.duplicated()]

Ответ 3

Вы можете использовать numpy.unique для получения индекса уникальных значений и использовать iloc для получения этих индексов:

>>> df
        val
A  0.021372
B  1.229482
D -1.571025
D -0.110083
C  0.547076
B -0.824754
A -1.378705
B -0.234095
C -1.559653
B -0.531421

[10 rows x 1 columns]

>>> idx = np.unique(df.index, return_index=True)[1]
>>> df.iloc[idx]
        val
A  0.021372
B  1.229482
C  0.547076
D -1.571025

[4 rows x 1 columns]