Удаление нескольких столбцов на основе имен столбцов в Pandas
У меня есть некоторые данные, и когда я импортирую его, я получаю следующие ненужные столбцы. Я ищу простой способ удалить все эти
'Unnamed: 24', 'Unnamed: 25', 'Unnamed: 26', 'Unnamed: 27',
'Unnamed: 28', 'Unnamed: 29', 'Unnamed: 30', 'Unnamed: 31',
'Unnamed: 32', 'Unnamed: 33', 'Unnamed: 34', 'Unnamed: 35',
'Unnamed: 36', 'Unnamed: 37', 'Unnamed: 38', 'Unnamed: 39',
'Unnamed: 40', 'Unnamed: 41', 'Unnamed: 42', 'Unnamed: 43',
'Unnamed: 44', 'Unnamed: 45', 'Unnamed: 46', 'Unnamed: 47',
'Unnamed: 48', 'Unnamed: 49', 'Unnamed: 50', 'Unnamed: 51',
'Unnamed: 52', 'Unnamed: 53', 'Unnamed: 54', 'Unnamed: 55',
'Unnamed: 56', 'Unnamed: 57', 'Unnamed: 58', 'Unnamed: 59',
'Unnamed: 60'
Они индексируются 0-индексацией, поэтому я попробовал что-то вроде
df.drop(df.columns[[22, 23, 24, 25,
26, 27, 28, 29, 30, 31, 32 ,55]], axis=1, inplace=True)
Но это не очень эффективно. Я попробовал написать некоторые для циклов, но это показалось мне плохим поведением Pandas. Поэтому я задаю этот вопрос здесь.
Я видел примеры, похожие (Drop несколько столбцов pandas), но это не отвечает на мой вопрос.
Ответы
Ответ 1
Я не знаю, что вы подразумеваете под неэффективностью, но если вы имеете в виду с точки зрения ввода, проще было бы просто выбрать интересующие cols и назначить обратно df:
df = df[cols_of_interest]
Где cols_of_interest
- список нужных столбцов.
Или вы можете нарезать столбцы и передать это на drop
:
df.drop(df.ix[:,'Unnamed: 24':'Unnamed: 60'].head(0).columns, axis=1)
Вызов head
просто выбирает 0 строк, поскольку нас интересуют имена столбцов, а не данные
Обновление
Другим методом было бы проще использовать булевскую маску из str.contains
и инвертировать ее для маскировки столбцов:
In [2]:
df = pd.DataFrame(columns=['a','Unnamed: 1', 'Unnamed: 1','foo'])
df
Out[2]:
Empty DataFrame
Columns: [a, Unnamed: 1, Unnamed: 1, foo]
Index: []
In [4]:
~df.columns.str.contains('Unnamed:')
Out[4]:
array([ True, False, False, True], dtype=bool)
In [5]:
df[df.columns[~df.columns.str.contains('Unnamed:')]]
Out[5]:
Empty DataFrame
Columns: [a, foo]
Index: []
Ответ 2
Самый простой способ:
yourdf.drop(['columnheading1', 'columnheading2'], axis=1, inplace=True)
Ответ 3
Мой личный фаворит и проще, чем ответы, которые я видел здесь (для нескольких столбцов):
df.drop(df.columns[22:56], axis=1, inplace=True)
Или создать список для нескольких столбцов.
col = list(df.columns)[22:56]
df.drop(col, axis=1, inplace=1)
Ответ 4
Это, вероятно, хороший способ сделать то, что вы хотите. Он удалит все столбцы, содержащие "Безымянный" в заголовке.
for col in df.columns:
if 'Unnamed' in col:
del df[col]
Ответ 5
Вы можете сделать это в одной строке и один раз:
df.drop([col for col in df.columns if "Unnamed" in col], axis=1, inplace=True)
Это связано с меньшим перемещением/копированием объекта, чем с приведенными выше решениями.
Ответ 6
Не уверен, было ли упомянуто это решение где-либо еще, но один из способов сделать это - pandas.Index.difference
.
>>> df = pd.DataFrame(columns=['A','B','C','D'])
>>> df
Empty DataFrame
Columns: [A, B, C, D]
Index: []
>>> to_remove = ['A','C']
>>> df = df[df.columns.difference(to_remove)]
>>> df
Empty DataFrame
Columns: [B, D]
Index: []
Ответ 7
Ниже я работал у меня:
for col in df:
if 'Unnamed' in col:
#del df[col]
print col
try:
df.drop(col, axis=1, inplace=True)
except Exception:
pass
Ответ 8
df = df[[col for col in df.columns if not ('Unnamed' in col)]]
Ответ 9
Вы можете просто передать имена столбцов в виде списка с указанием оси 0 или 1
-
ось = 1: вдоль рядов
- ось = 0: вдоль колонн
По умолчанию ось = 0
data.drop(["Colname1","Colname2","Colname3","Colname4"],axis=1)