У меня есть файл csv с именем params.csv. Я открыл ipython qtconsole и создал pandas dataframe, используя:
import pandas
paramdata = pandas.read_csv('params.csv', names=paramnames)
где paramnames - это список строковых объектов на языке python. Пример paramnames (длина фактического списка - 22):
paramnames = ["id",
"fc",
"mc",
"markup",
"asplevel",
"aspreview",
"reviewpd"]
В приглашении ipython, если я набираю paramdata и нажимаю Enter, я не получаю dataframe со столбцами и значениями, как показано в примерах на Pandas сайт. Вместо этого я получаю информацию о фрейме данных. Я получаю:
In[35]: paramdata
Out[35]:
<class 'pandas.core.frame.DataFrame'>
Int64Index: 59 entries, 0 to 58
Data columns:
id 59 non-null values
fc 59 non-null values
mc 59 non-null values
markup 59 non-null values
asplevel 59 non-null values
aspreview 59 non-null values
reviewpd 59 non-null values
Если я наберу paramdata['mc'], тогда я получу значения, как ожидалось, для столбца mc. У меня есть два вопроса:
(1) В примерах на веб-сайте pandas (см., например, вывод df здесь: http://pandas.sourceforge.net/indexing.html#additional-column-access) ввод имени фрейма данных дает фактические данные. Почему я получаю информацию о фрейме данных, как показано выше, вместо фактических данных? Мне нужно установить некоторые параметры вывода где-нибудь?
(2) Как я могу выводить все столбцы в фреймворке данных на экран без ввода их имен, т.е. без ввода типа paramdata[['id','fc','mc']].
Я использую pandas версию 0.8.
Спасибо.
На экране отображается слишком много данных, поэтому вместо этого отображается сводка.
Если вы хотите вывести данные в любом случае (это, вероятно, не поместится на экране и выглядит не очень хорошо):
print paramdata.values
преобразует фрейм данных в его матричное представление numpy-array.
paramdata.columns
хранит соответствующие имена столбцов и
paramdata.index
хранит соответствующий индекс (имена строк).
Использование:
pandas.set_option('display.max_columns', 7)
Это заставит панд отображать 7 ваших столбцов. Или в целом:
pandas.set_option('display.max_columns', None)
что заставит его отображать любое количество столбцов.
Объяснение: значение по умолчанию для max_columns равно 0, что говорит Pandas отображать таблицу только в том случае, если все столбцы могут быть сжаты в ширину вашей консоли.
Кроме того, вы можете изменить ширину консоли (в символах) по умолчанию, равную 80, используя, например:
pandas.set_option('display.width', 200)
Я знаю, что это старый вопрос, но у меня только что была похожая проблема, и я думаю, что то, что я сделал, сработало бы и для вас.
Я использовал метод to_csv() и написал в stdout:
import sys
paramdata.to_csv(sys.stdout)
Это должно создать дамп целого фрейма данных, независимо от того, хорош ли он для печати или нет, и вы можете использовать параметры to_csv для настройки разделителей столбцов, для печати индекса и т.д.
Редактировать: теперь можно использовать None в качестве цели для .to_csv() с похожим эффектом, что, возможно, намного приятнее:
paramdata.to_csv(None)
В ipython, я использую это для печати части кадра данных, который работает достаточно хорошо (печатает первые 100 строк):
print paramdata.head(100).to_string()
вы также можете использовать DataFrame.head(x)/.tail(x) для отображения первых/последних x строк DataFrame.
Я перехожу к python из R, и функция R head() оборачивает строки очень удобным способом просмотра данных:
> head(cbind(mtcars, mtcars, mtcars))
mpg cyl disp hp drat wt qsec vs am gear carb mpg cyl
Mazda RX4 21.0 6 160 110 3.90 2.620 16.46 0 1 4 4 21.0 6
Mazda RX4 Wag 21.0 6 160 110 3.90 2.875 17.02 0 1 4 4 21.0 6
Datsun 710 22.8 4 108 93 3.85 2.320 18.61 1 1 4 1 22.8 4
Hornet 4 Drive 21.4 6 258 110 3.08 3.215 19.44 1 0 3 1 21.4 6
Hornet Sportabout 18.7 8 360 175 3.15 3.440 17.02 0 0 3 2 18.7 8
Valiant 18.1 6 225 105 2.76 3.460 20.22 1 0 3 1 18.1 6
disp hp drat wt qsec vs am gear carb mpg cyl disp hp
Mazda RX4 160 110 3.90 2.620 16.46 0 1 4 4 21.0 6 160 110
Mazda RX4 Wag 160 110 3.90 2.875 17.02 0 1 4 4 21.0 6 160 110
Datsun 710 108 93 3.85 2.320 18.61 1 1 4 1 22.8 4 108 93
Hornet 4 Drive 258 110 3.08 3.215 19.44 1 0 3 1 21.4 6 258 110
Hornet Sportabout 360 175 3.15 3.440 17.02 0 0 3 2 18.7 8 360 175
Valiant 225 105 2.76 3.460 20.22 1 0 3 1 18.1 6 225 105
drat wt qsec vs am gear carb
Mazda RX4 3.90 2.620 16.46 0 1 4 4
Mazda RX4 Wag 3.90 2.875 17.02 0 1 4 4
Datsun 710 3.85 2.320 18.61 1 1 4 1
Hornet 4 Drive 3.08 3.215 19.44 1 0 3 1
Hornet Sportabout 3.15 3.440 17.02 0 0 3 2
Valiant 2.76 3.460 20.22 1 0 3 1
Я разработал следующую маленькую функцию Python для имитации этой функциональности:
def rhead(x, nrow = 6, ncol = 4):
pd.set_option('display.expand_frame_repr', False)
seq = np.arange(0, len(x.columns), ncol)
for i in seq:
print(x.loc[range(0, nrow), x.columns[range(i, min(i+ncol, len(x.columns)))]])
pd.set_option('display.expand_frame_repr', True)
(это, конечно, зависит от панд и пупка)
вы можете использовать синтаксис разреза строки i.e
paramdata[:5] # first five records
paramdata[-5:] # last five records
paramdata[:] # all records
иногда фреймворк данных может не вписываться в экранный буфер, и в этом случае вам, вероятно, лучше будет либо печатать небольшое подмножество, либо экспортировать его на что-то другое, заговорить или (csv снова)