Преобразование Python dict в фреймворк данных
У меня есть словарь Python, например:
{u'2012-06-08': 388,
u'2012-06-09': 388,
u'2012-06-10': 388,
u'2012-06-11': 389,
u'2012-06-12': 389,
u'2012-06-13': 389,
u'2012-06-14': 389,
u'2012-06-15': 389,
u'2012-06-16': 389,
u'2012-06-17': 389,
u'2012-06-18': 390,
u'2012-06-19': 390,
u'2012-06-20': 390,
u'2012-06-21': 390,
u'2012-06-22': 390,
u'2012-06-23': 390,
u'2012-06-24': 390,
u'2012-06-25': 391,
u'2012-06-26': 391,
u'2012-06-27': 391,
u'2012-06-28': 391,
u'2012-06-29': 391,
u'2012-06-30': 391,
u'2012-07-01': 391,
u'2012-07-02': 392,
u'2012-07-03': 392,
u'2012-07-04': 392,
u'2012-07-05': 392,
u'2012-07-06': 392}
Ключами являются Unicode даты, а значения - целые числа. Я хотел бы преобразовать это в фреймворк pandas, указав даты и их соответствующие значения как два отдельных столбца. Пример: col1: Даты col2: DateValue (даты все еще Юникод, а датазначения все еще целые)
Date DateValue
0 2012-07-01 391
1 2012-07-02 392
2 2012-07-03 392
. 2012-07-04 392
. ... ...
. ... ...
Любая помощь в этом направлении была бы высоко оценена. Я не могу найти ресурсы в документах pandas, чтобы помочь мне с этим.
Я знаю, что одно решение может состоять в том, чтобы преобразовать каждую пару ключа-значения в этот dict, в dict, чтобы вся структура стала диктофоном dicts, а затем мы можем добавить каждую строку в отдельный файл данных. Но я хочу знать, есть ли более простой способ и более прямой способ сделать это.
До сих пор я пытался преобразовать dict в объект серии, но это, похоже, не поддерживает отношения между столбцами:
s = Series(my_dict,index=my_dict.keys())
Ответы
Ответ 1
Ошибка здесь заключается в вызове конструктора DataFrame со скалярными значениями (где он ожидает, что значения будут списком /dict/... т.е. имеют несколько столбцов):
pd.DataFrame(d)
ValueError: If using all scalar values, you must must pass an index
Вы можете взять элементы из словаря (то есть пары ключ-значение):
In [11]: pd.DataFrame(list(d.items())) # or list(d.items()) in python 3
Out[11]:
0 1
0 2012-07-02 392
1 2012-07-06 392
2 2012-06-29 391
3 2012-06-28 391
...
In [12]: pd.DataFrame(list(d.items()), columns=['Date', 'DateValue'])
Out[12]:
Date DateValue
0 2012-07-02 392
1 2012-07-06 392
2 2012-06-29 391
Но я думаю, что имеет смысл передать конструктор Series:
In [21]: s = pd.Series(d, name='DateValue')
Out[21]:
2012-06-08 388
2012-06-09 388
2012-06-10 388
In [22]: s.index.name = 'Date'
In [23]: s.reset_index()
Out[23]:
Date DateValue
0 2012-06-08 388
1 2012-06-09 388
2 2012-06-10 388
Ответ 2
При преобразовании словаря в фрейм данных pandas, в котором вы хотите, чтобы ключи были столбцами указанного фрейма данных, а значения были значениями строк, вы можете просто заключить скобки в словарь следующим образом:
new_dict = {'key 1': 'value 1', 'key 2': 'value 2', 'key 3': 'value 3'}
In[33]:pd.DataFrame([new_dict])
Out[33]:
key 1 key 2 key 3
0 value 1 value 2 value 3
Это избавило меня от головной боли, поэтому я надеюсь, что это поможет кому-то там!
Ответ 3
Как объяснено в другом ответе, использование pandas.DataFrame()
прямо здесь не будет действовать так, как вы думаете.
Что вы можете сделать, это использовать pandas.DataFrame.from_dict
с orient='index'
:
In[7]: pandas.DataFrame.from_dict({u'2012-06-08': 388,
u'2012-06-09': 388,
u'2012-06-10': 388,
u'2012-06-11': 389,
u'2012-06-12': 389,
u'2012-06-13': 389,
u'2012-06-14': 389,
u'2012-06-15': 389,
u'2012-06-16': 389,
u'2012-06-17': 389,
u'2012-06-18': 390,
u'2012-06-19': 390,
u'2012-06-20': 390,
u'2012-06-21': 390,
u'2012-06-22': 390,
u'2012-06-23': 390,
u'2012-06-24': 390,
u'2012-06-25': 391,
u'2012-06-26': 391,
u'2012-06-27': 391,
u'2012-06-28': 391,
u'2012-06-29': 391,
u'2012-06-30': 391,
u'2012-07-01': 391,
u'2012-07-02': 392,
u'2012-07-03': 392,
u'2012-07-04': 392,
u'2012-07-05': 392,
u'2012-07-06': 392}, orient='index')
Out[7]:
0
2012-06-13 389
2012-06-16 389
2012-06-12 389
2012-07-03 392
2012-07-02 392
2012-06-29 391
2012-06-30 391
2012-07-01 391
2012-06-15 389
2012-06-08 388
2012-06-09 388
2012-07-05 392
2012-07-04 392
2012-06-14 389
2012-07-06 392
2012-06-17 389
2012-06-20 390
2012-06-21 390
2012-06-22 390
2012-06-23 390
2012-06-11 389
2012-06-10 388
2012-06-26 391
2012-06-27 391
2012-06-28 391
2012-06-24 390
2012-06-19 390
2012-06-18 390
2012-06-25 391
Ответ 4
Передайте элементы словаря в конструктор DataFrame и укажите имена столбцов. После этого разберите столбец Date
, чтобы получить значения Timestamp
.
Обратите внимание на разницу между python 2.x и 3.x:
В python 2.x:
df = pd.DataFrame(data.items(), columns=['Date', 'DateValue'])
df['Date'] = pd.to_datetime(df['Date'])
В Python 3.x: (требуется дополнительный "список" )
df = pd.DataFrame(list(data.items()), columns=['Date', 'DateValue'])
df['Date'] = pd.to_datetime(df['Date'])
Ответ 5
Панды имеют встроенную функцию для преобразования dict во фрейм данных.
pd.DataFrame.from_dict (dictionaryObject, 'индекс' Orient =)
Для ваших данных вы можете преобразовать его, как показано ниже:
import pandas as pd
your_dict={u'2012-06-08': 388,
u'2012-06-09': 388,
u'2012-06-10': 388,
u'2012-06-11': 389,
u'2012-06-12': 389,
u'2012-06-13': 389,
u'2012-06-14': 389,
u'2012-06-15': 389,
u'2012-06-16': 389,
u'2012-06-17': 389,
u'2012-06-18': 390,
u'2012-06-19': 390,
u'2012-06-20': 390,
u'2012-06-21': 390,
u'2012-06-22': 390,
u'2012-06-23': 390,
u'2012-06-24': 390,
u'2012-06-25': 391,
u'2012-06-26': 391,
u'2012-06-27': 391,
u'2012-06-28': 391,
u'2012-06-29': 391,
u'2012-06-30': 391,
u'2012-07-01': 391,
u'2012-07-02': 392,
u'2012-07-03': 392,
u'2012-07-04': 392,
u'2012-07-05': 392,
u'2012-07-06': 392}
your_df_from_dict=pd.DataFrame.from_dict(your_dict,orient='index')
print(your_df_from_dict)
Ответ 6
pd.DataFrame({'date' : dict_dates.keys() , 'date_value' : dict_dates.values() })
Ответ 7
В моем случае я хотел, чтобы ключи и значения dict были столбцами и значениями DataFrame. Так что единственное, что сработало для меня, было:
data = {'adjust_power': 'y', 'af_policy_r_submix_prio_adjust': '[null]', 'af_rf_info': '[null]', 'bat_ac': '3500', 'bat_capacity': '75'}
columns = list(data.keys())
values = list(data.values())
arr_len = len(values)
pd.DataFrame(np.array(values, dtype=object).reshape(1, arr_len), columns=columns)
Ответ 8
Вы также можете просто передать ключи и значения словаря в новый dataframe, например:
import pandas as pd
myDict = {<the_dict_from_your_example>]
df = pd.DataFrame()
df['Date'] = myDict.keys()
df['DateValue'] = myDict.values()
Ответ 9
![df from lists and dictionaries]()
постскриптум в частности, я нашел полезными Row-ориентированные примеры; так как часто то, как записи хранятся внешне.
https://pbpython.com/pandas-list-dict.html
Ответ 10
Принимает аргумент dict как аргумент и возвращает фреймворк с ключами dict в качестве индекса и значений в качестве столбца.
def dict_to_df(d):
df=pd.DataFrame(d.items())
df.set_index(0, inplace=True)
return df
Ответ 11
Вот как это работает для меня:
df= pd.DataFrame([d.keys(), d.values()]).T
df.columns= ['keys', 'values'] # call them whatever you like
Я надеюсь, что это помогает
Ответ 12
d = {'Date': list(yourDict.keys()),'Date_Values': list(yourDict.values())}
df = pandas.DataFrame(data=d)
Если вы не инкапсулируете yourDict.keys()
внутри list()
, то все ваши ключи и значения будут помещены в каждую строку каждого столбца. Как это:
Date\0 (2012-06-08, 2012-06-09, 2012-06-10, 2012-06-1...
1 (2012-06-08, 2012-06-09, 2012-06-10, 2012-06-1...
2 (2012-06-08, 2012-06-09, 2012-06-10, 2012-06-1...
3 (2012-06-08, 2012-06-09, 2012-06-10, 2012-06-1...
4 (2012-06-08, 2012-06-09, 2012-06-10, 2012-06-1...
Но, добавив list()
результат будет выглядеть так:
Date Date_Values 0 2012-06-08 388 1 2012-06-09 388 2 2012-06-10 388 3 2012-06-11 389 4 2012-06-12 389...
Ответ 13
Я столкнулся с этим несколько раз и имею пример словаря, который я создал из функции get_max_Path()
, и он возвращает образец словаря:
{2: 0.3097502930247044,
3: 0.4413177909384636,
4: 0.5197224051562838,
5: 0.5717654946470984,
6: 0.6063959031223476,
7: 0.6365209824708223,
8: 0.655918861281035,
9: 0.680844386645206}
Чтобы преобразовать это в фреймворк данных, я выполнил следующее:
df = pd.DataFrame.from_dict(get_max_path(2), orient = 'index').reset_index()
Возвращает простой двухканалный фрейм с отдельным индексом:
index 0
0 2 0.309750
1 3 0.441318
Просто переименуйте столбцы, используя f.rename(columns={'index': 'Column1', 0: 'Column2'}, inplace=True)
Ответ 14
Я думаю, что вы можете внести некоторые изменения в свой формат данных при создании словаря, тогда вы можете легко преобразовать его в DataFrame:
вход:
a={'Dates':['2012-06-08','2012-06-10'],'Date_value':[388,389]}
выход:
{'Date_value': [388, 389], 'Dates': ['2012-06-08', '2012-06-10']}
вход:
aframe=DataFrame(a)
вывод: будет ваш DataFrame
Вам просто нужно использовать текстовое редактирование где-нибудь, например, в Sublime или Excel.