Tengo una lista de diccionario como ese:

my_list = [
    {
        'Currency': 'USD',
        'Product': 'a',
        'Quantity': {
            'Apr 2019': 1.0,
            'Jun 2019': 7.0
        }
    },
    {
        'Currency': 'USD',
        'Product': 'b',
        'Quantity': {
            'Jan 2019': 4.0,
            'Feb 2019': 8.0
        }
    }
]

Y quiero un marco de datos como ese:

 Currency Product Quantity  Date
 'USD'      'a'      1      Apr 2019
 'USD'      'a'      7      Jun 2019
 'USD'      'b'      4      Jan 2019
 'USD'      'b'      8      Feb 2019

Actualmente estoy haciendo eso:

for element in my_list :
     currency = element.get('Currency')
     product = element.get('Product')
     dates = list(element.get('Quantity').keys())
     for date in dates:
         quantity = element.get('Quantity')[date]
         row = [currency, product, quantity, date]
         df.loc[df.shape[0]] = row

Pero me imagino que hay una mejor manera en lugar de bucle en la lista y

pd.DataFrame.from_dict(my_list)

Funciona si solo hay un valor en cantidad (con una pequeña modificación con .apply)

Gracias

python pandas list dataframe dictionary
2
kilag 7 oct. 2019 a las 18:37

3 respuestas

La mejor respuesta
df_dict = [{**d, "Quantity": quantity, "Date": date,} for d in my_list for date, quantity in d['Quantity'].items()]

df = pd.DataFrame.from_dict(df_dict)

salida :

>>> df

Currency    Product Quantity    Date
0   USD         a       1.0         Apr 2019
1   USD         a       7.0         Jun 2019
2   USD         b       4.0         Jan 2019
3   USD         b       8.0         Feb 2019

Explicación :

Al usar un bucle anidado doble, enumera su lista por el número de pares de cantidad / fecha, que es lo que desea. Luego, desempaqueta el diccionario en el primer nivel (usando **d). Esto establece los valores correctos Currency y Product pero nos deja con el valor "malo" Quantity. Esto se sobrescribe en el siguiente paso de la comprensión del diccionario. Y finalmente, se establece Date. A partir de ahí, simplemente los pandas leen cada diccionario como una fila.

2
Brian Joseph 7 oct. 2019 a las 16:47

Puede usar doble bucle para procesar sus datos.

El siguiente código

df = pd.DataFrame(
    [
        {
            'Currency': item.get('Currency'),
            'Product': item.get('Product'),
            'Date': quant_key,
            'Quantity': quant_val,
        } for item in my_list for quant_key, quant_val in item['Quantity'].items()
    ]
)
print(df)

Devuelve esta salida:

  Currency Product      Date  Quantity
0      USD       a  Apr 2019       1.0
1      USD       a  Jun 2019       7.0
2      USD       b  Jan 2019       4.0
3      USD       b  Feb 2019       8.0
1
Jaroslav Bezděk 7 oct. 2019 a las 16:02

Utilice json_normalize:

from pandas.io.json import json_normalize
df=json_normalize(my_list,'Quantity',['Currency','Product'])
Quantity=[]
for d in my_list:
    for month in  d['Quantity']:
        Quantity.append(d['Quantity'][month])
df['Quantity']=Quantity
df=df.rename(columns={0:'Date'}).reindex(columns=['Currency','Product','Quantity','Date'])
print(df)


  Currency Product  Quantity      Date
0      USD       a       1.0  Apr 2019
1      USD       a       7.0  Jun 2019
2      USD       b       4.0  Jan 2019
3      USD       b       8.0  Feb 2019
1
ansev 7 oct. 2019 a las 15:50
58272841

Preguntas relacionadas

30 ¿Cómo fusiono dos diccionarios en una sola expresión?
25 Encontrar el índice de un elemento dada una lista que lo contiene en Python
29 ¿Cómo hacer una lista plana de la lista de listas?
17 ¿Cómo puedo agregar nuevas claves a un diccionario?
10 Iterando sobre diccionarios usando bucles 'for'
9 ¿Cómo seleccionar filas de un DataFrame basado en valores de columna?

Nuevas preguntas

3 Estoy dentro del rango usando pop pero todavía obtengo un error de fuera de rango
4 Use la variable de clase dentro de un método de esta clase
2 Clase de Python con muchas variables
3 Fusionando dos df sin ninguna clave
3 ¿Cómo acceder al valor en una cadena JSON usando una clave en Python?
3 convertir un entero de cadena con comas y punto para flotar
2 (Sintaxis) Obtener el índice de la mayor diferencia entre dos listas (en 1 línea)
2 Pandas: toma todos los caracteres antes de que aparezca el primer dígito
2 El acceso al diccionario de Python termina como un error de tipo
2 Pandas DataFrame: filtrar columna / índice por tipo
Nuevas preguntas con la etiqueta python >

python

Python es un lenguaje de programación multipropósito, de tipificación dinámica y de múltiples paradigmas. Está diseñado para ser rápido de aprender, comprender y usar, y hacer cumplir una sintaxis limpia y uniforme. Tenga en cuenta que Python 2 está oficialmente fuera de soporte a partir del 01-01-2020. Aún así, para preguntas de Python específicas de la versión, agregue la etiqueta [python-2.7] o [python-3.x]. Cuando utilice una variante de Python (por ejemplo, Jython, PyPy) o una biblioteca (por ejemplo, Pandas y NumPy), inclúyala en las etiquetas.

Más sobre python...