Самый быстрый способ создать фрейм данных из списка списков ⇐ Python

[Anonymous]

У меня есть случай, когда у меня есть исходная структура данных:

импортировать дату и время данные = { 'col1': [1,2,3,4], 'col2': ['a', 'b', 'c', 'd'], 'col3': [datetime.datetime.now() для _ в диапазоне (4)], 'col4': [[1], [2,3], [4,5,6], [7,8,9,19]], } Я хочу создать из этого фрейм данных pandas. Итак, я делаю:

df = pd.DataFrame(данные) Больше всего меня беспокоит то, что у меня есть несколько небольших словарей, подобных приведенному выше, которые доступны в потоковом режиме. Итак, использование pd.DataFrame() для каждого маленького словаря - это очень медленно.

По моим фактическим данным, на один дикт уходит около 30-40 мс. В идеале я пытаюсь достичь