Столбец DataFrame с цитируемым CSV к названным столбцам DataFrame ⇐ Python

[Anonymous]

Я вытягиваю несколько форматированных данных журнала JSON из моего Seim и в DataFrame Pandas. Я могу легко преобразовать JSON в несколько столбцов в DataFrame, но в JSON есть поле «Сообщение», которое содержит цитируемый CSV, как это. < /P>

Код: Выделить всё

# dummy data
dfMyData = pd.DataFrame({"_raw": [\
"""{"timestamp":1691096387000,"message":"20230803 20:59:47,ip-123-123-123-123,mickey,321.321.321.321,111111,10673010,type,,'I am a, quoted, string, with commas,',0,,","logstream":"Blah1","loggroup":"group 1"}""",
"""{"timestamp":1691096386000,"message":"20230803 21:00:47,ip-456-456-456-456,mouse,654.654.654.654,222222,10673010,type,,'I am another quoted string',0,,","logstream":"Blah2","loggroup":"group 2"}"""
]})
# Column names for the _raw.message field that is generated.
MessageColumnNames =  ["Timestamp","dest_host","username","src_ip","port","number","type","who_knows","message_string","another_number","who_knows2","who_knows3"]
# Convert column to json object/dict
dfMyData['_raw'] = dfMyData['_raw'].map(json.loads)
# convert JSON into columns within the dataframe
dfMyData = pd.json_normalize(dfMyData.to_dict(orient='records'))

Я видел это раньше с помощью str.split () для разделения на столбцах, а затем включил его обратно в исходный DataFrame, однако метод str.split не обрабатывает цитируемые значения в CSV. Pd.read_csv может правильно обрабатывать цитируемый CSV, но я не могу выяснить, как применить его через DataFrame и расширить выходные данные на новые столбцы DataFrame.
Кроме Имена.>

Подробнее здесь: https://stackoverflow.com/questions/768 ... me-columns