Запись Pandas DataFrame в JSON в Юникоде ⇐ Python

[Anonymous]

Я пытаюсь написать DataFrame pandas, содержащий Юникод, в json, но встроенная функция .to_json экранирует символы, отличные от ascii. Как это исправить?
Пример:

Код: Выделить всё

import pandas as pd

df = pd.DataFrame([["τ", "a", 1], ["π", "b", 2]])
df.to_json("df.json")

Это дает:

Код: Выделить всё

{"0":{"0":"\u03c4","1":"\u03c0"},"1":{"0":"a","1":"b"},"2":{"0":1,"1":2}}

Что отличается от желаемого результата:

Код: Выделить всё

{"0":{"0":"τ","1":"π"},"1":{"0":"a","1":"b"},"2":{"0":1,"1":2}}

Я попробовал добавить аргумент Force_ascii=False:

Код: Выделить всё

import pandas as pd

df = pd.DataFrame([["τ", "a", 1], ["π", "b", 2]])
df.to_json("df.json", force_ascii=False)

Но это выдает следующую ошибку:

Код: Выделить всё

UnicodeEncodeError: 'charmap' codec can't encode character '\u03c4' in position 11: character maps to 

Это происходит в версиях панд от 0.18 до 2.2+ и на Python от 3.4 до 3.12+

Подробнее здесь: https://stackoverflow.com/questions/396 ... in-unicode