Кодирование в utf-16be и декодирование в utf-8 выводят правильный результат, но не могут быть преобразованы в представле ⇐ Python

[Anonymous]

Если я кодирую строку с помощью utf-16be и декодирую закодированную строку с помощью utf-8, я не получаю никаких ошибок, и вывод, похоже, правильно печатается на экран, но я все равно не могу преобразовать декодированную строку в представление Python с помощью модуля json.

Код: Выделить всё

import json

str = '{"foo": "bar"}'
encoded_str = str.encode("utf-16be")
decoded_str = encoded_str.decode('utf-8')
print(decoded_str)
print(json.JSONDecoder().decode(decoded_str))

Я знаю, что закодированную строку следует декодировать с использованием той же кодировки, но почему я пытаюсь понять, почему именно такое поведение? Я хочу знать:

• Зачем кодировать str с помощью utf-16be  и декодировать encoded_str  с помощью utf -8 не приводит к ошибке?
• Поскольку кодирование и декодирование  не приводит к ошибке, и decoded_str< /code> является допустимым JSON (как видно из оператора печати), почему decode(decoded_str) приводит к ошибке?
• Почему запись вывода в файл и просмотр файла с помощью команды less показывают его как двоичный файл?

  Код: Выделить всё

  file = open("data.txt", 'w')
  file.write(decoded_str)
  

  При использовании команды less для просмотра файла data.txt:

  Код: Выделить всё

  "data.txt" may be a binary file.  See it anyway?
  

• Если decoded_str является недопустимым JSON или чем-то еще, как я могу просмотреть его в исходной форме (

  Код: Выделить всё

  print()

  печатает его как действительный JSON)

Я использую Python 3.10.12 в Ubuntu 22.04.4 LTS

Подробнее здесь: https://stackoverflow.com/questions/791 ... t-cannot-b