Как исправить слетание кодировки при обработке jsonl в json файла
Я конвертирую jsonl в json, но при выведении таблицы слетает кодировка
import pandas as pd
jsonObj = pd.read_json(path_or_buf='/NTI_data/test.jsonl', lines=True)
print(jsonObj)
output:
passage
0 {'text': '"(1) Р�здательство Viking Press совместно СЃ Р...
1 {'text': '"(1) Студия Epic Games анонсировала бета-С‚Р...
2 {'text': '"(1) Компания Warner Bros. рассматривает Бе...
3 {'text': '(1) На полках лаборатории Лоуренс-Бер...
4 {'text': '(1) Усилия Лэнгдона оказываются напрР...
.. ...
317 {'text': '(1) Какое же зеркало жизни наш язык!(2) ...
318 {'text': '(1) Р РѕСЃСЃРёСЏРЅРёРЅ Дмитрий Михайленко стаР...
319 {'text': '(1) Датский карикатурист РљСѓСЂС‚ ВестерР...
320 {'text': '(1) Жил-был маленький медвежонок. (2) У ...
321 {'text': '"(1) Р’ Латвии вынесен РїСЂРёРіРѕРІРѕСЂ владелС...
Ответы (1 шт):
Автор решения: Alexey Leshchenko
→ Ссылка
Добавьте параметр encoding:
import pandas as pd
jsonObj = pd.read_json(path_or_buf='/NTI_data/test.jsonl', lines=True, encoding='utf-8')
print(jsonObj)