UnicodeDecodeError: кодек «utf-8» не может декодировать байт 0x8b в позиции 1: неверный начальный байт при чтении файла ⇐ Python

[Anonymous]

Я знаю, что подобные вопросы уже задавались, я видел их все и пробовал, но это мало помогло. Я использую OSX 10.11 El Capitan, python3.6., виртуальную среду, пробовал и без нее. Я использую блокнот Jupyter и Spyder3.

Я новичок в Python, но знаю основы машинного обучения и читаю пост, чтобы узнать, как решать проблемы Kaggle: Ссылка на блог, Ссылка в набор данных

.Я застрял на первых нескольких строках кода
`

Код: Выделить всё

import pandas as pd

destinations = pd.read_csv("destinations.csv")
test = pd.read_csv("test.csv")
train = pd.read_csv("train.csv")

и это выдает ошибку

Код: Выделить всё

UnicodeDecodeError                        Traceback (most recent call last)
 in ()
1 import pandas as pd
----> 2 df = pd.read_csv('destinations.csv', compression='infer',date_parser=True, usecols=([0,1,3]))
3 df.head()

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in parser_f(filepath_or_buffer, sep, delimiter, header, names, index_col, usecols, squeeze, prefix, mangle_dupe_cols, dtype, engine, converters, true_values, false_values, skipinitialspace, skiprows, nrows, na_values, keep_default_na, na_filter, verbose, skip_blank_lines, parse_dates, infer_datetime_format, keep_date_col, date_parser, dayfirst, iterator, chunksize, compression, thousands, decimal, lineterminator, quotechar, quoting, escapechar, comment, encoding, dialect, tupleize_cols, error_bad_lines, warn_bad_lines, skipfooter, skip_footer, doublequote, delim_whitespace, as_recarray, compact_ints, use_unsigned, low_memory, buffer_lines, memory_map, float_precision)
653                     skip_blank_lines=skip_blank_lines)
654
--> 655         return _read(filepath_or_buffer, kwds)
656
657     parser_f.__name__ = name

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in _read(filepath_or_buffer, kwds)
403
404     # Create the parser.
--> 405     parser = TextFileReader(filepath_or_buffer, **kwds)
406
407     if chunksize or iterator:

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in __init__(self, f, engine, **kwds)
762             self.options['has_index_names'] = kwds['has_index_names']
763
--> 764         self._make_engine(self.engine)
765
766     def close(self):

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in _make_engine(self, engine)
983     def _make_engine(self, engine='c'):
984         if engine == 'c':
--> 985             self._engine = CParserWrapper(self.f, **self.options)
986         else:
987             if engine == 'python':

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in __init__(self, src, **kwds)
1603         kwds['allow_leading_cols'] = self.index_col is not False
1604
-> 1605         self._reader = parsers.TextReader(src, **kwds)
1606
1607         # XXX

pandas/_libs/parsers.pyx in pandas._libs.parsers.TextReader.__cinit__ (pandas/_libs/parsers.c:6175)()

pandas/_libs/parsers.pyx in pandas._libs.parsers.TextReader._get_header (pandas/_libs/parsers.c:9691)()

UnicodeDecodeError: 'utf-8' codec can't decode byte 0x8b in position 1: invalid start byte

Некоторые ответы на stakoverflow предполагают, что это связано с тем, что он заархивирован, но Chrome загрузил файл .csv, а .csv.gz нигде не было видно, а возвращенный файл не найден. ошибка.

Затем я где-то прочитал, как использовать кодировку ='latin1', но после этого получаю ошибку синтаксического анализатора:

Код: Выделить всё

---------------------------------------------------------------------------
ParserError                               Traceback (most recent call last)
 in ()
1 import pandas as pd
2
----> 3 destinations = pd.read_csv("destinations.csv",encoding='latin1')
4 test = pd.read_csv("test.csv")
5 train = pd.read_csv("train.csv")

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in parser_f(filepath_or_buffer, sep, delimiter, header, names, index_col, usecols, squeeze, prefix, mangle_dupe_cols, dtype, engine, converters, true_values, false_values, skipinitialspace, skiprows, nrows, na_values, keep_default_na, na_filter, verbose, skip_blank_lines, parse_dates, infer_datetime_format, keep_date_col, date_parser, dayfirst, iterator, chunksize, compression, thousands, decimal, lineterminator, quotechar, quoting, escapechar, comment, encoding, dialect, tupleize_cols, error_bad_lines, warn_bad_lines, skipfooter, skip_footer, doublequote, delim_whitespace, as_recarray, compact_ints, use_unsigned, low_memory, buffer_lines, memory_map, float_precision)
653                     skip_blank_lines=skip_blank_lines)
654
--> 655         return _read(filepath_or_buffer, kwds)
656
657     parser_f.__name__ = name

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in _read(filepath_or_buffer, kwds)
409
410     try:
--> 411         data = parser.read(nrows)
412     finally:
413         parser.close()

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in read(self, nrows)
1003                 raise ValueError('skipfooter not supported for iteration')
1004
-> 1005         ret = self._engine.read(nrows)
1006
1007         if self.options.get('as_recarray'):

/usr/local/lib/python3.6/site-packages/pandas/io/parsers.py in read(self, nrows)
1746     def read(self, nrows=None):
1747         try:
-> 1748             data = self._reader.read(nrows)
1749         except StopIteration:
1750             if self._first_chunk:

pandas/_libs/parsers.pyx in pandas._libs.parsers.TextReader.read (pandas/_libs/parsers.c:10862)()

pandas/_libs/parsers.pyx in pandas._libs.parsers.TextReader._read_low_memory (pandas/_libs/parsers.c:11138)()

pandas/_libs/parsers.pyx in pandas._libs.parsers.TextReader._read_rows (pandas/_libs/parsers.c:11884)()

pandas/_libs/parsers.pyx in pandas._libs.parsers.TextReader._tokenize_rows (pandas/_libs/parsers.c:11755)()

pandas/_libs/parsers.pyx in pandas._libs.parsers.raise_parser_error (pandas/_libs/parsers.c:28765)()

ParserError: Error tokenizing data. C error: Expected 2 fields in line 11, saw 3

Я потратил часы на отладку этого, пытался открыть файлы csv на Atom (ни одно другое приложение не смогло их открыть), онлайн-веб-приложения (некоторые из них вышли из строя), но никакой помощи. Я пробовал использовать ядра других людей, которые решили проблему, но безрезультатно.

Подробнее здесь: https://stackoverflow.com/questions/446 ... -1-invalid