Невозможно определить разницу между значениями R^2 для тестирования и обучения. ⇐ Python

[Anonymous]

Столкнулся с проблемой, когда у меня серьезно отклоняется значение R^2 для моих тестовых данных (-3,6), хотя мои тренировочные данные выглядят прилично (0,8). Данные могли иметь переобучение, но число настолько неверное, что это, должно быть, ошибка. Мне было поручено масштабировать X и Y с помощью нормализации Z-показателя. При необходимости я могу прикрепить набор данных, но хочу посмотреть, есть ли в коде явные проблемы. Я не удалил ни одного столбца, но очистил данные. Меня также проинструктировали пока не рассматривать это как полиномиальную систему.
# split data into train test split (80-20)
X_train, X_test, Y_train, Y_test = train_test_split(X, Y, test_size=0.2, shuffle=True, random_state=5)

print(X_train.shape)
print(X_test.shape)
print(Y_train.shape)
print(Y_test.shape)

from sklearn.preprocessing import StandardScaler

scaler_X = StandardScaler()
scaler_Y = StandardScaler()

# fit scalers on training data only
X_train_scaled = scaler_X.fit_transform(X_train)
Y_train_scaled = scaler_Y.fit_transform(Y_train.values.reshape(-1, 1))

# transform test data using the same scalers
X_test_scaled = scaler_X.transform(X_test)
Y_test_scaled = scaler_Y.transform(Y_test.values.reshape(-1, 1))

X_train_scaled = pd.DataFrame(X_train_scaled, columns=X_train.columns)
X_test_scaled = pd.DataFrame(X_test_scaled, columns=X_test.columns)
Y_train_scaled = pd.DataFrame(Y_train_scaled, columns=['Y_train_scaled'])
Y_test_scaled = pd.DataFrame(Y_test_scaled, columns=['Y_test_scaled'])

#print(X_train_scaled)
#print(X_test_scaled)
#print(Y_train_scaled)
#print(Y_test_scaled)

print(X_train_scaled.describe())
print(Y_train_scaled.describe())
print(X_test_scaled.describe())
print(Y_test_scaled.describe())


Подробнее здесь: https://stackoverflow.com/questions/798 ... -r2-values