Какую роль минимальное и максимальное значения играют в сокращении использования памяти?Python

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Какую роль минимальное и максимальное значения играют в сокращении использования памяти?

Сообщение Anonymous »

Я изучаю код из этого github Intrusion Detection (CIC-IDS2017)
Вот код и результат, который авторы используют для уменьшения памяти, но я этого не делаю знаете, почему автор сделал корректировки исходя из максимального и минимального значений?

Код: Выделить всё

old_memory_usage = data.memory_usage().sum() / 1024 ** 2
print(f'Initial memory usage: {old_memory_usage:.2f} MB')
for col in data.columns:
col_type = data[col].dtype
if col_type != object:
c_min = data[col].min()  # = 0 and c_min > np.finfo(np.float32).min and c_max < np.finfo(np.float32).max:
data[col] = data[col].astype(np.float32)

# Downcasting int64 to int32
elif str(col_type).find('int') >= 0 and c_min > np.iinfo(np.int32).min and c_max < np.iinfo(np.int32).max:
data[col] = data[col].astype(np.int32)

new_memory_usage = data.memory_usage().sum() / 1024 ** 2
print(f"Final memory usage: {new_memory_usage:.2f} MB")
ссылка: Обнаружение вторжений (CIC-IDS2017)
Я пытался распечатать c_min и np.finfo(np.float32) .min, чтобы найти несколько ролей.
Почему существуют числа (

Код: Выделить всё

np.finfo(np.float32).min
) меньше минимального значения () У меня есть столбец данных?
Формат:
имена столбцов ; c_min ; np.finfo(np.float32).min

Код: Выделить всё

Initial memory usage: 798.63 MB
Fwd Packet Length Mean 0.0 -3.4028235e+38
Fwd Packet Length Std 0.0 -3.4028235e+38
Bwd Packet Length Mean 0.0 -3.4028235e+38
Bwd Packet Length Std 0.0 -3.4028235e+38
Flow Bytes/s -261000000.0 -3.4028235e+38
Flow Packets/s -2000000.0 -3.4028235e+38
Flow IAT Mean -13.0 -3.4028235e+38
Flow IAT Std 0.0 -3.4028235e+38
Fwd IAT Mean 0.0 -3.4028235e+38
Fwd IAT Std 0.0 -3.4028235e+38
Bwd IAT Mean 0.0 -3.4028235e+38
Bwd IAT Std 0.0 -3.4028235e+38
Fwd Packets/s 0.0 -3.4028235e+38
Bwd Packets/s 0.0 -3.4028235e+38
Packet Length Mean 0.0 -3.4028235e+38
Packet Length Std 0.0 -3.4028235e+38
Packet Length Variance 0.0 -3.4028235e+38
Average Packet Size 0.0 -3.4028235e+38
Avg Fwd Segment Size 0.0 -3.4028235e+38
Avg Bwd Segment Size 0.0 -3.4028235e+38
Active Mean 0.0 -3.4028235e+38
Active Std 0.0 -3.4028235e+38
Idle Mean 0.0 -3.4028235e+38
Idle Std 0.0 -3.4028235e+38
Final memory usage: 798.63 MB
И найдите, что такое np.finfo()
Официальное введение: машинные ограничения для типов с плавающей запятой

Подробнее здесь: https://stackoverflow.com/questions/792 ... mory-usage
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «Python»