Как автоматически чистить RAM с помощью python?
В наличии 96GB оперативной памяти. Работаю с большими данными.
Когда я запускаю инстансы на одном наборе данных, у меня используется примерно 60GB оперативки. Соответственно, когда я запускаю другой инстанс на том же наборе данных (т. е. мне нужно еще 60GB данных), у меня вылетает ошибка:
Unable to allocate 11.0 GiB for an array with shape (501, 2942242) and data type float64
Она свидетельствует о том, что оперативной памяти недостаточно для обработки такого объема данных. Чтобы ошибки не возникало, мне нужно остановить все другие инстансы и тогда RAM становиться свободным.
Можно ли как-то с помощью python чистить оперативную память с помощью какой-то команды? Например, мне бы подошел вариант, когда при запуске инстанса я чищу RAM. Возможно, есть еще какие-о дополнительные способы для решения этой задачи?