Оптимизация потребления памяти в ML-библиотеке LANCETNIC
Оптимизация потребления памяти в ML-библиотеке LANCETNICНедавно я столкнулся с проблемой: моя библиотека lancetnic при обучении на больших текстовых датасетах просто перегружала оперативную память. На ноутбуке с 16 ГБ RAM модель не могла обучиться даже на 25 тыс. строк. Я начал разбираться и нашёл пару причин критического перерасхода памяти. Читать далее