[论文阅读]TinyTL: Reduce Activations, Not Trainable Parameters for Efficient On-Device Learning
TinyTL: Reduce Activations, Not Trainable Parameters for Efficient On-Device Learning主要讲终端设备学习,边缘设备持续接受新数据,让AI模型适应新数据,但是只能用一小部分内存去适应边缘设备有限的内存空间。现有的工作通过减少训练参数来解决这个问题。但是这没有直接转为对内存的节省,因为现在的瓶颈已经不在于参数,而...