我需要将50000个txt文件的内容依次写入一个矩阵中，最后形成一个shape为（5000,500,500,1）的矩阵，请问python代码怎么写效率最高，最节约内存？
1个回答
我觉得如果文件很多的话，是不是可以并行读入，节约时间
如果是数据里0很多，是可以转成稀疏矩阵；如果对精度要求不高，可以降低精度，都应该对减小内存有帮助
SofaSofa数据科学社区DS面试题库 DS面经
chaos0
2022-05-10 10:46
相关讨论
随便看看