大型协同标准化

Question

我想要计算大小〜（1000000,100000）的设计的协方差矩阵。所以设计矩阵的大尺寸，我无法将它全部加载到内存中，所以一直在做飞行计算以添加设计块。

我现在想获得一个对设计列进行z分数的协方差。有一种简单的方法我可以迭代地做到这一点，我错过了吗？我还想过对所有设计进行内存映射 - 虽然这比我目前的解决方案更不优雅。