最近在做轨迹大数据的相关工作,在建模的时候发现状态转移矩阵非常巨大,size = 6w * 5 * 6w ,创建时直接内存报错,矩阵是稀疏矩阵,有什么好的方法可以解决吗?
2个回答
6w * 5 * 6w?张量还是矩阵?
如果稀疏的,应该有对应的稀疏表达
很多处理方式都是跟具体的编程语言相关的
SofaSofa数据科学社区DS面试题库 DS面经scipy里有相应的稀疏矩阵函数,参见https://docs.scipy.org/doc/scipy/reference/sparse.html
另外,matlab里也有相应的函数。稀疏矩阵的存储有专门的算法,因为稀疏,所以很多值不用存储。
SofaSofa数据科学社区DS面试题库 DS面经 相关主题
小白求教:一样的数据和差不多的代码,线性回归(LinearRegression)为甚麽自己的和书上的准确率差了挺多
1回答
RBF核的多参数体现在哪?
2回答
因子分析的维度是怎么划分的呢
0回答
生存分析中left censored, right censored有什么区别?
1回答
如何评价大数据的未来?
2回答
关于node.js的问题
1回答
python能不能直接读取word文本,doc或者docx文件?
1回答
我们谢绝在回答前讲“生动”的故事。
我们谢绝“这么简单,你自己想”、“书上有的,你认真看”这类的回答;如果你认为对方的提问方式或者内容不妥,你可以直接忽略该问题,不用进行任何作答,甚至可以对该问题投反对票。
我们谢绝答非所问。
我们谢绝自己不会、硬要回答。
我们感激每一个用户在编写答案时的努力与付出!