嗨,我需要使用 Map Reduce 对大型密集方形矩阵执行奇异值分解。
我已经检查了 Mahout 项目,但他们提供的是 TSQR 算法http://arbenson.github.io/portfolio/Math221/AustinBenson-math221-report.pdf .
问题是我想要完整的排名,而这种方法在这种情况下不起作用。他们之前使用的分布式Lanczos SVD实现也不适合我的情况。
我发现双面雅可比方案可以用于此目的,但我没有设法找到任何可用的实现。
有人知道我是否可以以及在哪里可以找到参考代码吗?
如果它有帮助 - 看看 spark lib (mlib)。它有落实。你可以使用它,或者看着它,你可以自己做。https://spark.apache.org/docs/latest/mllib-dimensionality-reduction.html