查看原文
其他

PRL:高效通信量子算法,迈向大规模机器学习

光子盒研究院 光子盒 2023-11-30

光子盒研究院出品


训练数据的数量对于机器学习模型实现高精确度、泛化能力和预测能力至关重要。同时,全球存储的数据总量正以前所未有的速度增长,因此,对于机器学习算法来说,在可行的时间和内存范围内利用这些大规模的数据成为一个挑战。分布式机器学习是一个很有前途的解决方案,训练数据和学习过程被分配到多台机器上;因此,分布式算法自然地扩大了计算能力,也提供了一种处理收集到的内在分布式数据的方法。然而,这些算法需要在不同的机器之间进行广泛的通信,这通常会成为一个限制速度的步骤。因此,用于机器学习任务的高效通信方案引起了广泛的兴趣。

无论是在经典还是量子通道中的计算任务,两台机器之间的必要通信是由其通信复杂度来量化的;然而,到目前为止,量子算法只被研究为计算复杂度的加速器。

近日,MIT团队在《物理评论快报》期刊上发表了《分布式机器学习的通信效率量子算法(Communication-Efficient Quantum Algorithm for Distributed Machine Learning)》论文,开发了一种基于量子计数的方案,以通信复杂度执行分布式最小二乘法和softmax回归,比经典算法得到了平方根级别的改进



与实现相同目标的经典和其他量子方法相比,这个方法在数据量扩展时具有通信优势。该方法的核心是量子二部相关算法(quantum bipartite correlator algorithm),可用于估计分布在两方当中的两个比特串之间的相关性或 Hamming 距离,并可进一步应用于其他信息处理任务。

总之,这篇论文为实现分布式机器学习的高效通信算法提供了很有前景的量子方法:大大降低了通信量,为大规模机器学习的实现提供了可行的新途径
 
分布式量子计数或量子二部相关器方案的量子电路

在参数空间N、ε和M中,量子二部相关器算法、确定性和随机经典算法的通信复杂度相位图

参考链接:
[1]https://mp.weixin.qq.com/s/sNRObswghYcvUChLtGX9mg
[2]https://journals.aps.org/prl/abstract/10.1103/PhysRevLett.130.150602


相关阅读:
摩根大通:“量子机器学习”优化金融风险建模
量子机器学习的挑战与机遇 | 综述荐读
量子机器学习进展:哈佛仅用六个铷原子模拟大脑功能
量子机器学习的突破!首次实现量子-经典生成算法
谷歌在机器学习中证明量子计算优越性

#光子盒视频号开通啦!你要的,这里全都有#

每周一到周五,我们都将与光子盒的新老朋友相聚在微信视频号,不见不散!

|qu|cryovac>

|qu|cryovac>
你可能会错过:|qu|cryovac>

|qu|cryovac>

继续滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存