Google的联合分析方法可以分析最终用户数据而不会侵犯隐私

发布时间:2020-05-29 10:45:15 【来源:

Google在今天的博客文章中提出了联合分析的概念,这是一种将数据科学方法应用于对本地存储在边缘设备上的原始数据进行分析的实践。正如技术巨头所解释的那样,它的工作方式是对设备的数据运行本地计算,并仅将汇总的结果(而不是来自特定设备的数据)提供给授权工程师。

联合分析与联合学习密切相关,联合学习是一种AI技术,可以跨多个保存本地样本的设备训练算法,但它仅支持基本的数据科学需求。它是“联合学习精简版” —联合分析使公司能够以保护隐私和安全的方式分析用户行为,从而可以开发出更好的产品。Google本身使用联合技术来增强Gboard的单词建议和Android Messages的智能回复功能。

“对联合分析的第一个探索是支持联合学习:当数据中心中没有可用的数据时,工程师如何根据实际数据衡量联合学习模型的质量?答案是重新使用联合学习基础架构,但没有学习部分。”谷歌研究科学家丹尼尔·拉奇(Daniel Ramage)和软件工程师Stefano Mazzocchi在一份声明中说。“在联邦学习中,模型定义不仅可以包括要优化的损失函数,还可以包括代码以计算指示模型预测质量的指标。我们可以使用此代码直接评估手机数据上的模型质量。”

例如,在一项用户研究中,Gboard工程师根据手机上保存的原始打字数据测量了单词预测模型的整体质量。参与研究的电话下载了一个候选模型,在本地计算了该模型的预测与实际键入的单词匹配程度的度量,然后上传了该度量,而无需对模型本身进行任何调整或对Gboard的键入体验进行任何更改。通过平均许多手机上载的指标,工程师了解了模型性能的总体水平摘要。

在另一项研究中,Gboard工程师希望发现用户通常键入的单词,并将其添加到词典中以进行拼写检查和键入建议。他们仅使用在全球词典中还没有在这些电话上键入的单词来训练电话上的字符级循环神经网络。从来没有打字过的单词离开电话,但是可以在数据中心中使用生成的模型来生成频繁键入的字符序列(即新单词)的样本。

除了模型评估之外,Google还使用联合分析在其Pixel手机上支持“正在播放”功能,该功能可显示附近可能正在播放的歌曲。在引擎盖下,“正在播放”可轻敲设备上的歌曲指纹数据库,无需移动网络即可识别手机附近的音乐。

当Google Play识别出一首歌曲时,它会将曲目名称记录到设备上的历史记录中;当手机处于空闲状态且正在通过Wi-Fi进行充电时,Google的联合学习和分析服务器有时会邀请其加入用数百部手机进行计算。该回合中的每部电话都会计算其“正在播放”历史记录中歌曲的识别率,并使用安全的聚合协议对结果进行加密。加密的费率被发送到联合分析服务器,该服务器没有用于单独解密它们的密钥。与本轮其他手机的加密计数结合使用时,服务器可以解密所有歌曲计数的最终计数。

这样的结果使Google的工程师可以改善歌曲数据库,而无需任何电话透露任何歌曲,例如,通过确保数据库中包含真正流行的歌曲。Google声称,在其第一次改进迭代中,联合分析使全球所有Pixel手机的总体歌曲识别率提高了5%。

“我们还在开发技术,以回答分散数据集上甚至更多模棱两可的问题,例如'我的模型难以识别哪些数据模式?”通过训练联合生成模型。我们正在探索应用用户级差分私有模型训练的方法,以进一步确保这些模型不对任何一个用户唯一的信息进行编码。” Ramage和Mazzocchi写道。“联合分析方法仍处于早期阶段,需要以更高的准确性来回答许多常见的数据科学问题。[B]但联合分析使我们能够以不同的方式来考虑数据科学,其中分散的数据和隐私保护聚合发挥中心作用。”

中国联通:已累计开通5G基站33.2万站 到今年年底预计超过38万个
饿了么现已入驻1000所高校食堂 校园内平均20分钟送达
谷歌在西雅图附近规划新园区 在亚马逊和微软总部所在地扩大触角
我国国家顶级域名“.CN”数量超过2300万个 IPv6规模化部署提速
邬贺铨:截至8月我国IPv6活跃用户达3.65亿 占互联网用户之比达40.32%
苹果、谷歌、英特尔等公司已经加入行业组织美国“6G联盟”
微软今天正式终止Win7嵌入式系统支持 花钱可买三年补丁
OPPO将发布首款概念级应用OPPO CybeReal 针对AR领域

[ 最新资讯 ]

始祖鸟之家双面派对,设计师系列惊艳亮相

  11月24日,被誉为户外爱马仕的始祖鸟(ARC’TERYX)全新概念店——始祖鸟之家在全国顶级商圈北京国贸开业了。现场门店实拍图片   ...

曝小米显示器34寸本月最后一单出货后将暂停供应 因三星无屏供应原因

  本月初,视讯堂消息称小米的 34 寸带鱼屏显示器型号,之后可能无法再保持 1999 元的价格进行销售。今天,视讯堂发布最新消息,称小 ...

微星Stealth 15M超轻游戏本纯净白即将上架 屏幕为15.6英寸

  根据微星笔记本官方的消息,微星 Stealth 15M (纯净白)即将上架预约,这款笔记本是首款采用 11 代低压酷睿 + RTX 2060 配置的 ...

EG7今天宣布收购《机甲战士5》开发商Piranha Games 增加其游戏公司种类

  Enad Global 7(EG7)今天(11 27)宣布收购《机甲战士5》开发商Piranha Games,增加了其游戏公司的种类。  EG7已同意以2410万美元的 ...

华米将推出GTS 2 mini手表:将于12月1日发布 外观更轻薄更精致

  根据华米创始人黄汪的消息,华米将推出 GTS 2 mini 手表,外观更轻薄更精致。    根据华米微博的消息, GTS 2 mini 手表将 ...

冬季必看的小黑裤穿搭指南|九牧王男裤专家

  伴随着秋冬而来的除了购物欲还有穿搭热情,但如果你正苦于衣服少、缺乏穿搭灵感,那么,一条百搭、舒适的九牧王小黑裤,或许可以帮到你,只 ...