Federated Learning--很牛叉的分布式训练方式

2019独角兽企业重金招聘Python工程师标准>>>

这两天正在思考手机上的图像识别模型的更新问题，觉得挺头疼的。结果今天就看到了Google的Federated Learning方案，太牛叉了。对Federated Learning不了解的朋友，可以看看这篇文章《分布式机器学习时代即将来临？谷歌推出“Federated Learning”》。

Federated Learning的闪光点：

手机不仅仅能使用本地模型来预测分类，还能用来训练模型识别新的东西。用户对新东西做的训练会上传云端，和其它用户做的训练更新进行融合，最终在云端得到一个更好的模型。最后，新模型又会从云端更新到手机。这样就形成了一个良好的模型更新链条。

从Federated Learning方案能看出Google的野心：Tensorflow占领手机移动端，Google云占领云市场。牛逼！

转载于:https://my.oschina.net/qinhui99/blog/879740

Federated Learning--很牛叉的分布式训练方式相关推荐

JS特效之很牛叉的轮播图
//HTML部分: <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://w ...
推荐一个很牛叉的开源Flask项目
点击上方"Python进击者",选择"星标"公众号超级无敌干货第一时间推给你!!! 各位小伙伴们好,今天主要给大家推荐一个我近期遇到的一个Flask项目.为什 ...
nginx 开启gzip压缩--字符串压缩比率很牛叉
刚刚给博客加了一个500px相册插件,lightbox引入了很多js文件和css文件,页面一下子看起来非常臃肿,所以还是把Gzip打开了. 环境:Debian 6 1.Vim打开Nginx配置文件 v ...
程序如何在两个gpu卡上并行运行_深度学习分布式训练相关介绍 - Part 1 多GPU训练...
本篇文章主要是对深度学习中运用多GPU进行训练的一些基本的知识点进行的一个梳理文章中的内容都是经过认真地分析,并且尽量做到有所考证抛砖引玉,希望可以给大家有更多的启发,并能有所收获介绍大多数时 ...
阿里开源支持10万亿模型的自研分布式训练框架EPL(EasyParallelLibrary)
简介:EPL背后的技术框架是如何设计的?开发者可以怎么使用EPL?EPL未来有哪些规划?今天一起来深入了解. 作者 | 王林.飒洋来源 | 阿里技术公众号一导读最近阿里云机器学习PAI平台和达 ...
混合精度训练、分布式训练等训练加速方法
以Pytorch为例混合精度训练 Pytorch自动混合精度(AMP)训练 Pytorch自动混合精度(AMP)介绍与使用 1. 理论基础 pytorch从1.6版本开始,已经内置了torch.cu ...
阿里开源支持10万亿模型的自研分布式训练框架EPL
一导读最近阿里云机器学习PAI平台和达摩院智能计算实验室一起发布"低碳版"巨模型M6-10T,模型参数已经从万亿跃迁到10万亿,规模远超业界此前发布的万亿级模型,成为当前全球最 ...
「分布式训练」使用 DDP 实现程序单机多卡并行指南
最近在大趋势的影响下,开始染指大模型.由于实验室计算资源的限制,需要使用单机多卡并行的方式运行程序,这里以 BLOOM-560m 模型为例,演示如何通过单机多卡DDP并行的方式微调完成下游任务. 目录 ...
PyTorch 源码解读之分布式训练了解一下？
来源丨商汤学术编辑丨极市平台本文由浅入深讲解 torch.distributed 这一并行计算包的概念,实现细节和应用方式,并带大家快速入门 PyTorch 分布式训练. 0 前言由于大规模 ...

Federated Learning--很牛叉的分布式训练方式

Federated Learning--很牛叉的分布式训练方式相关推荐

最新文章

热门文章