最近在试着寻找ML + sys可做的方向,发现涉及到的坑太多了,有点眼花缭乱的感觉......不如写点东西总结一哈,帮自己理一下思路
另外会列出一些学术界/工业界在做相关方向的研究组,来膜拜一下
这个又可以分为两个方面:from ML / system perspective
从ML的角度做,主要是发明分布式训练算法。
从System的角度做,
另外这里有个最近非常火的概念:Federated Learning。
111
和Distributed Training的区别是这里更关注一些工程实现上的东西(框架设计、计算图定义等等)。
https://www.zhihu.com/question/326890535/answer/717865868
TVM:
2222
...
原文:https://www.cnblogs.com/pdev/p/12188411.html