2021 年，深度学习方面取得了哪些关键性进展？ 第1页
1
xie-xu-dong-76 网友的相关建议:
不敢妄加评论，只是个人意见，GitHub上有人总结了2021 Amazing AI papers，我认为比较中肯，基本可以算是今年影响力比较大的论文集锦
我认为其一是Transformer攻占各个领域，尤其是Swin Transformer大杀四方；其二是各大研究机构的预训练大模型发布及其在下游任务的惊人性能，当然这也离不开self-supervised+transformer；其三就是大家都提到的MAE，当然还是离不开transformer；还有一个我认为比较重要的是基于NeRF的一系列工作也在今年开始爆发，包括CVPR best paper GIRAFFE，不过这方面工作主要还是集中在国外研究团队
1
相关话题
2021 年国际上的哪一幕，让你意识到「生活在中国很幸福」？现在的人工智能是否走上了数学的极端？
机器学习中的优化理论，需要学习哪些资料才能看懂？
深度学习中，模型大了好还是小了好呢？
想问下专业人士 OpenCv会被深度学习进一步取代吗进一步取代吗？
基于深度卷积神经网络进行人脸识别的原理是什么？
如何评价微软机器翻译在 WMT2017 中英翻译达到「人类水平」？
如何将某个分布作为机器学习的特征？
卷积神经网络（CNN）的结构设计都有哪些思想？
如何评价 Face++ 旷视科技最新出品的检测专用 backbone 网络 DetNet ？
相关的话题
请问人工神经网络中的activation function的作用具体是什么？为什么ReLu要好过于tanh和sigmoid function?主动学习（Active Learning）近几年的研究有哪些进展，现在有哪些代表性成果？
无人车为什么一定要用激光雷达做，双目视觉难道不行吗？
如何评价FAIR提出的MaskFeat：一种适用图像和视频分类的自监督学习方法？
Graph Attention Network的本质是什么？
如何评价深度学习之父Hinton发布的Capsule论文？
如何看待AI伦理科学家Timnit Gebru在邮件控诉谷歌缺乏种族多样性后被Jeff Dean炒掉？
2022 年即将到来，回顾 2021 年你有哪些微小的进步和坚持，特别值得被铭记？
如何看UCBerkeley RISELab即将问世的Ray，replacement of Spark？
自然语言处理方向研究生好找工作吗？
如何理解 inductive learning 与 transductive learning?
是不是对于任意 n×n 大小的围棋棋盘，人类都赢不了 AlphaGo Zero 了？
机器学习中的 Bias（偏差）、Error（误差）、Variance（方差）有什么区别和联系？
做底层 AI 框架和做上层 AI 应用，哪个对自己的学术水平（或综合能力）促进更大？
国内有哪些不错的CV(计算机视觉)团队?
如何评价哈工大的左旺孟老师？
Python中 __init__的通俗解释是什么？
如何评价李飞飞和李佳加盟谷歌？
目标检测算法中Two-stage算法速度慢,到底在哪里?
如何看待Tensor Comprehensions？与TVM有何异同？
为什么那么多导演都想打造电影宇宙？
卷积神经网络中卷积核是如何学习到特征的？
cv/nlp等方向的就业困难是全球性的吗？
假如我穿越到2017年第一个提出了Transformer、BERT等模型，我可以保送到清华北大吗？
深度学习应用在哪些领域让你觉得「我去，这也能行！」？
领域自适应需要用到测试集数据，这样的方法有啥意义呢？
cygwin和mingw选哪个？
细数 2021 年，最令你骄傲和自豪的事情是什么？
年轻人为什么要做期货？
在数据分析、挖掘方面，有哪些好书值得推荐？