关键词：
前言
transformer结构是google在17年的Attention Is All You Need论文中提出，在NLP的多个任务上取得了非常好的效果，可以说目前NLP发展都离不开transformer。最大特点是抛弃了传统的CNN和RNN，整个网络结构完全是由Attention机制组成。由于其出色性能以及对下游任务的友好性或者说下游任务仅仅微调即可得到不错效果，在计算机视觉领域不断有人尝试将transformer引入，近期也出现了一些效果不错的尝试，典型的如目标检测领域的detr和可变形detr，分类领域的vision transformer等等。本文从transformer结构出发，结合视觉中的transformer成果(具体是vision transformer和detr)进行分析，希望能够帮助cv领域想了解transformer的初学者快速入门。由于本人接触transformer时间也不长，也算初学者，故如果有描述或者理解错误的地方欢迎指正。
以下是我为大家准备的几个精品专栏，喜欢的小伙伴可自行订阅，你的支持就是我不断更新的动力哟！
本文的大部分图来自论
深度学习核心技术精讲100篇（六十五）-万字长文从relu到gelu通讲神经网络激活函数
...阅，你的支持就是我不断更新的动力哟！MATLAB-30天带你从入门到精通MATLAB深入理解高级教程（附源码）tableau可视化数据分析高级教程 查看详情
linux疑难杂症解决方案100篇（二十）-万字长文带你读懂正则表达式（建议收藏）
...阅，你的支持就是我不断更新的动力哟！MATLAB-30天带你从入门到精通MATLAB深入理解高级教程（附源码）tableau可视化数据分析高级教程正则表达式百度百科里写到：正则表达式又称规则表达式，计 查看详情
linux疑难杂症解决方案100篇（十五）-万字长文带你深入linux内核学习：环境搭建和内核编译
...阅，你的支持就是我不断更新的动力哟！MATLAB-30天带你从入门到精通 查看详情
万字长文带你了解etl和数据建模～！
...料什么是ETLETL是数据抽取（Extract）、转换（Transform）、加载（Load）的简写，它是将OLTP系统中的数据经过抽取 查看详情
linux疑难杂症解决方案100篇（十五）-万字长文带你深入linux内核学习：环境搭建和内核编译
...阅，你的支持就是我不断更新的动力哟！MATLAB-30天带你从入门到精通MATLAB深入理解高级教程（附源码）tableau可视化数据分析高级教程python快速学习实战应用系列课程在开始我们的linux内核学习之前。首先需要搭建我们的工作学习... 查看详情
python数据可视化实战应用万字长文从入门到高端（建议收藏）
...阅，你的支持就是我不断更新的动力哟！MATLAB-30天带你从入门到精通MATLAB深入理解高级教程（附源码）tableau可视化数据分析高级教程python快速学习实战应用系列课程基础篇1首先，要知道我们用哪些库来画图?matplotlibpython中最基... 查看详情
强化学习入门这一篇就够了！！！万字长文
强化学习强化学习入门这一篇就够了万字长文带你明明白白学习强化学习...强化学习入门这一篇就够了强化学习前言一、概率统计知识回顾1.1随机变量和观测值1.2概率密度函数1.3期望1.4随机抽样二、强化学习的专业术语2.1Stateanda... 查看详情
c语言学习笔记-入门整合篇(十万字长文)(代码片段)
（该篇学习内容全部来自于C语言中文网,本篇内容仅仅是简易学习笔记,以自己的理解+网站部分描述结合+个人补充，并不适合编程初学者观看!!!需要有一定的编程基础）数据在内存中存储内存条包含了上亿个电... 查看详情
flink从入门到精通100篇（二十一）-万字长文详解flink中的copyonwritestatetable
前言现如今想阅读HashMap源码实际上比较简单，因为网上一大堆博客去分析HashMap和ConcurrentHashMap。本文详细分析CopyOnWriteStateTable源码，阅读复杂集合类源码的过程是相当有挑战的，博主在刚开始阅读也遇到很多疑问，最后一一解... 查看详情
万字长文带你还原进程和线程(代码片段)
这是Java建设者的第66篇原创文章我们平常说的进程和线程更多的是基于编程语言的角度来说的，那么你真的了解什么是线程和进程吗？那么我们就从操作系统的角度来了解一下什么是进程和线程。进程操作系统中最核心的概念就... 查看详情
深度学习核心技术精讲100篇（六十五）-万字长文从relu到gelu通讲神经网络激活函数
前言在计算每一层的激活值时，我们要用到激活函数，之后才能确定这些激活值究竟是多少。根据每一层前面的激活、权重和偏置，我们要为下一层的每个激活计算一个值。但在将该值发送给下一层之前，我们要使用一个激活函... 查看详情
3万字长文记录docker最全学习笔记，手把手带你入个门
...阅，你的支持就是我不断更新的动力哟！MATLAB-30天带你从入门到精通MATLAB深入理解高级教程（附源码）tableau可视化数据分析高级教程 docker不是一个值得投入的领域，它解决的问题是Unix系统最初设计的一个疏忽。从一个不会... 查看详情
[万字长文]一文带你深入了解androidgradle(代码片段)
作为每一个Android研发，相信对gradle并不陌生，androidstudio新建每个项目或者module都会自动生成gradle文件，AS默认也是采用Gradle作为构建工具的。但是apk打包背后是如何gradle产生联系，以及gradle还能为我们平时的开发... 查看详情
万字长文带你彻底搞懂什么是devops
你知道的越多，不知道的就越多，业余的像一棵小草！成功路上并不拥挤，因为坚持的人不多。编辑：业余草juejin.cn/post/6965860856311578637推荐：https://www.xttblog.com/?p=5242DevOps日渐成为研发人员耳熟能详的一... 查看详情
mysql从入门到精通高级篇（二十）适合创建索引的11种情况&不适合创建索引的7种情况，万字长文(代码片段)
...网打尽，9.9元买不了吃亏，买不了上当。Python从入门到精通❤️2.Python爬虫专栏，系统性的学习爬虫的知识点。9.9元买不了吃亏，买不了上当。python 查看详情
万字长文深度剖析rocketmq设计原理
幸福的烦恼张大胖最近是又喜又忧，喜的是业务量发展猛增，忧的是由于业务量猛增，一些原来不是问题的问题变成了大问题，比如说新会员注册吧，原来注册成功只要发个短信就行了，但随着业务的发展，现在注册成功也需要... 查看详情
万字长文带你搞定linuxbt宝塔面板之外网上快速搭建苹果cms电影网站(代码片段)
文章目录万字长文带你搞定宝塔面板一、本地搭建宝塔面板及安装ecshop1.1前言1.2面板特色功能1.3安装环境说明1.4安装BT面板1.5常用管理命令1.6BT面板一键安装LAMP/LNMP环境1.7BT面板建站及使用技巧二、阿里云上部署高清电影网站2.1.... 查看详情
万字长文带你搞定linuxbt宝塔面板之外网上快速搭建苹果cms电影网站(代码片段)
文章目录万字长文带你搞定宝塔面板一、本地搭建宝塔面板及安装ecshop1.1前言1.2面板特色功能1.3安装环境说明1.4安装BT面板1.5常用管理命令1.6BT面板一键安装LAMP/LNMP环境1.7BT面板建站及使用技巧二、阿里云上部署高清电影网站2.1.... 查看详情