Transformer是目前最流行的深度学习架构之一，广泛应用于大语言模型（LLM）和计算机视觉等领域。
它的核心创新在于引入了自注意力机制（Self-Attention），使得模型能够更好地捕捉输入数据中的长距离依赖关系。
可视化Transformer
扩展链接-可视化Transformer
常见问题
一些常见问题的解答
Java相关教程
Java基础到进阶，已完成Java基础和JavaWeb
数据库教程
从MySQL到Redis，目前正在完成Redis的教程
中间件
各类中间件的学习笔记，目前正在完成微服务的内容
Java算法
分享Java算法的知识点，以及每日分享算法解题思路
神经网络就是模仿人脑神经元的结构，其典型应用就是Transformer架构。
神经网络的基本结构
神经网络由输入层、隐藏层和输出层组成。
每一层由多个神经元组成，神经元之间通过权重连接。
输入层接收外部数据，隐藏层进行特征提取和变换，输出层产生最终结果。
图：神经网络的基本结构
使用的方法
暴力搜索
解题思路
- 给定一个整数数组
T，表示每天的温度，返回一个数组res，其中res[i]是指对于第i天，至少过了多少天之后，温度才会升高。如果之后都不会升高，请在该位置用0来代替。 - 我们可以使用暴力搜索的方法来解决这个问题。对于每一天，我们可以从当前天开始向后遍历，直到找到一个温度比当前天高的日子，或者遍历到数组的末尾。
- 对于每一天，我们需要比较当前天的温度与后续天的温度。如果找到了一个比当前天温度高的日子，我们就计算出两者之间的天数，并将结果存储在
res数组中。如果遍历到数组末尾仍然没有找到比当前天温度高的日子，我们就将res[i]设置为0。 - 通过这种方式，我们可以得到每一天至少过了多少天之后温度才会升高的结果，并最终返回
res数组。
使用的方法
递归
-
Character.isLetter() 方法用于判断指定的字符是否为字母。
-
StringBuilder.append() 方法用于将指定的字符串追加到此字符序列。
-
StringBuilder.toString() 方法用于将此字符序列转换为一个字符串。
-
StringBuilder() 构造方法用于创建一个空的 StringBuilder 对象。
-
StringBuilder.repeat() 方法用于创建一个新的字符串，该字符串是通过重复当前字符串指定次数得到的。
-
StringBuilder.repeat(String str, int count) 方法用于创建一个新的字符串，该字符串是通过重复指定字符串指定次数得到的。
-
String.substring() 方法用于返回一个新的字符串，它是此字符串的一个子字符串。
-
String.charAt() 方法用于返回指定索引处的字符。
-
String.isEmpty() 方法用于判断字符串是否为空。
-
Integer.parseInt() 方法用于将字符串参数解析为一个整数。
使用的方法
栈
解题思路
- 设计一个支持 push、pop、top 操作，并能在常数时间内检索到最小元素的栈。
- 我们可以使用两个栈来实现这个功能：一个主栈用于存储所有的元素，另一个辅助栈用于存储当前主栈中的最小元素。
- 每当我们向主栈中推入一个元素时，我们将其与当前最小元素进行比较，并将较小的元素推入辅助栈中。这样，辅助栈的顶部始终保持着当前主栈中的最小元素。
- 当我们弹出主栈的顶部元素时，我们也需要弹出辅助栈的顶部元素，以确保辅助栈始终与主栈保持同步。
- 通过这种方式，我们可以在常数时间内获取主栈中的最小元素，同时保持其他操作的效率。
使用的方法
栈
解题思路
- 给定一个只包括
'('，')'，'{'，'}'，'['，']'的字符串，判断字符串是否有效。有效字符串需满足：- 左括号必须用相同类型的右括号闭合。
- 左括号必须以正确的顺序闭合。
- 我们可以使用栈来解决这个问题。栈是一种后进先出（LIFO）的数据结构，非常适合处理括号匹配的问题。
- 我们遍历字符串中的每个字符，如果遇到左括号，我们将其压入栈中；如果遇到右括号，我们检查栈顶元素是否是对应的左括号。
- 如果是，我们将栈顶元素弹出；
- 如果不是，或者栈为空，我们就可以确定字符串无效。
- 最后，如果栈为空，说明所有的括号都匹配成功，字符串有效；如果栈不为空，说明还有未匹配的左括号，字符串无效。
使用的方法
二分查找
解题思路
- 给定一个旋转排序数组，找出其中最小的元素。
- 由于数组是旋转排序的，我们可以使用二分查找来高效地找到最小元素的位置。
- 在二分查找的过程中，我们需要判断当前中间元素与右边界元素的关系。根据中间元素与右边界元素的关系，我们可以确定最小元素所在的区间。
- 如果中间元素小于右边界元素，说明最小元素在左半部分，我们将右边界移动到中间元素的位置；
- 如果中间元素大于右边界元素，说明最小元素在右半部分，我们将左边界移动到中间元素的下一个位置。
- 通过不断地将搜索范围缩小，我们可以快速地找到最小元素的位置或者者确定它不存在于数组中。
使用的方法
二分查找
解题思路
- 给定一个整数数组
nums，按照升序排列，数组中的值 不重复。 - 在传递给函数之前，
nums在预先未知的某个下标上进行了 旋转，使数组变为[4,5,6,7,0,1,2]（假设原数组为[0,1,2,4,5,6,7]）。 - 请你在数组中搜索
target，如果找到返回其索引，否则返回-1。 - 由于数组是旋转排序的，我们可以使用二分查找来高效地找到目标值的位置。
- 在二分查找的过程中，我们需要判断当前中间元素所在的区间是有序的还是旋转的。根据中间元素与右边界元素的关系，我们可以确定当前区间是有序的还是旋转的。
- 如果当前区间是有序的，我们可以直接判断目标值是否在这个区间内，如果在，则继续在这个区间内进行二分查找；如果不在，则继续在另一个区间内进行二分查找。
- 如果当前区间是旋转的，我们需要判断目标值是否在这个区间内，如果在，则继续在这个区间内进行二分查找；如果不在，则继续在另一个区间内进行二分查找。
- 通过不断地将搜索范围缩小，我们可以快速地找到目标值的位置或者者确定它不存在于数组中。
使用的方法
二分查找
解题思路
- 给定一个按照升序排列的整数数组
nums，和一个目标值target，找出给定目标值在数组中的开始位置和结束位置。 - 如果数组中不存在目标值，返回
[-1, -1]。 - 由于数组是有序的，我们可以使用二分查找来高效地找到目标值的开始位置和结束位置。
- 首先，我们使用二分查找来找到目标值的开始位置。我们在二分查找的过程中，如果找到目标值，我们继续向左半部分搜索，直到找到第一个不等于目标值的位置，这样我们就得到了目标值的开始位置。
- 接下来，我们使用二分查找来找到目标值的结束位置。我们在二分查找的过程中，如果找到目标值，我们继续向右半部分搜索，直到找到第一个不等于目标值的位置，这样我们就得到了目标值的结束位置。
- 最后，我们将开始位置和结束位置作为结果返回。