注意机制允许llm在处理文本时专注于输入的最相关部分。它们通过为序列中的不同标记分配权重来工作，指示它们相对于任务的重要性。例如，在句子 “猫坐在垫子上，它发出咕噜声” 中，注意机制帮助模型将 “它” 与 “猫” 联系起来。 自我关注是变

HNSW (分层导航小世界) 是一种用于近似最近邻 (ANN) 搜索的有效算法，旨在处理大规模，高维数据。它构建了一个基于图的索引，其中数据点是节点，边表示它们的接近度。 该算法将图组织成分层。顶层的节点较少，表示数据集的粗粒度视图，而较低

关系数据库与文件系统在数据管理中服务于不同的目的，它们的差异影响数据的存储、访问和操作方式。关系数据库将数据组织成结构化的表格，并定义它们之间的关系。每个表都有行和列，其中行代表记录，列代表属性。这种结构化格式使得可以使用SQL（结构化查询