什么是随机梯度下降(SGD)?

什么是随机梯度下降(SGD)?

在监督训练中,模型提供有标记的数据,这意味着训练数据集中的每个输入都有相应的目标输出 (标签)。模型通过将其预测与正确的标签进行比较并根据误差 (损失) 调整其权重来学习。监督学习通常用于分类、回归和对象检测等任务。

另一方面,无监督训练涉及使用没有标记输出的数据。模型的目标是找到数据中隐藏的模式或结构,例如将相似的数据点聚集在一起或减少输入空间的维度。无监督学习的常见应用包括聚类、异常检测和生成模型。

主要区别在于标记数据的可用性: 监督学习需要标记数据进行训练,而无监督学习使用未标记数据自动发现模式。

本内容由AI工具辅助生成,内容仅供参考,请仔细甄别

专为生成式AI应用设计的向量数据库

Zilliz Cloud 是一个高性能、易扩展的 GenAI 应用的托管向量数据库服务。

免费试用Zilliz Cloud
继续阅读
在大型语言模型的背景下,什么是保护措施?
根据方法和使用情况,可以在训练期间和训练之后添加护栏。在训练期间,微调和RLHF是使模型的行为与期望结果保持一致的常用技术。这些方法将护栏直接嵌入到模型的参数中。 训练后、运行时机制 (如内容过滤器、提示工程和输出监视) 用于提供额外的保
Read Now
特征向量和嵌入之间有什么区别?
特征向量和嵌入都是以数值形式表示数据的方法,但它们的用途不同,产生的过程也不同。特征向量通常是项目属性的直接表示,通常用于传统的机器学习任务。例如,如果你在处理图像,特征向量可能由基本统计度量构成,如颜色直方图、边缘计数或纹理特征。特征向量
Read Now
NLP如何改变客户服务?
NLP模型,尤其是像GPT-3这样的大型变压器架构,由于其高计算要求而具有显著的碳足迹。训练这些模型需要巨大的能量资源,因为它们在大型数据集上处理数十亿个参数。例如,据报道,培训GPT-3消耗的能源相当于数百个家庭的年用电量,大大增加了二氧
Read Now

AI Assistant