热门标签
热门文章
- 1python中 TypeError: ‘XXX‘ object is not callable报错原因_kivy typeerror: 'button' object is not callable
- 2【人工智能高频面试题--基础篇】_人工智能面试题
- 3最新多模态生成模型 MM-Interleaved 开源
- 4知识追踪模型的应用_知识追踪模型的参数有哪些?
- 5用turtle库画大风车（零基础python教程适合亲子教学互动）_turtle画风车
- 6深度分析SQL与NoSQL数据库：优缺点、使用场景及选型指南_sql(关系型数据库) 还是 nosql(非关系型数据库
- 7谷粒商城实战笔记-35-前端基础-ES6-模块化
- 8conda pip 关于环境配置导出导入_ruhedaochu conda huanjing peizhi
- 9动态规划（DP）（算法笔记）_dp算法
- 10【最详细】数据结构（C语言版 第2版）课后习题答案全集 严蔚敏 等 编著_数据结构c语言版第二版课后答案
当前位置: article > 正文
word2vec损失函数_word2vec的损失函数
作者：笔触狂放9 | 2024-07-25 20:53:03
赞
踩
word2vec的损失函数
未优化前损失函数
以CBOW为例，利用softmax层计算出字典V中每个词的概率，再构建交叉熵损失函数
负采样损失函数
直接对词典里的V个词计算相似度并归一化显然是极其耗时的，为此作者提出了层次Softmax和负采样两种损失层
负采样损失函数：
这个目标函数表面的含义也可以理解为要尽量增大正例的(vc⋅vw)数据对，而尽量降低负例的(vc⋅vw)数据对
词与词之间，若其上下文很相近，则他们本身也很相似
声明：本文内容由网友自发贡献，转载请注明出处：【wpsshop】
推荐阅读
相关标签
