当前位置: 首页 > news >正文

神经网络之方向和距离是如何承载语义的 - 详解

一、先从二维空间说起:语义=几何

设想你有一个二维平面,横轴代表“性别”,纵轴代表“社会地位”。

我们把一些词放进这个平面里:

词语大致坐标 (示意)语义特征
男人(1, 0)男性、普通地位
女人(-1, 0)女性、普通地位
国王(1, 1)男性、高地位
王后(-1, 1)女性、高地位

示意图(二维语义平面):

      ↑ 地位(高)|王后        国王|女人        男人|+----------------→ 性别(男)(女)

二、“方向”承载语义关系

现在我们来看“方向”意味着什么。

  • 从「男人」→「女人」的方向,就是 性别变化方向(gender axis)
  • 从「男人」→「国王」的方向,就是 地位提升方向(royalty axis)

所以:

语义方向 = 某种抽象关系的几何方向。

在数学上:

vec(国王) - vec(男人) ≈ vec(王后) - vec(女人)

换句话说:

「男人」→「国王」的变化 = 「女人」→「王后」的变化

这就是著名的 词向量类比现象 (word analogy)
方向不只是几何上的移动,而是“语义操作”。


三、“距离”承载语义相似度

假设我们测量两点之间的欧氏距离(或余弦相似度)。

  • 「男人」与「女人」:距离较近,因为语义相似(都是人类、性别不同)
  • 「男人」与「苹果」:距离很远,因为语义完全不同

所以:

距离越近,语义越相似。

在词向量中我们通常用 cosine similarity(余弦相似度)

sim(a, b) = (a · b) / (|a||b|)

它衡量的是角度而不是绝对长度。


四、扩展到三维:语义轴的叠加

二维空间不足以表达丰富语义,我们可以加更多“语义维度”:

  • X 轴:性别(男 ←→ 女)
  • Y 轴:地位(平民 ←→ 贵族)
  • Z 轴:时代(古代 ←→ 现代)

于是:

  • “国王”可能在 (男, 贵族, 古代)
  • “女王”在 (女, 贵族, 古代)
  • “总统”在 (中性, 贵族, 现代)
  • “市民”在 (中性, 平民, 现代)

这就构成了一个高维语义空间的投影。
在真实模型中,比如 word2vec 或 BERT 的 embedding,这种空间通常是 几百维,但几何意义仍然相似。


五、小结直觉

几何概念对应语义意义示例
方向抽象关系(gender, tense, royalty, etc.)vec(国王) − vec(男人) ≈ vec(王后) − vec(女人)
距离语义相似度“男人”接近“女人”,远离“苹果”
平移类比推理“巴黎”−“法国”+“日本”≈“东京”
角度概念相似性同义词向量夹角小
http://www.jsqmd.com/news/49407/

相关文章:

  • 构建高可用、高性能系统的关键技术方案总结
  • 7 图像的基本变换
  • 2025 年 11 月净化板厂家权威推荐榜:手工/机制/硫氧镁/玻镁/彩钢/抗菌/硅岩/铝蜂窝/聚氨酯净化板,医院/食品厂/电子厂净化工程专用板材精选!
  • 靠谱医疗器械检测公司首选推荐:精准检测 + 合规认证
  • 2025年舞台大幕制造企业综合实力榜单:舞台单管杆体/单层缠绕吊杆机/舞台H型吊杆杆体源头厂家精选
  • 视频汇聚平台EasyCVR赋能石油管道计量站精准监控与安全管理
  • 2025 年 11 月超声设备厂家权威推荐榜:覆盖河北、山西、辽宁、江苏、浙江、山东、广东等区域,精准成像与高效诊断口碑之选
  • 2025 开放原子开发者大会回顾|IvorySQL 内核实现原理
  • DNS代理验证-域名SSL证书自动化申请方案
  • 哪家做医疗器械检测比较好?信誉好的医疗器械检测公司推荐!
  • 质量管理系统(QMS)规划方案
  • 高口碑医疗器械检测机构清单:合规认证 + 精准检测双保障!
  • 2025 年 11 月甲醛检测仪厂家权威推荐榜:在线式/固定式/便携式/手持式/工业甲醛检测仪,精准监测与高效防护的科技之选
  • 2025年济南画室实力榜:济南画室培训、济南画室哪家好、济南艺考画室、山东美术艺考培训机构凭教学与口碑出圈
  • 8招让接口性能提升100倍
  • 专业可靠的医疗器械检测机构推荐,有哪些专业合规靠谱检测机构榜
  • 2026附近家教老师怎么找?权威测评 + 适配机构榜单
  • 2025年11月北京陪诊公司推荐榜单:专业陪诊服务对比排行
  • 2025年天津金蝶软件代理服务商实力观察:金蝶云星空、金蝶云星晨、金蝶云星翰、金蝶云系列产品四家企业以专业能力与服务获认可
  • 设置生成core文件
  • 质量管理系统(QMS) 可行性研究报告
  • #pragma GCC diagnostic push与#pragma GCC diagnostic pop的作用
  • 看好社区新零售?晓鹿老师实操经验指导加盟远方安选!
  • Pandas --DataFrame 文件处理
  • 【图像处理】图像形态学运行
  • 2025年布袋除尘器供应商权威推荐榜单:分离选粉机/砂石选粉机/三分离选粉机源头厂家精选
  • 2025年四川头部GEO优化品牌哪家好,GEO优化/网络推广/SEO优化/网站建设/小红书代运营/新闻发布/百度推广GEO优化公司推荐排行
  • 个人开源项目防护实测:3款免费WAF对比后,这款成了我的首选
  • redis缓存使用
  • 600W大功率DC/DC半砖隔离电源模块的技术说明