对embedding的理解-白红宇

对embedding的理解

阅读量：553 次

发布时间：2019-03-09

本文共 199 字，大约阅读时间需要 1 分钟。

最近在学transformer，对其中一个词embedding有疑惑，先百度翻译了一下：

直译是嵌入的意思，然后参照了一些文献，大体总结了一下：

在深度学习里面要用向量去描述一个输入的特征，就要将输入的高维向量转化为可以代表feature的低维向量。在nlp的应用中输入一个句子，每个单词找到对应的embedding代表词向量。在视觉中输入一张图片，每个区域找到对应的embedding代表该区域。

转载地址：http://ljmsz.baihongyu.com/

你可能感兴趣的文章

mysql 快照读幻读_innodb当前读与快照读 and rr级别是否真正避免了幻读

MySQL 快速创建千万级测试数据

mysql 快速自增假数据，新增假数据，mysql自增假数据

MySql 手动执行主从备份

Mysql 批量修改四种方式效率对比（一）

mysql 批量插入

Mysql 报错 Field 'id' doesn't have a default value

MySQL 报错：Duplicate entry 'xxx' for key 'UNIQ_XXXX'

Mysql 拼接多个字段作为查询条件查询方法

mysql 排序id_mysql如何按特定id排序

Mysql 提示：Communication link failure

mysql 插入是否成功_PDO mysql：如何知道插入是否成功

Mysql 数据库InnoDB存储引擎中主要组件的刷新清理条件：脏页、RedoLog重做日志、Insert Buffer或ChangeBuffer、Undo Log

mysql 数据库中 count(*),count(1),count(列名)区别和效率问题

mysql 数据库备份及ibdata1的瘦身

MySQL 数据库备份种类以及常用备份工具汇总

mysql 数据库存储引擎怎么选择？快来看看性能测试吧

MySQL 数据库操作指南：学习如何使用 Python 进行增删改查操作

MySQL 数据库的高可用性分析

MySQL 数据库设计总结