站浏览量 站访问人数
目录

注意力机制可快速提取稀疏数据的特征;
句子表征,怎么表示一个句子,词嵌入(词映射到高维空间)表达词/词语,句子则是词的组合表达(简单的平均)。

n-gram技术,卷积网络归纳局部信息,将词进行平移,不断地进行“卷积”得到一层高维,然后在高维基础继续卷积,得到更高层次的维度信息。

skip gram技术,不要求词之间是连续相邻的,可间隔开,