bert如何获得英文单词的word embeding而不是获得分词后的token embeding？

Question

想搞英文ner任务，使用bert做文本表示的时候，英文单词会被分成很多的word piece tokens。请问熟悉这块的大佬，这种情况下需要把任务改…

关注者

6

被浏览

3,081

登录后你可以

不限量看优质回答私信答主深度交流精彩内容一键收藏

这个和已知token embedding获取sentence embedding好像差不多。可以整句输入，找到token组成word的index 做meanpooling