bert里cls和sep分别是什么意思?

  统计/机器学习 自然语言处理 Python    浏览次数:4395        分享
1

bert里cls和sep分别是什么意思?cls只能是一个,sep可以很多个吗?

 

fjyyy   2019-11-05 10:03



   1个回答 
4

是的,cls是一个,sep是大于等于一个。

'[CLS]'必须出现在样本段落的开头,一个段落可以有一句话也可以有多句话,每句话的结尾必须是'[SEP]'。

例如:

['[CLS]', 'this', 'is', 'blue', '[SEP]', 'that', 'is', 'red', '[SEP]']
SofaSofa数据科学社区DS面试题库 DS面经

strong.man   2019-11-19 15:20



  相关讨论

用python统计字符串中空格的个数

如何用python统计一个txt文本的行数

jieba分词怎么用?

有个一万段文字 有一个关键词列表 找出文字中含有关键词的那些文字

python里实现词云的package

怎么把英文字符串转为小写(python)?

wordcloud安装报错error: Microsoft Visual C++ 14.0 is required

jieba.cut中use_paddle是什么模式?

jieba分词中最大正向匹配法是什么?

文本处理中stop word什么意思

  随便看看

行数很多的pandas DataFrame如何在jupyter中完整显示?

向量梯度下降优化的最佳步长?

Pandas怎样对dataframe中的一个时间列进行排序?

ARIMA模型中的三个参数(p, d, q)都是什么意思?

python pandas里有没有类似R的summary的函数?