央视新闻(焦点访谈):最近有一个很流行的新词,Token,它是一个词元素。 词单位是大型模型处理信息的最小单位。 简单来说,就像我们说话时的单词和标点符号一样,它们是人工智能理解和生成语言的基本“构件”。 一个句子或者一段文字会被分成几个单词单元进行计算。 就像我们通过用电量来衡量工业活力一样,字单位调用数也是衡量人工智能发展的新时代标尺。 今年3月,我国日均词语使用量突破140万亿,两年内增长千余倍。 那么为什么会有如此大规模的增长呢? 单词元素用在哪里? 爆炸这个词是什么意思?