00:00 / 00:28
连播
清屏
智能
倍速
点赞136
00:00 / 00:51
连播
清屏
智能
倍速
点赞111
00:00 / 01:40
连播
清屏
智能
倍速
点赞1256
00:00 / 03:15
连播
清屏
智能
倍速
点赞17
00:00 / 06:25
连播
清屏
智能
倍速
点赞923
00:00 / 04:32
连播
清屏
智能
倍速
点赞800
00:00 / 00:31
连播
清屏
智能
倍速
点赞113
00:00 / 02:21
连播
清屏
智能
倍速
点赞20
00:00 / 00:56
连播
清屏
智能
倍速
点赞182
00:00 / 03:03
连播
清屏
智能
倍速
点赞8
00:00 / 00:45
连播
清屏
智能
倍速
点赞78
我们谈论AI时,总提到的Token是什么? 当我们在谈论AI时,有一个词总是绕不开,那就是“Token”。也许你在使用ChatGPT时见过它,或者听说过某些AI工具的计费单位是Token。那么,这个听起来有点神秘的Token,到底是什么呢? 什么是Token? 简单来说,Token就是AI能够理解的最小语言单位。它不完全等同于我们人类所理解的一个字或一个词。我们可以把它看作是AI世界里的“字”或“词”,但它比我们常规的语言单位更灵活。 举个例子: 中文:“你好吗”这三个字,在AI看来可能就是2到3个Token。 英文:“Hello, how are you?” 这句话,在AI眼中可能就是4到5个Token。 为什么会这样呢?因为AI处理语言的方式和我们不同。它不会简单地把每个汉字或单词都拆开,而是会根据词语的完整性进行分词。比如,“你好”在AI看来可能就是一个完整的词,所以只占用一个Token。但如果把“你好吗”拆成“你”、“好”、“吗”,那就是三个Token。不同的AI模型,使用的分词技术也不同,有的更精细,有的则更粗略,这也就是为什么Token数会有差异。 为了方便大家估算,你可以记住一个大概的换算关系:1个汉字 ≈ 2个Token,1个英文单词 ≈ 1.3个Token。当然,这只是一个粗略的估算,目的是让你对Token的数量有一个大致概念。 为什么用Token来计费? 现在,我们来回答最关键的问题:为什么AI的收费要用Token而不是按字数? 首先,Token能准确反映AI的工作量。AI的工作量其实是它所处理和计算的Token数量。你输入的文字需要转换成Token,AI思考并生成回复也需要处理大量的Token。如果只按你输入的字数收费,那么AI在“思考”和“生成”过程中消耗的巨大资源就没有被计算在内。 举个例子,你问AI一个非常复杂的问题,可能只输入了十几个字,但AI为了给你一个精准的回答,需要在内部处理数万甚至数十万个Token,才能组织出一段完整的回复。用Token计费,能更公平、更准确地反映AI所消耗的计算资源。 其次,用Token计费更方便AI内部处理。就像电脑需要把所有信息转换成0和1一样,AI处理语言也需要先将文字转换成它能理解的“数字”形式,也就是Token。用Token来计费,相当于直接用AI内部的“货币”来结算,既方便又高效。#开学基础开学的vlog就不基础
00:00 / 04:01
连播
清屏
智能
倍速
点赞1