对话腾讯研究院白惠天:Token何以成为智力劳动的第一把尺子

By AI123

9月28日,腾讯研究院高级研究员、《Token经济》作者之一白惠天在接受观察者网采访时表示,Token是AI文明出现的第一个度量衡,虽然并不完美,但首次让机器智力这种难以量化的劳动有了相对可计量、可比较的尺度。

白惠天认为,过去衡量一个人的智力劳动,往往依赖学历、工作经历、岗位等间接指标;Token则提供了一个直接测量智力劳动的切入口。她同时指出,目前各家大模型的Token计量标准并不统一,例如腾讯WorkBuddy与千问办公的Token计价方式各有算法。业界讨论Token时已开始关注“智能成本”,即达到相同智力水平所需的成本,而不仅仅是每百万Token的成本,上下文长度、响应速度、快慢思考模型等也已成为Token的细化指标。

针对Token的中文译名问题,白惠天表示,“词元”只是大语言模型的一种切分方式,Token还能切分图像为画块、分割3D空间为体素或点云,在多模态语境下“Token”是更具通用性的表述。

Explore topicsAITencentToken Economy

Source

View all