人工智能普及带动词元成本飙升
编码工作中的消耗量呈指数级增长
精通词元经济学的企业将成功

编者注从人工智能、半导体、通信到生物技术,这些都是我们生活中不可或缺却又相当陌生的技术话题。我们将以通俗易懂的方式为您解读。

谷歌、OpenAI、Anthropic等主要人工智能企业都以“词元”为核心制定服务价格。其方式是根据不同资费方案,提供可在一定时期内使用的词元额度。不过,随着人工智能被投入一般办公、编程等多种工作场景,词元使用量迅速激增。过去足够用上整整一个月的词元,如今短短数小时内就可能耗尽,这种情况已屡见不鲜。在开发尖端人工智能所需成本呈指数级上升的时代,也有预测认为,今后能否更节省地使用词元,将成为衡量竞争力的标准。


人工智能理解人类语言的最小单位:词元


人工智能处理人类文字时会按词元单位切分,因此人工智能的成本也按词元计算。Pixabay供图

人工智能处理人类文字时会按词元单位切分,因此人工智能的成本也按词元计算。Pixabay供图

View original image

词元是指大型语言模型人工智能处理自然语言数据时使用的最小单位。就像人类会根据字母或文字组合来切分并阅读词语一样,人工智能也以词元为单位识别人类语言并进行理解和解释。一般认为,1个英文单词、1至2个韩语词节大致对应“1个词元”。


由于人工智能处理数据的基准是词元,人工智能企业的定价标准也受词元左右。更具体地说,价格取决于人工智能为回应用户而输出的词元数量。谷歌、OpenAI、Anthropic的人工智能聊天机器人订阅制,均采用词元额度发放方式。以OpenAI的资费说明为例,若仔细查看即可发现,其中会详细标明聊天机器人输出100万个词元时需要支付多少美元。


由词元决定的人工智能对话成本


ChatGPT标志。美联社 韩联社供图

ChatGPT标志。美联社 韩联社供图

View original image

数年前,当人工智能的作用还仅限于新奇玩具、外语翻译器等用途时,人们并不需要担心词元问题。问题在于,如今人工智能已被实际投入一般办公、法律、代码编写等各种复杂工作。即便只是要求人工智能开发一个简单程序,它往往也会一次性写出数万至数十万个编程语言词元,因此词元使用量也呈指数级增长。尤其是程序员会不断与人工智能对话,以确认所写代码是否按预期运行、出现错误时应修改哪些部分,并在这一过程中持续改进成果物。在这个过程中,消耗数百万、数千万个词元的情况也十分常见。


实际上,在西方最大社区之一“Reddit”上,开发者关于如何降低ChatGPT、Claude、Gemini词元消耗量的提问接连不断。积极使用人工智能的企业同样面临词元成本压力。美国科技专业媒体《Wired》报道称,近期Meta、Uber、Salesforce等主要信息技术企业高管都表达了对词元成本激增的担忧。上个月,微软还曾取消本公司工程师的Claude订阅资格,并建议其使用Copilot等自家开发产品,原因同样是词元成本负担。


词元经济学将决定未来企业竞争力


英伟达的人工智能超级计算机中心。英伟达供图

英伟达的人工智能超级计算机中心。英伟达供图

View original image

词元负担预计还将进一步上升。随着人工智能变得越来越智能,它将渗透到更多业务领域,随之而来的处理和输出词元数量也会自然增加。因此,也有观点认为,今后所谓“善于使用人工智能”,实际上取决于“能以多低的词元消耗完成工作处理”。围绕这种聚焦词元效率化的人工智能使用方式,还诞生了“词元经济学”这一新词。


全球市场研究机构Gartner在上个月发布的《人工智能词元经济学》报告中警告称:“基于词元的计费方式正在改变传统信息技术订阅服务的成本结构”,“如果无法将(开发者的词元)使用量可视化,就将无法追踪预算超支情况以及成本对应的价值。”也就是说,若想节省词元,就需要配备能够一目了然掌握开发者日常工作中消耗了多少词元的测量工具。



Gartner强调称:“随着人工智能扩散,词元消费势必增加,企业已进入不仅要管理人工智能性能,还要管理词元效率的阶段。”


本报道由人工智能(AI)翻译技术生成。

版权所有 © 阿视亚经济 (www.asiae.co.kr)。 未经许可不得转载。

不容错过的热点