‍

• 能不能和大模型对话订机票？
• 自然语言生成 SQL，简化报表分析工作？
• 大模型帮老年人操作软件？
• 能不能用于识别敏感信息？

• ......
  



就算每次请求只耗费 10 token，假设机器是 200 qps，每天 8 小时，一天也需要消耗 0.02*(200*60*60*8*10/1000)=1152 元。模型所消耗的费用是应用服务器费用的 100 多倍。

具体背后 Open AI 自己的成本是多少，就更不得而知，甚至有人认为目前 Open AI 为了快速抢占市场，是在亏本卖的。

这就让应用的规模成本大大增加了，几乎不可能是一个完全免费给用户使用的产品。

虽然我相信在将来随着技术进步，成本会大幅度下降，但是大概率不是最近。

对于 ChatGPT 纯粹的聊天机器人，可以通过一个字一个字的流式输出来缓解计算速度缓慢的问题。但是对于想要通过它生成接口参数或者 SQL 的应用工程师来说，必须等待它完整生成完成，才能调用接口将结果返回给用户。

而高性能计算机这么多年的发展已经让用户习惯了快速响应的操作界面，现代人的时间都非常宝贵，不可能为了省几个步骤，却去等待更长的时间。

大模型很强大，能够回答科学问题，可以写诗，还能够编故事，甚至是生成软件破译序列码。。。

但是这些功能对我生成应用接口参数有什么用？反而容易产生法律风险，使用者通过简单的 “AI 投毒”，就能引导大模型回答出带有偏见歧视的答案，而防范这个却需要付出巨大的代价，甚至防不胜防，比如之前很有意思的 ChatGPT奶奶漏洞 [1]。

每当一门技术火爆的时候，工程师们总是跃跃欲试。在大数据火爆的时候，哪怕系统里只有几条数据，也要上 Flink。大模型也有类似的问题，就为了生成几个 CRUD 的接口参数，就上昂贵，缓慢又容易出法律问题的大模型。而忽视了传统计算简单，快速且易于控制的优势。

大模型和传统 NLP 技术从算力消耗和能力上，都给人非常直观的差别，所以才能火出圈。大模型的定义又是什么呢？维基百科词条[2]对它的定义是，神经网络中的参数超过十亿的深度学习模型。所有的大模型都其实来源于 Google 在 2017 年发表的 Transformer 论文，我们这里暂时认为所有基于 Transformer 的都是大模型，下图是网上很火的大模型发展树来源[3]：

在大模型火之前，虽然国内之前也有天猫精灵，科大讯飞等对话机器人产品，但是似乎没有多少应用通过自然语言提供功能。甚至连专长做 im 的应用钉钉，似乎也没有想要通过自然语言实现应用功能的想法。

但是根据我国外朋友的说法，因为国外人力成本高，很早以前，他们的很多应用就在通过对话提供功能。他们甚至连交电费的 APP 都支持通过对话缴纳电费。

我本身也不是 NLP 领域的从业人员，对于大模型之外的 NLP 技术只能抛砖引玉：

• 规则语言模型

• 其实就是程序员常说的硬编码，使用类似于正则模式匹配的方式对自然语言进行处理，虽然现在听起来很 “Low”，但是大模型火爆之前也有一些产品使用这个，这种算法虽然速度快，但是消耗人力与专业知识， 好在有语言专家已经做好了一些开源框架，比如 ChatterBot[4]，Will[5] 等，Will 在 2018 年还被集成到了 Slack 中。

• 统计语言模型

• 不再需要程序员去编码规则，而是使用一些统计方法（比如tfidf，主成分分析），去计算语句的特征，比如词语的频率，经常和哪些词一起出现等等。通过这个统计学知识再去计算新出现的语句，常见的 主题分析，情感分析 等等都是类似的技术。
• 用来做简单的文本分类效果很好，很多线上的垃圾邮件自动识别据说用的都是这种技术。

• 神经语言模型

• 我们当下最熟悉的 NLP 技术，在大模型之前有 RNN，LSTM 等，后来都被基于 Transformer 的大模型碾压。

我认为大模型不是银弹，未来它可能往两个方向发展：

• 文本类的助理，比如写作助手，口语教练，专家咨询等等，这也是大模型的老本行；
• 集成自动化厂商，比如 Zaiper[6]，Alfred[7]等等，做一个统一的自动化助手付费产品，所有软件的自然语言操作都通过统一的入口进行。这样才是对用户更加方便的，而不是每个应用还要去找单独的助手去提问。

其他一些更简单的文本分类，主题识别以及情感分析等等任务，或许传统 NLP 有更加合适的方案。

作为一个应用开发者，并非 AI 的专业人士，文中可能有很多不专业的地方，本文纯粹是抛砖引玉，希望吸引更多的专业人士前来讨论。

[7]https://www.alfredapp.com/