博智信息资讯,更全更新信息实报!
首页 > 技术分享 > 正文

解码 AI:揭秘聊天机器人的“大脑” —— 大语言模型

来源:思娟 发布时间:2024-03-26 20:36
浏览:0

了解大语言模型的含义、重要性以及使用方法。

编者注:本文属于《解码 AI》系列栏目,该系列旨在让更多人了解 AI 技术,揭秘AI, 同时向 RTX PC 和工作站用户展示全新硬件、软件、工具和加速功能。

如果说 AI 正处于改变历史的“iPhone 时刻”,那么聊天机器人就是其首批热门应用之一。

聊天机器人的诞生离不开大语言模型,这是一种基于大规模数据集进行预训练的深度学习算法,能够识别、总结、翻译、预测和生成文本及其他形式的内容。这类模型可以在由 NVIDIA GeForce 和 RTX GPU 提供支持的 PC 和工作站上本地运行。

大语言模型擅长总结大量文本,通过数据分类和挖掘来获取见解,以及按照用户指定的风格、语气或形式生成新文本。它们可以促进以各种语言进行的交流,甚至包括人类语言之外的非常规“语言”,例如计算机代码或蛋白质和基因序列。

首代大语言模型只能处理文本,但后续迭代针对其他类型的数据进行了训练。这些多模态大语言模型可以识别和生成图像、音频、视频和其他内容形式。

像 ChatGPT 这样的聊天机器人是首批将大语言模型带给消费者的技术应用之一,它们提供了人们熟悉的界面,可以用自然语言提示词对话并作出回复。此后,大语言模型用于帮助开发者编写代码,以及协助科学家推进药物研发和疫苗研制。

然而,很多AI模型对算力的需求也不容小觑。将各类先进优化技术和算法(例如量化)与专为 AI 打造的 RTX GPU 结合,可为大语言模型“剪枝”,以使其可运行于 PC 本地,而无需连接互联网。Mistral (为 Chat with RTX 提供支持的大语言模型之一)等新型轻量化大语言模型的异军突起,降低了对算力和存储空间的需求。

为何说大语言模型很重要?

大语言模型的适用性很宽,可用于各个行业和工作流。借助这种多功能性及其本身的高速性能,大语言模型能够为几乎所有基于语言的任务带来性能和效率提升。

运行在云端 NVIDIA GPU 上的 DeepL 通过 AI 提供精准的翻译服务。

由于通过AI和机器学习来确保输出的准确性,因此像 DeepL 这样的大语言模型被广泛应用于语言翻译。

医学研究人员正在使用教科书和其他医学数据训练大语言模型,以期改善患者护理。零售商正在利用由大语言模型赋能的聊天机器人,为用户提供出色的客户支持体验。金融分析师正在利用大语言模型记录财报电话会议及其他重要会议,并总结会议内容。而这些只是大语言模型应用方式的冰山一角。

Chat with RTX 等聊天机器人和基于大语言模型构建的写作助手正在知识型工作的方方面面留下自己的身影,无论是内容营销、文案写作还是法律相关的任务。编码助手是大语言模型首批支持的应用之一,预示着由 AI 辅助开发软件的未来。目前,ChatDev 为代表的项目,就是将大语言模型和 AI 智能体(可自主帮助回答问题或执行任务的智能机器人)结合起来,构建了由AI驱动的,可按需提供服务的虚拟软件公司。用户只需告诉系统需要何种应用,就可以看着系统开展工作了。

阅读 NVIDIA 开发者博客,详细了解大语言模型智能体。

如同日常对话一般轻松

许多人第一次接触生成式 AI 是通过 ChatGPT 等聊天机器人,这类机器人通过自然语言简化了大语言模型的使用方式,用户只需告诉模型需要做什么即可。

由大语言模型提供支持的聊天机器人可以帮助起草营销文案,提供度假建议,撰写客户服务邮件,甚至创作原创诗歌。

大语言模型在图像生成和多模态方面取得的进步,扩展了聊天机器人的应用领域,增加了分析和生成图像的功能,同时保留了简单易用的用户体验。用户只需向机器人描述图像或上传照片并要求系统对其进行分析即可。除了聊天之外,还可以利用图像做视觉辅助。

未来的技术进步将帮助大语言模型扩展在逻辑、推理、数学等方面的能力,赋予它们复杂的请求分解为更小子任务的能力。

AI 智能体方面也取得了进展,这类应用能够接受复杂提示词,将其分解为更小的提示词,并自主与大语言模型和其他 AI 系统合作,以便完成提示词交代的任务。ChatDev 是一种典型 AI 智能体,并不意味着智能体的仅能用于技术型任务。

例如,用户可以要求个人 AI 旅行智能体为全家预订出国度假游。该智能体可以将该任务分解为多个子任务,包括行程规划、预订旅游项目和住宿、创建装箱单、寻找遛狗服务人员,然后按顺序逐一独立执行。

借助 RAG 解锁个人数据

虽然大语言模型和聊天机器人在通用场景下已经非常强大,但如果能与个人用户的数据结合使用,它们将变得更加实用。通过这种方式,它们可以帮助分析电子邮件以发现各种趋势,梳理内容繁复的用户手册以找到某个技术问题的解答,或综合和分析多年累积的银行和信用卡对账单。

将特定数据集与大语言模型挂接,检索增强生成 ( RAG) 是最简单有效的方法之一。

PC 上的 RAG 示例。

RAG 可利用从外部来源获取的事实资料来提高生成式 AI 模型的准确性和可靠性。通过将大语言模型与几乎任意外部资源连接,用户可通过 RAG 与数据仓库“对话”,同时大语言模型也能借助 RAG 直接引用来源。用户体验相当简便,只需为聊天机器人指明文件或目录即可。

例如,在内容策略最佳实践、营销手段以及对特定行业或客户群体的基本见解等方面,标准的大语言模型具备相关常识。然而,如果通过 RAG 将其与用于产品发布的营销素材连接起来,大语言模型将能够分析内容并帮助规划量身定制的策略。

RAG 适用于任何大语言模型,只要应用本身支持 RAG 即可。NVIDIA Chat with RTX 是 通过RAG 将大语言模型连接到个人数据集的一个演示示例。它可本地运行于配备了GeForce RTX GPU 或 NVIDIA RTX 专业 GPU 的系统上。

如要详细了解 RAG 以及它与大语言模型微调的差异,请阅读技术博文《RAG 基本知识:检索增强生成相关问题解答》。

体验 Chat with RTX 的速度与私密性

Chat With RTX 是一款能在本地运行的个性化聊天机器人演示应用,不仅易于使用,还可免费下载。它基于RAG构建,且支持TensorRT-LLM 和 RTX 加速Chat With RTX 支持多个开源大语言模型,包括 Llama 2 和 Mistral。对 Google 的 Gemma 模型的支持将在后续更新中提供。

Chat with RTX 可通过 RAG 将用户与其个人数据连接起来。

用户只需将文件放入一个文件夹,并为 Chat With RTX 指明该文件夹的位置,即可轻松将 PC 上的本地文件连接到受支持的大语言模型。之后,Chat With RTX 便可快速回答各类查询,给出相关的回复。

Chat with RTX 运行在 GeForce RTX PC 和 NVIDIA RTX 工作站的 Windows 系统上,因此其速度很快,同时用户的数据保存在本地。Chat with RTX 并不依赖基于云的服务,用户可以在本地 PC 上处理敏感数据,因此无需与第三方共享数据或连接互联网。

如要详细了解 AI 将如何塑造未来,请关注 NVIDIA GTC 大会。这是一场全球性 AI 开发者大会,将于 3 月 18 至 21 日在美国加利福尼亚的圣何塞举行,与会者也可选择在线参加本次大会。

本文转载于快科技,文中观点仅代表作者个人看法,本站只做信息存储

标签:

热门文章

  • suv销量排行榜前十口碑最好,值得购买
    suv销量排行榜前十口碑最好,值得购买

    suv销量排行榜前十口碑最好,值得购买

    随着国内经济的发展和消费者购买能力的提高,车市整体呈现逐月环比持续上涨的良好态势,不同车型的销售表现也是异彩纷呈。SUV作为市场上最受欢迎的车型之一,其销售情况自然备受关注。Model Y月销破五万上...

  • 家庭养什么狗最干净(家庭养什么狗最好排行榜)
    家庭养什么狗最干净(家庭养什么狗最好排行榜)

    家庭养什么狗最干净(家庭养什么狗最好排行榜)

    很多朋友对于最好的宠物狗排名和最好的宠物狗排名第一不太懂,今天就由小编来为大家分享,希望可以帮助到大家,下面一起来看看家庭养什么狗最干净!宠物狗好养排名1、NO.1:泰迪 泰迪(又称贵宾犬)...

  • realme 真我 GT Neo6 SE 手机渲染图曝光:双摄圆环设计、50MP 索尼 OIS 主摄
    realme 真我 GT Neo6 SE 手机渲染图曝光:双摄圆环设计、50MP 索尼 OIS 主摄

    realme 真我 GT Neo6 SE 手机渲染图曝光:双摄圆环设计、50MP 索尼 OIS 主摄

    3 月 26 日消息,realme 真我 GT Neo6 SE 手机渲染图曝光,采用双摄圆环设计,绿色后盖,将于 4 月发布。博主 @数码闲聊站 今日爆料 realme 真我 GT Neo6 SE 手...

  • 冰雹过后 蔬菜大棚爆改星空顶:义乌网友乐观精神获点赞
    冰雹过后 蔬菜大棚爆改星空顶:义乌网友乐观精神获点赞

    冰雹过后 蔬菜大棚爆改星空顶:义乌网友乐观精神获点赞

    3月25日下午,浙江义乌突然遭遇了一场冰雹天气,给当地带来了不小的困扰。有趣的是,有一位网友在社交媒体上分享了他家的蔬菜大棚被冰雹“改造”成了别致的“星空顶”的经历,还幽默地邀请大家去他家看星星,仿佛...

  • 胖东来新增10天不开心假:不能不批 不批就违规了
    胖东来新增10天不开心假:不能不批 不批就违规了

    胖东来新增10天不开心假:不能不批 不批就违规了

    胖东来创始人于东来在2024中国超市周论坛上表示,今年胖东来又增加了10天不开心假。管理层是不能不批的,不批就违规了,就希望大家自由,“谁都有不开心的时候,但是真有这种不开心假的时候,又开心了。”本月...

生活常识

更多 >
  • 银项链多少钱一条(普通银项链多少钱一条)
    银项链多少钱一条(普通银项链多少钱一条)

    摘要:银项链的价格差异主要取决于银的纯度、项链的设计、手工制作的复杂程度、品牌和市场供需关系。在购买银项链时,我们应该根据自己的预算和品味来选择合适的产品,而不是盲目追求价格高的产品。在珠宝市场上,银...

  • 道林纸是什么纸(道林纸是什么纸是防刺眼的吗)
    道林纸是什么纸(道林纸是什么纸是防刺眼的吗)

    摘要:道林纸是一种高质量的涂布纸,以其高光泽度、优良的印刷性能、良好的耐磨性和抗水性,以及高级感强的特点,赢得了全球使用者的广泛赞誉。虽然其成本较高,但其优秀的性能和美观的外观,使得它在书籍封面、插图...

生活常识辟邪最厉害的法器(辟邪最厉害的法器有哪些)
生活常识蜂蜜多少钱一斤(蜂蜜多少钱一斤才是真蜜)
生活常识老虎和老鼠合不合(老虎和老鼠合不合的配对指数)
生活常识火兔的命运怎么样(2024年兔的运势怎么样呢)

创业路子

更多 >