tnblog
首页
视频
资源
登录

LangChain 模型(学习笔记)

3538人阅读 2023/9/7 11:01 总访问:3505444 评论:0 收藏:0 手机
分类: python

LangChain 模型(学习笔记)

Langchain 模型简介


Langchain所封装的模型分为两类:
——大语言模型 (LLM)
——聊天模型 (Chat Models)
——在后续的内容中,为简化描述,我们将使用 LLM 来指代大语言模型。

Langchain的支持众多模型供应商,包括OpenAI、ChatGLM、HuggingFace等。
本教程中,我们将以OpenAI为例,后续内容中提到的模型默认为OpenAI提供的模型。

Langchain的封装,比如,对OpenAI模型的封装,实际上是指的是对OpenAI API的封装。

LLM


LLM 是一种基于统计的机器学习模型,用于对文本数据进行建模和生成。LLM学习和捕捉文本数据中的语言模式、语法规则和语义关系,以生成连贯并合乎语言规则的文本。

在Langchain的环境中,LLM特指文本补全模型(text completion model)。

注:文本补全模型是一种基于语言模型的机器学习模型,根据上下文的语境和语言规律,自动推断出最有可能的下一个文本补全。

输入 输出
一条文本内容 一条文本内容

聊天模型 (Chat Models)


聊天模型是语言模型的一种变体。聊天模型使用语言模型,并提供基于”聊天消息”的接口。

输入 输出
一组聊天消息 一条聊天消息

Langchain与OpenAI模型


参考OpenAI Model endpoint compatibility 文档,gpt模型都归为了聊天模型,而davinci, curie, babbage, ada模型都归为了文本补全模型。

ENDPOINT MODEL NAME
/v1/chat/completions gpt-4, gpt-4-0613, gpt-4-32k, gpt-4-32k-0613, gpt-3.5-turbo, gpt-3.5-turbo-0613, gpt-3.5-turbo-16k, gpt-3.5-turbo-16k-0613
/v1/completions (Legacy) text-davinci-003, text-davinci-002, text-davinci-001, text-curie-001, text-babbage-001, text-ada-001, davinci, curie, babbage, ada


Langchain提供接口集成不同的模型。
为了便于切换模型,Langchain将不同模型抽象为相同的接口 BaseLanguageModel,并提供 predictpredict_messages 函数来调用模型。
当使用LLM时推荐使用predict函数,当使用聊天模型时推荐使用predict_messages函数。

示例代码

与LLM的交互


接下来我们来看看如何在Langchain中使用LLM和聊天模型。

  1. from langchain.llms import OpenAI
  2. import os
  3. os.environ['OPENAI_API_KEY'] = '您的有效OpenAI API Key'
  4. llm = OpenAI(model_name="text-davinci-003")
  5. response = llm.predict("What is AI?")
  6. print(response)


你应该能看到类似如下输出:

与聊天模型的交互


与聊天模型的交互,我们需要使用 langchain.chat_models 模块中的 ChatOpenAI 类。

  1. from langchain.chat_models import ChatOpenAI
  2. from langchain.schema import AIMessage, HumanMessage, SystemMessage
  3. import os
  4. os.environ['OPENAI_API_KEY'] = '您的有效OpenAI API Key'
  5. chat = ChatOpenAI(temperature=0)
  6. response = chat.predict_messages([
  7. HumanMessage(content="What is AI?")
  8. ])
  9. print(response)


你应该能看到类似如下输出:

  1. content='AI, or Artificial Intelligence, refers to the simulation of human intelligence in machines that are programmed to think and learn like humans. It involves the development of computer systems capable of performing tasks that typically require human intelligence, such as speech recognition, decision-making, problem-solving, and language translation. AI can be categorized into two types: Narrow AI, which is designed for specific tasks, and General AI, which possesses the ability to understand, learn, and apply knowledge across various domains.' additional_kwargs={} example=False


通过以下代码我们查看一下 response 变量的类型:

  1. response.__class__


可以看到,它是一个 AIMessage 类型的对象。


接下来我们使用 SystemMessage 指令来指定模型的行为。如下代码指定模型对AI一无所知,在回答AI相关问题时,回答I don't know

  1. response = chat.predict_messages([
  2. SystemMessage(content="You are a chatbot that knows nothing about AI. When you are asked about AI, you must say 'I don\'t know'"),
  3. HumanMessage(content="What is deep learning?")
  4. ])
  5. print(response)


3个消息类
Langchain框架提供了三个消息类,分别是 AIMessageHumanMessageSystemMessage。它们对应了OpenAI聊天模型API支持的不同角色 assistantusersystem。请参考 OpenAI API文档 - Chat - Role

Langchain类 OpenAI角色 作用
AIMessage assistant 模型回答的消息
HumanMessage user 用户向模型的请求或提问
SystemMessage system 系统指令,用于指定模型的行为

总结

本节课程中,我们学习了模型的基本概念,LLM与聊天模型的差异,并基于 Langchain 实现了分别与OpenAI LLM和聊天模型的交互。

学习链接


更多学习内容,可以关注一下五里墩茶社大佬
https://space.bilibili.com/615957867?spm_id_from=333.337.0.0


欢迎加群讨论技术,1群:677373950(满了,可以加,但通过不了),2群:656732739

评价

LangChain 简单应用(学习笔记)

LangChain 简单应用(学习笔记)[TOC] Langchain 简介大型语言模型(LLM)正在成为一种具有变革性的技术,使开发人员能够构...

LangChain 数据连接(学习笔记)

LangChain 数据连接(学习笔记)[TOC] 什么是数据连接?LLM应用往往需要用户特定的数据,而这些数据并不属于模型的训练集。L...

LangChain 提示词(学习笔记)

LangChain 提示词(学习笔记)[TOC] 什么是提示词?提示词(Prompt)是指向模型提供的输入。这个输入通常由多个元素构成。La...

LangChain 输出解析器(学习笔记)

LangChain 输出解析器(学习笔记)[TOC] 简介LLM的输出为文本,但在程序中除了显示文本,可能希望获得更结构化的数据。这就...

LangChain 链(学习笔记)

LangChain 链(学习笔记)[TOC] 单一的LLM对于简单的应用场景已经足够,但是更复杂的应用程序需要将LLM串联在一起,需要多LL...

LangChain 记忆组件(学习笔记)

LangChain 记忆组件(学习笔记)[TOC] 单一的LLM对于简单的应用场景已经足够,但是更复杂的应用程序需要将LLM串联在一起,需...

LangChain 代理 Agent(学习笔记)

LangChain 代理 Agent(学习笔记)[TOC] 简介Agent 也就是代理,它的核心思想是利用一个语言模型来选择一系列要执行的动作。...

LangChain 回调 (Callback)

LangChain 回调 (Callback)[TOC] 简介Callback 是 LangChain 提供的回调机制,允许我们在 LLM 应用程序的各个阶段使用 Hoo...

LangChain 一个完整的例子

LangChain 一个完整的例子[TOC] 简介这是该 LangChain 极简入门系列的最后一讲。我们将利用过去9讲学习的知识,来完成一个...
这一世以无限游戏为使命!
排名
2
文章
640
粉丝
44
评论
93
docker中Sware集群与service
尘叶心繁 : 想学呀!我教你呀
一个bug让程序员走上法庭 索赔金额达400亿日元
叼着奶瓶逛酒吧 : 所以说做程序员也要懂点法律知识
.net core 塑形资源
剑轩 : 收藏收藏
映射AutoMapper
剑轩 : 好是好,这个对效率影响大不大哇,效率高不高
ASP.NET Core 服务注册生命周期
剑轩 : http://www.tnblog.net/aojiancc2/article/details/167
ICP备案 :渝ICP备18016597号-1
网站信息:2018-2025TNBLOG.NET
技术交流:群号656732739
联系我们:contact@tnblog.net
公网安备:50010702506256
欢迎加群交流技术