ModelScope

ModelScope 是一个大型模型和数据集存储库。

本页介绍了如何在 LangChain 中使用 modelscope 生态系统。 它分为两部分：安装和设置，然后是对特定 modelscope 包装器的引用。

安装

pip install -U langchain-modelscope-integration

前往 ModelScope 注册 ModelScope 并生成 SDK 令牌。完成此作后，设置MODELSCOPE_SDK_TOKEN环境变量：

export MODELSCOPE_SDK_TOKEN=<your_sdk_token>

聊天模型

ModelScopeChatEndpointclass 公开来自 ModelScope 的聊天模型。在此处查看可用型号。

from langchain_modelscope import ModelScopeChatEndpoint

llm = ModelScopeChatEndpoint(model="Qwen/Qwen2.5-Coder-32B-Instruct")
llm.invoke("Sing a ballad of LangChain.")

嵌入

ModelScopeEmbeddingsclass 公开了 ModelScope 中的嵌入向量。

from langchain_modelscope import ModelScopeEmbeddings

embeddings = ModelScopeEmbeddings(model_id="damo/nlp_corom_sentence-embedding_english-base")
embeddings.embed_query("What is the meaning of life?")

LLM

ModelScopeLLMclass 公开了 ModelScope 中的 LLM。

from langchain_modelscope import ModelScopeLLM

llm = ModelScopeLLM(model="Qwen/Qwen2.5-Coder-32B-Instruct")
llm.invoke("The meaning of life is")