使用langchain-chatchat开源项目,运行成功后,使用LLM(chatglm2-6b-int4)模型,不能正常对话
错误信息:ERROR: RemoteProtocolError: Caught exception: peer closed connection without sending complete message body (incomplete chunked read)
下载到本地资源的model文件已配置
"llm_model": {
"chatglm2-6b-int4":"F:\opt\chatglm2\chatglm2-6b-int4",
m3e-base也配置了
"embed_model": {
"m3e-base": "F:\opt\m3e\m3e-base",
}
点击对话没有响应
Anaconda虚拟环境控制台报错
httpx.RemoteProtocolError: peer closed connection without sending complete message body (incomplete chunked read)
2024-02-29 17:46:00,518 - utils.py[line:40] - ERROR: RemoteProtocolError: Caught exception: peer closed connection without sending complete message body (incomplete chunked read)
选择知识库问答,输入筛选项也没有AI交互,只匹配了文件
**
我的目的是,对话模型能正常进行交互,知识库问答,除了匹配知识库文件之外,还要针对输入的文字正常进行AI交互**