ModelScope在pai按教程,部署chatglm-demo服务,post请求,返回错误为什么?
"None Inference failure: 'input_ids'"
这个请求格式不对的,而且服务需要设置worker_threads为1,请参考这个文档:
https://help.aliyun.com/zh/pai/use-cases/deploy-chatglm-and-langchain-applications-with-one-click-pai-eas-for-5
格式类似:-此回答整理自钉群“魔搭ModelScope开发者联盟群 ①”