AI 助理
备案控制台
开发者社区 ModelScope模型即服务 正文

ModelScope中.我下载到本地的模型，分析执行时间好像有点长，有办法提高效率吗？

请问下我下载到本地的模型，分析执行时间好像有点长，有办法提高效率吗？我已经把模型初始化加载提前完成的。1caaa82ee8299c979368e6ffe1cbea73.png

展开
收起
防火防爆 2024-08-16 12:48:35 66 分享 版权
1 条回答
写回答
取消 提交回答
  • 李丽虹

    您在初始化之后加一次推理，再后面测试推理时间，第一次推理有个prepare_model。此回答整理自钉钉群“魔搭ModelScope开发者联盟群 ①”

    2024-08-28 11:26:37
    赞同 展开评论
相关问答
modelscope-funasr的CosyVoice 效果好极了，只是推理速度不能实时，有啥办法？
177
0
0
在modelscope上下载qwen2的0.5版本，左边这个正常加载，右边这个报错，为什么？
146
1
0
modelscope里为什么我下载到本地的模型，却找不到？
221
1
0
请问ModelScope模型下载报这个错误怎么处理呢？
46
1
0
为什么从Modelscope上下载的数据集？
92
1
0
modelscope模型文件都下载成功了，部署报错，是不是说只能在GPU下运行，CPU不行吗？
138
1
0
modelscope-funasr重新编译没成功；还有其它办法禁掉VAD等其它模型吗？
47
0
0
modelscope-funasr内网有隔离，我用git下载了模型，引用到本地后不能解析，为什么？
41
1
0
ModelScope认证有办法关闭吗？还是需要去设置证书？
77
2
0
按照Q5操作了，然后运行本地模型报错，请问ModelScope是少了什么步骤吗 ？
58
1
0

ModelScope模型即服务

ModelScope旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品，让模型应用更简单！欢迎加入技术交流群：微信公众号：魔搭ModelScope社区，钉钉群号：44837352

我要提问

热门讨论

热门文章

  • ModelScope中，模型下载默认路径在哪个路径？
  • ModelScope下载速度慢怎么解决？
  • ModelScope qwen7b、14b、72b lora微调分别需要的显存和cpu内存是多少？
  • 我希望通过damo-YOLO训练1500*1500的图片
  • com/action/joingroup?code=v1是什么意思
  • 在魔塔社区-模型服务 里面一键部署的deepseek模型怎么使用？
  • modelscope上跑报错，提示要pip install ttsfrd，搞不定
  • ModelScope有没有人知道windows安装ttsfrd的方法或者ttsfrd源码？
  • ModelScope有部署qwen2-72b的么，正常推理需要多大的显存？
  • 无法导入 modelscope，已经pip install了
    • 展开全部
  • 深度评测 | 仅用3分钟，百炼调用满血版 Deepseek-r1 API，百万Token免费用，简直不要太爽。
  • WeaveFox：蚂蚁集团推出 AI 前端智能研发平台，能够根据设计图直接生成源代码，支持多种客户端和技术栈
  • 通义万相Wan2.1视频模型开源！视频生成模型新标杆，支持中文字效+高质量视频生成
  • Qwen2.5-Max：阿里通义千问超大规模 MoE 模型，使用超过20万亿tokens的预训练数据
  • 本地部署DeepSeek模型
  • MNN-LLM App：在手机上离线运行大模型，阿里巴巴开源基于 MNN-LLM 框架开发的手机 AI 助手应用
  • 阿里云PAI部署DeepSeek及调用
  • CosyVoice 2.0：阿里开源升级版语音生成大模型，支持多语言和跨语言语音合成，提升发音和音色等的准确性
  • KTransformers：告别天价显卡！国产框架让单卡24G显存跑DeepSeek-R1 671B大模型：推理速度飙升28倍
  • vanna+qwen实现私有模型的SQL转换
    • 展开全部
    还有其他疑问?
    咨询AI助理