木子李炼丹术
木子李炼丹术_个人页
木子李炼丹术
文章
1
问答
50
视频
0
个人介绍
暂无个人介绍
擅长的技术
-
提交了问题
2022-10-30
中文GPT-3是1750亿参数吗
-
提交了问题
2022-10-30
有一个文本生成的场景，该用哪个模型训练呢
-
发表了文章 2022-08-10
AI模型教你写出秒抓读者眼球的好标题
简介： 广告大师大卫·奥格威曾在《一个广告人的自白》中提到：标题在大部分广告中，都是最重要的元素，能够决定读者会不会看这则广告。一般来说，读标题的人比读内人的人多出4倍。换句话说，你所写标题的价值将是整个广告预算的80％。因此对于一篇文章、新闻来说，标题的好坏决定了点击和流量。本文介绍通过ModelScope的AI模型PALM来完成标题/摘要生成
暂无更多信息
-
回答了问题
2023-06-25
youku-mPLUG 预训练数据集下载报错
您好，抱歉给您带来使用问题，您可以去数据集的modelcard页面，更新到最新的modelscope库版本来解决这个问题赞1 踩0 评论0 -
回答了问题
2023-06-20
ChatYuan-large-v2版本可以finetune吗？
您好，目前该模型还不支持finetune赞0 踩0 评论0 -
回答了问题
2023-06-20
如何新增自己的训练集
您好，目前还暂时不支持chatyuan的训练功能，可以试用下其他相关的生成大模型，如GPT-3等系列，是支持自定义训练等赞0 踩0 评论0 -
回答了问题
2023-06-20
自然语言搜索业务数据，应该使用文本相似度模型来实现么？
您好，可以试下space系列的text-to-sql相关的模型，返回sql语句赞0 踩0 评论0 -
回答了问题
2023-06-20
ChatPLUG-13B什么时候发布呢
您好，感觉您对我们模型的认可，我们正在规划更大规模的模型（13B）开源赞0 踩0 评论0 -
回答了问题
2023-06-20
执行速度为什么这么慢？跑一个示例程序要几百秒啊
您好，您这边的执行环境是怎么样的呢，是CPU还是GPU环境赞0 踩0 评论0 -
回答了问题
2023-06-20
翻译模型有中英-base模型吗，现在只有英中-base
您好，我们目前只有中英的large模型，您可以先使用large模型，我们规划下base模型相关的上线赞0 踩0 评论0 -
回答了问题
2023-06-20
ChatYuan回复长度限制怎么修改
您好，可以按照这个配置修改参数赞0 踩0 评论0 -
回答了问题
2023-06-20
Distributed package doesn't have NCCL built in
您好，如果是 nccl 改 gloo 可以通过修改配置文件中的 megatron: { 'world_size': ... 'distributed_backend': 'gloo',赞0 踩0 评论0 -
回答了问题
2023-03-23
如何多卡 Finetuning PALM 2.0预训练生成模型?
您好，这个是一个未知的bug，我们正在尝试复现和修复，很抱歉很您带来不便，修复完成后我们会第一时间通知您赞0 踩0 评论0 -
回答了问题
2023-03-23
damo/nlp_gpt3_text-generation_2.7B，是环境版本问题吗，感觉问题好多
请您在 finetune 时确认传入的 trainer name 为 Trainers.gpt3_trainer，大模型训练时我们额外定义了一些并行相关的代码，使用 nlp_trainer 或 default 训练时会出现这一报错 trainer = build_trainer(name=Trainers.gpt3_trainer, default_args=kwargs)赞0 踩0 评论0 -
回答了问题
2023-03-23
使用大模型推理pipeline()方法时，如何传入top_k、top_p等参数控制生成内容
在 1.4.1 版本后 palm，gpt3 等生成模型可以直接在 pipeline 中传入生成参数，例如： pipe = pipeline(Tasks.text_generation, model=model_id) print(pipe('示例输入', top_p=0.95, temperature=0.9, max_length=1024)) 后续我们会完善文本生成相关文档～赞0 踩0 评论0 -
回答了问题
2023-03-22
现在不能下载了？加载报错
您好，您指的是哪个模型呢，模型下载是缓存在cache目录赞0 踩0 评论0 -
回答了问题
2023-03-22
GPT-3 13B参数的模型文件没有啊
您好，目前13B模型暂不支持下载，感谢您的关注赞0 踩0 评论0 -
回答了问题
2023-03-22
请问用自己的数据finetune了gpt3后 应该怎么用本地的checkpoint推理呢
您好，直接修改pipeline load的模型路径为本地checkpoint即可 p = pipeline(Tasks.text_generation, model=dir)赞0 踩0 评论0 -
回答了问题
2023-03-22
使用fp16半精度进行微调时，为啥 loss直接就为nan
您好，您使用的是哪个模型呢赞0 踩0 评论0 -
回答了问题
2023-03-22
模型不开放下载的吗？
您好，您指的是GPT-3模型吗，目前GPT-3开源可支持下载训练的最大模型是2.7B，赞0 踩0 评论0 -
回答了问题
2023-03-22
GPT3-2.7B用8卡训练时意外中断，如何恢复训练
您好，与文档中load模型类似，checkpoint_path 只需填写到 os.path.join(self.tmp_dir, 'epoch_1')，或是 iter_xxx 这一级即可，不用添加 .pth 后缀，读取过程后面会自动拼接文件名赞0 踩0 评论0 -
回答了问题
2023-03-22
请问下 gpt-13b 中文 什么时候开源呢？目前中文百亿的GPT好像都还没有开源的
您好，目前暂时还没有开源的计划，有开源我们会第一时间在用户群通知～，感谢您的关注赞0 踩0 评论0 -
回答了问题
2023-03-22
文本续写任务总是截断
您好，这个是之前的一个bug，我们已经修复了，建议您更新到 1.4.1 版本～赞0 踩0 评论0
滑动查看更多
暂无更多信息