开发者社区> 问答> 正文

文本分词用哪个模型?

文本分词用哪个模型?

展开
收起
人一月 2024-08-15 12:57:59 7 0
1 条回答
写回答
取消 提交回答
  • 对于文本分词任务,您可以使用阿里云提供的Split Word(生成模型)算法组件。

    该组件基于AliWS(Alibaba Word Segmenter)词法分析系统,支持中文淘宝分词和互联网分词。

    需要注意的是,Split Word(生成模型)用于生成分词模型本身,因此在对文本进行分词前,您需要先部署模型,之后才能进行预测或调用在线API进行分词处理。

    同样,您也可以使用NLP自然语言处理服务里面的基础文本服务-基础版以及基础文本服务-高级版服务,提供词法、句法、篇章分析等API中的通用领域能力,例如通用分词、通用词性标注等,每个算法服务提供 50万次/天 的免费调用额度可供您使用。

    参考链接:https://help.aliyun.com/zh/pai/user-guide/word-splitting-generate-models

    2024-08-15 16:53:51
    赞同 8 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载