DataWorks中我这有个UDF函数在开发环境正常测试后,发布到生产报错?

DataWorks中我这有个UDF函数在开发环境正常测试后,发布到生产报错 Service exception, please try again laterimage.png
尝试重新从Function Studio 重新构建如果是要覆盖原有函数或者jar,则会各种报错:create file failed! which already existed under current path known as \\"FlatFtContainersUDTFimage.png
如果行的函数或者jar 名,则无报错,但构建失败?尝试用手工配置方式上传jar包并添加函数,执行sql系统报以下错误image.png

展开
收起
真的很搞笑 2023-08-27 12:54:16 128 分享 版权
1 条回答
写回答
取消 提交回答
  • UDF 函数在开发环境和生产环境中可能存在以下差异:

    开发环境和生产环境使用的 Hive 版本不同。
    开发环境和生产环境使用的 Hadoop 版本不同。
    开发环境和生产环境使用的 OS 不同。
    开发环境和生产环境使用的 JVM 版本不同。
    这些差异可能会导致 UDF 函数在开发环境中正常工作,但在生产环境中报错。

    为了避免这种情况,您可以使用以下方法在生产环境中测试 UDF 函数:

    在生产环境中创建一个 Hive 表,并将一些数据插入到该表中。
    使用 UDF 函数在生产环境中查询该表。
    如果 UDF 函数在生产环境中正常工作,则可以将它发布到生产环境中。
    如果 UDF 函数在生产环境中报错,则您需要检查 UDF 函数是否兼容生产环境。如果 UDF 函数不兼容生产环境,则您需要修改 UDF 函数,使它能够在生产环境中正常工作。

    2023-09-18 15:58:22
    赞同 展开评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

还有其他疑问?
咨询AI助理