欢迎来到尧图网

客户服务 关于我们

您的位置:首页 > 教育 > 锐评 > DBT踩坑第三弹

DBT踩坑第三弹

2025/11/11 10:27:19 来源:https://blog.csdn.net/zc19921215/article/details/135045189  浏览:    关键词:DBT踩坑第三弹

1. dbt在获取元数据信息的时候,底层使用pyHive的时候database信息没有传进去,pyHive默认又是会设置database='default',如果没有default库权限的,这个时候就会抛出Access异常。所以此时最好修改下 dbt-spark 的源码,把database的信息给传进去。

2. PYTHON虚拟环境,debain 和 centos 是不兼容的,得重新打包,害...当然这是由于我对python虚拟环境的不熟悉,不能算是dbt的问题

3. 使用persist_doc功能(给表和字段增加注释信息),发现对GP生效,但是对spark不生效。源码中写着只对delta hudi iceberg生效,得修改下源码,使其对其他格式生效:

版权声明:

本网仅为发布的内容提供存储空间,不对发表、转载的内容提供任何形式的保证。凡本网注明“来源:XXX网络”的作品,均转载自其它媒体,著作权归作者所有,商业转载请联系作者获得授权,非商业转载请注明出处。

我们尊重并感谢每一位作者,均已注明文章来源和作者。如因作品内容、版权或其它问题,请及时与我们联系,联系邮箱:809451989@qq.com,投稿邮箱:809451989@qq.com

热搜词