spark-sql或spark-beeline查询报错：File does not exist
【摘要】 spark-sql或spark-beeline查询报错：File does not exist产生原因是：spark-sql或spark-beeline会缓存查询的元数据，此时当前session未关闭时候，有其他任务修改了表文件，当前session再进行查询类操作，就会出现表文件不存在的报错解决方法：在表前加上refresh table + 表名或者添加spark.sql.relationC...
spark-sql或spark-beeline查询报错：File does not exist
产生原因是：spark-sql或spark-beeline会缓存查询的元数据，此时当前session未关闭时候，有其他任务修改了表文件，当前session再进行查询类操作，就会出现表文件不存在的报错
解决方法：在表前加上refresh table + 表名或者添加spark.sql.relationCache.skip=Dbname:文件格式，可配置ORC和Parquet两种格式，JDBCServer任务需要在服务端添加并重启
【版权声明】本文为华为云社区用户原创内容，转载时必须标注文章的来源（华为云社区）、文章链接、文章作者等基本信息， 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容，欢迎发送邮件进行举报，并提供相关证据，一经查实，本社区将立刻删除涉嫌侵权内容，举报邮箱：
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论（0）