CDH6.3.0使用阿里的jindoFS文件系统访问OSS数据时报错
  TEZNKK3IfmPf 2023年11月12日 26 0
cdh

报错如下:意思是无权限

CDH6.3.0使用阿里的jindoFS文件系统访问OSS数据时报错


Caused by: java.lang.ClassNotFoundException: Class com.aliyun.emr.fs.oss.JindoOssFileSystem not found

解决方案:


使用root用户进入到
[root@dbos-bigdata-flink005 ~]# cd /opt/cloudera/parcels/CDH-6.3.0-1.cdh6.3.0.p0.1279813/jars/
[root@dbos-bigdata-flink005 jars]# ll jindofs-sdk.jar
-rw------- 1 root root 62126071 Sep 9 13:24 jindofs-sdk.jar
注意:发现只有root用户可以统计和访问,所以要重新授权
[root@dbos-bigdata-flink005 jars]# chmod 777 jindofs-sdk.jar
在进行访问就可以正常访问了
[root@dbos-bigdata-flink005 jars]# sudo su - flink
Last login: Wed Nov 10 08:59:44 CST 2021 on pts/3
[flink@dbos-bigdata-flink005 ~]$ hdfs dfs -du -h oss://dbbigdatapro/group/user/tools/meta/hive-temp-table/test_sony_boot_play2
21/11/10 09:02:47 WARN auth.AuthUtils: [fs.jfs.cache.oss-accessKeyId, fs.oss.accessKeyId] is deprecated, please use: fs.jfs.cache.oss.accessKeyId
21/11/10 09:02:47 WARN auth.AuthUtils: [fs.jfs.cache.oss-accessKeySecret, fs.oss.accessKeySecret] is deprecated, please use: fs.jfs.cache.oss.accessKeySecret
85.4 G 85.4 G oss://dbbigdatapro/group/user/tools/meta/hive-temp-table/test_sony_boot_play2/20211109
87.9 G 87.9 G oss://dbbigdatapro/group/user/tools/meta/hive-temp-table/test_sony_boot_play2/20211110

CDH6.3.0使用阿里的jindoFS文件系统访问OSS数据时报错

【版权声明】本文内容来自摩杜云社区用户原创、第三方投稿、转载,内容版权归原作者所有。本网站的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@moduyun.com

  1. 分享:
最后一次编辑于 2023年11月12日 0

暂无评论

推荐阅读
  AnyLlCIhvKpr   2023年11月11日   29   0   0 cdh
  TEZNKK3IfmPf   2023年11月14日   40   0   0 cdh
  TEZNKK3IfmPf   2023年11月14日   27   0   0 hdfscdh
  AnyLlCIhvKpr   2023年11月12日   18   0   0 cdh
  TEZNKK3IfmPf   2023年11月13日   20   0   0 sparkHivecdh
  TEZNKK3IfmPf   2023年11月14日   30   0   0 cdh