相关文章推荐

打盹的大熊猫 · pyspark读取数据 - ...· 5 天前 ·

含蓄的罐头 · DPDK RX / TX ...· 10 月前 ·

豁达的马克杯 · 如何通过Node.js SDK设置对象标签_ ...· 1 年前 ·

爱逃课的剪刀 · ThinkPHP6 ...· 1 年前 ·

至今单身的牛排 · 关于java.mail实现发送邮件，本机测试 ...· 1 年前 ·

威武的蘑菇 · C#调用Web Service时的身份验证 ...· 1 年前 ·

如何从我的电脑访问远程HDFS集群

0 人关注

我试图从我的本地电脑（win7）访问一个远程cloudera HDFS集群。正如cricket_007在我上一个问题中建议的那样，我做了以下事情。

(1) 我创建了下一个Spark会话

 val spark = SparkSession
.builder()
.appName("API")
.config("spark.sql.warehouse.dir", "/user/hive/warehouse")
.master("local")
.enableHiveSupport()
.getOrCreate()
(2) 我从集群中复制了下一个文件。
core-site.xml
hdfs-site.xml
hive-site.xml
mapred-site.xml
yarn-site.xml

推荐文章

打盹的大熊猫 · pyspark读取数据 - DataBases - 博客园

5 天前

含蓄的罐头 · DPDK RX / TX Callbacks 源码阅读 - 畅畅1 - 博客园

10 月前

豁达的马克杯 · 如何通过Node.js SDK设置对象标签_对象存储-阿里云帮助中心

1 年前

爱逃课的剪刀 · ThinkPHP6 结合GuzzleHTTP发送HTTP请求 - 个人文章 - SegmentFault 思否

1 年前

至今单身的牛排 · 关于java.mail实现发送邮件，本机测试正常发送，部署Linux服务器后无法正常发送的问题总结_依依东望的博客-CSDN博客

1 年前

威武的蘑菇 · C#调用Web Service时的身份验证 - ☆会飞的鱼☆ - 博客园

1 年前