博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
[雪峰磁针石博客]大数据Hadoop工具python教程2-python访问HDFS
阅读量:5889 次
发布时间:2019-06-19

本文共 380 字,大约阅读时间需要 1 分钟。

 已经不维护

 python2中比较好,对python3支持不好。

hdfs和PyArrow比较常用,这里以hdfs为例:

 快速入门

from hdfs import InsecureClientclient = InsecureClient('http://localhost:50070', user='hduser_')fs_folders_list = client.list("/")print(fs_folders_list)with client.read('/user/hduser/input.txt', encoding='utf-8') as reader:    for line in reader:        print(line)

执行结果:

['user']https://china-testing.github.io/

转载地址:http://hrgix.baihongyu.com/

你可能感兴趣的文章
Java 创建不可变对象-final关键字的使用总结
查看>>
UGUI组件之Image 组件简单笔记
查看>>
BZOJ3435 & 洛谷3920 & UOJ55:[WC2014]紫荆花之恋
查看>>
swift 广告轮播图
查看>>
marmalade android 5.0 JNI 调用失败的解决方案
查看>>
float 浮动详解
查看>>
【总结整理】面试需了解
查看>>
ArcEngine开发遇到的问题(转)
查看>>
js时间戳与日期格式的相互转换
查看>>
关于RF在实践WEB UI自动化测试时,碰到的问题
查看>>
解决Maven项目中jar包依赖冲突问题
查看>>
Pairing Heap模板
查看>>
2016的ChinaJoy沦为ChinaVR?
查看>>
Unity Shaders and Effets Cookbook
查看>>
cairo-1.14.6 static compiler msys mingw32
查看>>
Mac osx 下让android 模拟器横屏
查看>>
SQL创建触发器
查看>>
喜爱看剑雨,数据流的本人对各主角…
查看>>
luogu P1387 最大正方形
查看>>
Android图片圆角效果
查看>>