rust 社区基本没有纯 rust 实现的 hdfs 客户端, 在使用前需要下载依赖和配置环境变量, 所以我实现了一个不依赖 java 的 hdfs client 端 hdfs-client.

有如下特性

• 依赖简单, 使用方便
• FileReader 实现了 Read + Seek, 使用方法普通 std::fs::File 类似
• FileWriter 支持 create 和 append 模式和 Write trait
• 支持 checksum 校验

示例代码如下

use std::io::Read;
use hdfs_client::HDFS;

fn main() {
    let mut fs = HDFS::connect("127.0.0.1:9000", "root").unwrap();
    let mut fd = fs.open("/test/hello.txt").unwrap();
    let mut content = String::new();
    fd.read_to_string(&mut content).unwrap();
    println!("{content}");
}

欢迎试用和提建议.

公共号原文