社内オブジェクトストレージ向けFUSEデーモンのRustによる実装

既存のアプリケーションから POSIX API を用いて社内オブジェクトストレージにアクセスできるようにするために、FUSE (Filesystem in Userspace) デーモンを実装しました。実装には Rust を使用しました。既存の PoC (Proof of Concept) を置き換える形で機能を充実させ、rsync や Git などのアプリケーションが条件付きで動作するようになりました。Rsync を動作させることは当初の目標であり、無事達成することができました。 今後の課題 今後の課題としては、ファイルの所有者やパーミッションなど、各種メタデータの扱いがあります。オブジェクトストレージ自体が持つ認証・認可の仕組みを適切に反映できるようにしたいと考えています。 また、限られた時間で実装したため、テストが存在しません。今後はテストを記述したいと思います。 感想 このインターンシップを通して FUSE について深く学ぶことができました。特に、low-level API 相当のインターフェースを実装し、最終的に rsync などの実用的なアプリケーションを動作させることができたので、大きな達成感があります。Rsync の動作は当初の目標だったため、実現できて非常に満足しています。 日々の作業では、メンターの杉原さん、上西さん、Storage Team の皆さんにお世話になりました。コードレビューなどを通じて、より良いコードの書き方を学ぶことができました。この場をお借りしてお礼申し上げます。 メンターより エンジニアの杉原です。岡村さんには夏期インターンで、Rust によるオブジェクトストレージ向けの FUSE 実装に取り組んでいただきました。FUSE を用いる利点としては、幅広い既存のアプリケーションをコード変更なくサポートできる点が挙げられます。特に社内のオブジェクトストレージでは、データセットや学習時のモデルチェックポイントをアーカイブする用途が多く、これらがローカルファイルシステムと同様の操作感でアクセスできること、標準的な Linux コマンドや既存のツールチェインがそのまま動作することは大きなメリットです。岡村さんには、このようなユースケースや実装背景を踏まえて、ターゲットとなるアプリケーションを選定し、インターン期間中に必要なインターフェースを実装いただきました。また Rust の利用にあたっては、メンテナンス性やコードの保守性を考慮してクレートを選定いただき、最終的には FFI (Foreign Function Interface) や libfuse に依存しない実装を作成できました。 PFN では、このようなデータ管理・転送に関連するストレージやファイルシステム、オペレーティングシステムの要素技術、およびこれらの技術スタックを実装する基盤ソフトウェアの開発にも積極的に取り組んでおります。ご興味のある方がいらっしゃいましたら、来年度のインターンにぜひご期待ください。また、新卒採用・中途採用は通年で行っておりますので、募集要項のページをご覧ください。 参考文献 [1] 上西康太 他, “商用機械学習基盤の継続的開発に向けたストレージシステムの検討”, 情報処理学会研究会報告 (OS), 2025 [paper]. [2] https://github.com/s3fs-fuse/s3fs-fuse [3] https://github.com/libfuse/libfuse 投稿「社内オブジェクトストレージ向け FUSE デーモンの Rust による実装」は Preferred Networks Tech Blog に最初に表示されました。

社内オブジェクトストレージ向けFUSEデーモンのRustによる実装

背景や根拠まで確認しますか？

調べる

選ぶ

サイト