字节と南京大学、VLM のプライバシー保護フレームワーク「COVERT」を ECCV 2026 に発表

記事の3ポイント

1. 1

   VLMaaS 向け初の専用フレームワーク

   COVERT は VLM のクラウド推理サービスに特化した最初のプライバシー保護フレームワークであり、視覚入力、テキスト入力、および推論応答のすべてをカバーする。

2. 2

   協変混淆による高精度な暗号化

   入力データとモデルパラメータを成対に変換する協変混淆を採用し、サーバー側で暗号化空間内で等価計算を行うことで、機密情報を保護しつつ機能の一貫性を維持する。

3. 3

   反演攻撃への耐性強化

   浅層 ViT 注意力における空間可逆リスクを特定し、ユーザーの秘密種子で制御されるノイズ注入と選択的微調整により、高保真な画像再構成を防ぐ。