Skip to content
AI

Tại sao ai đó theo dõi lưu lượng LLM được mã hóa của tôi vẫn có thể suy ra những gì tôi đã hỏi?

79

Cơ hội

Whisper Leak, được tiết lộ vào cuối năm 2025, đã chứng minh rằng phân tích các mẫu thời gian và kích thước gói tin trong các phản hồi LLM streaming được mã hóa có thể phân loại chủ đề prompt với độ chính xác hơn 98% trên 28 nhà cung cấp lớn. Một số nhà cung cấp bao gồm OpenAI và Mistral đã triển khai các bản vá, nhưng các biện pháp giảm thiểu đó chỉ giải quyết các mẫu độ dài token. Một cuộc tấn công riêng biệt khai thác giải mã suy đoán: số lượng token được chấp nhận trên mỗi bước giải mã thay đổi theo nội dung đầu ra, và tín hiệu đó rò rỉ ngay cả qua các kết nối được đệm vì đệm không loại bỏ biến động tốc độ chấp nhận. Các biện pháp phòng thủ được đề xuất như gộp token giảm độ chính xác tấn công 50% nhưng không loại bỏ hoàn toàn, và đệm ngẫu nhiên áp đặt overhead tải trọng lên đến 8,7 lần với rò rỉ vẫn còn. Chưa có nhà cung cấp nào triển khai biện pháp giảm thiểu hoàn chỉnh cho biến thể giải mã suy đoán.

Tại sao quan trọng

Bất kỳ người dùng nào truy vấn LLM streaming từ mạng ghi lại lưu lượng đều đang để lộ chủ đề truy vấn của mình bất kể mã hóa TLS, bao gồm cả những người dùng tin rằng họ đang giao tiếp riêng tư với trợ lý y tế, pháp lý hoặc tài chính.

Cách tôi đánh giá cơ hội

Điểm Cơ Hội là đánh giá riêng của tôi, không phải một phép đo chính xác: mức độ gây khó chịu, tần suất xuất hiện và sự khan hiếm của giải pháp hiện có. Điểm càng cao, tôi càng cho rằng vấn đề đó càng đáng để xây dựng.

Mức độ nghiêm trọng8/10

Mức độ phiền toái nó gây ra khi xuất hiện.

Tần suất8/10

Tần suất mọi người thực sự gặp phải nó.

Khoảng trắng8/10

Có rất ít công cụ tốt để xử lý nó hiện nay.

Thêm các vấn đề đáng giải quyết