چگونه می‌شود مکالمات یک شبکه عصبی را شنود کرد؟

17 آذر 1404 چگونه می‌شود مکالمات یک شبکه عصبی را شنود کرد؟

 روابط عمومی شرکت ایدکو (توزیع‌کننده‌ی محصولات کسپرسکی در ایران)؛ مردم حساس‌ترین و حتی خصوصی‌ترین مسائل زندگی خود را به شبکه‌های عصبی می‌سپارند؛ از تأیید تشخیص‌های پزشکی گرفته تا گرفتن مشاوره‌ی عاطفی یا حتی مراجعه به هوش مصنوعی به‌جای روان‌درمانگر. تاکنون موارد شناخته‌شده‌ای از برنامه‌ریزی برای خودکشی، حمله‌های واقعی در دنیای بیرون و دیگر رفتارهای خطرناک وجود داشته که با کمک مدل‌های زبانی بزرگ انجام شده‌اند. به همین دلیل، گفت‌وگوهای خصوصی بین انسان و هوش مصنوعی بیش از پیش توجه دولت‌ها، شرکت‌ها و افراد کنجکاو را به خود جلب کرده است. در نتیجه، کمبودی در افرادی که بخواهند حملهWhisper Leak را در دنیای واقعی اجرا کنند، وجود نخواهد داشت. این حمله امکان می‌دهد بدون هیچ‌گونه دخالت در ترافیک، موضوع کلی یک گفت‌وگو با شبکه عصبی مشخص شود؛ تنها با تحلیل الگوهای زمانیِ ارسال و دریافت بسته‌های داده رمزگذاری‌شده بین کاربر و سرور هوش مصنوعی. با این حال، هنوز راه‌هایی برای خصوصی نگه‌داشتن گفت‌وگوهای شما وجود دارد که قرار است در ادامه به این موارد بپردازیم.

ساز و کار حمله‌ی Whisper Leak

تمام مدل‌های زبانی خروجی خود را به‌صورت مرحله‌به‌مرحله تولید می‌کنند. برای کاربر، این‌طور به نظر می‌رسد که انگار یک نفر در سمت دیگر دارد کلمه به کلمه تایپ می‌کند. اما در واقع مدل‌های زبانی نه با کاراکترها یا کلمات به صورت جداگانه بلکه با توکن‌ها – واحدهای معنایی برای مدل‌های زبانی بزرگ – کار می‌کنند و پاسخ هوش مصنوعی هنگام تولید این توکن‌ها روی صفحه ظاهر می‌شود. این حالت خروجی را یااستریمینگ[1] می‌نامند و پژوهش‌ها نشان داده‌ می‌توان با اندازه‌گیری ویژگی‌های این جریان، موضوع مکالمه را حدس زد. پیش‌تر در تحقیقی معلوم شده بود با تحلیل طول هر توکن ارسال‌شده، می‌توان متن یک چت با بات را تا حد زیادی بازسازی کرد.

 محققین مایکروسافت حتی فراتر رفته و پاسخ‌های ۳۰ مدل هوش مصنوعی مختلف را به ۱۱,۸۰۰ درخواست بررسی کردند. از این تعداد، ۱۰۰ درخواست حول پرسشی مانند «آیا پول‌شویی قانونی است؟» بودند و بقیه موضوعات کاملاً تصادفی و متفاوت را پوشش می‌دادند. با مقایسه تاخیر پاسخ سرور، اندازه بسته‌ها و تعداد کل بسته‌ها، محققین توانستند با دقت بالا، پرسش‌های «خطرناک» را از پرسش‌های «عادی» جدا کنند. آن‌ها برای تحلیل از شبکه‌های عصبی استفاده کردند، اما نه LLMها. بسته به مدل، دقت شناسایی موضوعات خطرناک بین ۷۱٪ تا ۱۰۰٪ بود و برای ۱۹ مدل از ۳۰ مدل دقت بیش از ۹۷٪ رسید. سپس آزمایشی پیچیده‌تر و واقعی‌تر انجام شد. آن‌ها مجموعه‌ای از ۱۰,۰۰۰ مکالمه تصادفی را بررسی کردند که فقط یکی از آن‌ها مربوط به موضوع موردنظر بود. نتایج متغیر بودند، اما حمله شبیه‌سازی‌شده هنوز موفقیت بالایی داشت. نکته مهم این است که نتایج نه‌ فقط به مدل هوش مصنوعی که به پیکربندی سروری که مدل روی آن اجرا می‌شود نیز مربوط است. بنابراین، یک مدل یکسان از OpenAI ممکن است روی زیرساخت مایکروسافت رفتاری متفاوت با اجرای آن روی سرورهای خود OpenAI داشته باشد. این موضوع روی همه مدل‌های متن‌باز نیز صادق است.

پیامدهای عملی: چه چیزهایی لازم است تا Whisper Leak کار کند؟

اگر مهاجم منابع کافی داشته باشد و به ترافیک شبکه قربانیان دسترسی پیدا کند — مثلاً از طریق کنترل یک روتر در یک ISP یا سازمان — می‌تواند درصد قابل توجهی از مکالمات در موضوعات موردنظر را فقط با اندازه‌گیری ترافیک ارسالی به سرورهای دستیار هوش مصنوعی شناسایی کرده و در عین حال خطای کمی داشته باشد. با این حال، این به معنای شناسایی خودکار همه موضوعات مکالمه نیست. مهاجم ابتدا باید سیستم شناسایی خود را روی موضوعات خاص آموزش دهد چون مدل فقط همان موضوعات را شناسایی می‌کند. این تهدید صرفاً در حد تئوری نیست. برای مثال، نیروهای انتظامی می‌توانند جست‌وجوهای مربوط به اسلحه یا تولید مواد مخدر را زیر نظر بگیرند و شرکت‌ها ممکن است جست‌وجوهای کارمندان درباره شغل جدید را دنبال کنند. اما استفاده از این فناوری برای نظارت گسترده روی صدها یا هزاران موضوع عملی نیست، چون منابع زیادی نیاز دارد. در واکنش به این تحقیق، برخی از سرویس‌های محبوب هوش مصنوعی الگوریتم‌های سرور خود را تغییر دادند تا اجرای این حمله دشوارتر شود.

راهکارهای امنیتی

مسئولیت اصلی دفاع در برابر این حمله بر عهده ارائه‌دهندگان مدل‌های هوش مصنوعی است. آن‌ها باید متن تولیدشده را به گونه‌ای ارائه کنند که موضوع مکالمه از روی الگوهای تولید توکن قابل تشخیص نباشد. پس از تحقیقات مایکروسافت، شرکت‌هایی مانند  OpenAI، Mistral، Microsoft Azure  و xAI اعلام کردند که در حال مقابله با این تهدید هستند. آن‌ها اکنون مقدار کمی «پد نامرئی» به بسته‌های ارسالی اضافه می‌کنند تا الگوریتم‌های Whisper Leak مختل شوند. جالب اینکه مدل‌های Anthropic از ابتدا نسبت به این حمله آسیب‌پذیری کمتری داشتند. اگر از مدلی استفاده می‌کنید که هنوز احتمال حمله Whisper Leak در آن وجود دارد، می‌توانید یا به ارائه‌دهنده کم‌خطرتر مهاجرت کنید یا اقدامات پیشگیرانه بیشتری انجام دهید. این اقدامات برای کسانی که می‌خواهند در برابر حملات مشابه آینده محافظت شوند نیز مفید است. پس توصیه می‌کنیم که:

  •         برای موضوعات بسیار حساس، از مدل‌های هوش مصنوعی محلی استفاده کنید. می‌توانید از راهنمای ما پیروی کنید.
  •         مدل را طوری تنظیم کنید که خروجی جریان‌دهی نشود و کل پاسخ یک‌جا ارائه شود، نه کلمه به کلمه.
  •         از صحبت درباره موضوعات حساس با چت‌بات‌ها هنگام اتصال به شبکه‌های نامطمئن خودداری کنید.
  •         از سرویس VPN قوی و معتبر برای امنیت بیشتر اتصال استفاده کنید.

* به یاد داشته باشید که احتمال نشت اطلاعات چت بیشتر از همه از کامپیوتر یا دستگاه‌های خود شما است. بنابراین محافظت از آن‌ها با یک راهکار امنیتی مطمئن روی کامپیوتر و تمام گوشی‌ها ضروری است.

[1] Streaming

 

 کسپرسکی آنلاین (ایدکو)

کسپرسکی اسم یکی از بزرگترین شرکتهای امنیتی و سازنده آنتی ویروس است که برخی از کاربران اشتباهاً این شرکت و محصولات آنتی ویروس آن را با عناوینی نظیر کسپرسکای،کاسپرسکی، کسپراسکای، کسپراسکای، و یا کاسپراسکای نیز می‌شناسد. همچنین لازم به ذکر است مدیرعامل این شرکت نیز یوجین کسپرسکی نام دارد.

 

 

 

محصولات مرتبط

  • Kaspersky Cloud Password Manager

    Kaspersky Cloud Password Manager ابزار مدیریت کلمه عبور ابری کسپرسکی (KCPM) ضمن ذخیره ایمن تمامی کلمات عبور مورد استفاده شما برای وبسایت‌ها، اپلیکیشن‌ها، و شبکه‌های اجتماعی آنها را در تمامی ...

    12,182,760 ریال20,304,600 ریال
    خرید
  • Kaspersky Safe Kids

    اپلیکیشن همه‌کاره برای فرزندپروریِ دیجیتال و سلامت خانواده نرم افزار امنیت کودکان کسپرسکی، نظارت‌های والدین را آسان می‌کند. ردیابی مکان و عادات دستگاه، محدودسازی محتوا، متعادل‌سازی ...

    12,182,760 ریال20,304,600 ریال
    خرید
  • Kaspersky Security Cloud Personal

    تمام اپ‌های امنیتیِ ما در دستانتان. به کل خانواده‌ی اپ‌های ما برای دسکتاپ و موبایل دسترسی پیدا کنید. از آنتی‌ویروس گرفته تا ابزارهای حریم خصوصی و اجرایی، هر کدام را به میل ...

    135,437,100 ریال
    خرید
  • Kaspersky Standard

    سیستم امنیتی بهبودیافته به همراه تقویت‌کننده عمکرد دستگاه طرح امنیتی استاندارد ما، نه تنها سیستم امنیتی قدرتمندی را برای انواع ویروس‌ها، بدفزارها و باج‌افزارها ارائه می‌دهد ...

    22,987,800 ریال38,313,000 ریال
    خرید
  • Kaspersky Plus

    امنیت. کارایی. حریم خصوصی. همه در یک برنامه با کاربری آسان کسپرسکی پلاس با ارائه امنیت سایبری نسل بعد، شما در برابر ویروس‌ها، باج‌افزارها و بدافزارهای جدید محافظت کند - بدون ...

    32,964,660 ریال54,941,100 ریال
    خرید
  • Kaspersky Premium

    حفاظت کامل از دستگاه ها، حریم خصوصی و هویت شما با محصول Kaspersky Premium تمام نیازهای امنیتی خود و خانواده‌تان را پوشش دهید. حفاظت پیشرفته ...

    35,263,440 ریال58,772,400 ریال
    خرید
  • Kaspersky Small Office Security

    محافظت در حین کار Kaspersky Small Office Security به طور خاص برای سازمان‌هایی طراحی شده است که 5 تا 50 دستگاه کامپیوتر در خود جای داده‌اند. نصب آن بسیار آسان است؛ مدیریت آن ...

    146,286,000 ریال243,810,000 ریال
    خرید
  • Kaspersky Small Office Security

    امنیت ادارات کوچک

    234,049,860 ریال390,083,100 ریال
    خرید
  • Kaspersky Small Office Security

    امنیت ادارات کوچک

    175,535,460 ریال292,559,100 ریال
    خرید
  • Kaspersky Small Office Security

    281,186,460 ریال468,644,100 ریال
    خرید
  • Kaspersky Small Office Security

    204,792,660 ریال341,321,100 ریال
    خرید
  • Kaspersky Small Office Security

    327,510,360 ریال545,850,600 ریال
    خرید
  • Kaspersky Small Office Security

    234,049,860 ریال390,083,100 ریال
    خرید
  • Kaspersky Small Office Security

    374,646,960 ریال624,411,600 ریال
    خرید
  • Kaspersky Small Office Security

    263,307,060 ریال438,845,100 ریال
    خرید
  • Kaspersky Small Office Security

    420,970,860 ریال701,618,100 ریال
    خرید
  • Kaspersky Small Office Security

    268,183,260 ریال446,972,100 ریال
    خرید
  • Kaspersky Small Office Security

    429,097,860 ریال715,163,100 ریال
    خرید
  • Kaspersky Small Office Security

    377,897,760 ریال629,829,600 ریال
    خرید
  • Kaspersky Small Office Security

    604,641,060 ریال1,007,735,100 ریال
    خرید
  • Kaspersky Small Office Security

    487,612,260 ریال812,687,100 ریال
    خرید
  • Kaspersky Small Office Security

    780,184,260 ریال1,300,307,100 ریال
    خرید
  • Kaspersky Small Office Security

    589,199,760 ریال981,999,600 ریال
    خرید
  • Kaspersky Small Office Security

    942,724,260 ریال1,571,207,100 ریال
    خرید
  • Kaspersky Small Office Security

    1,117,454,760 ریال1,862,424,600 ریال
    خرید
  • Kaspersky Small Office Security

    1,787,932,260 ریال2,979,887,100 ریال
    خرید

نظر خودتان را ارسال کنید


کاربر گرامی چنانچه تمایل دارید، نقد یا نظر شما به نام خودتان در سایت ثبت شود، لطفاً وارد سایت شوید.
*نظر
کلیه حقوق مادی و معنوی این سایت محفوظ و متعلق به شرکت گسترش خدمات تجارت الکترونیک ایرانیان است و هر گونه کپی برداری از آن پیگرد قانونی دارد