چهارشنبه 07 مرداد 1405 - 23:00
دادههایی که هوش مصنوعی را «مسموم» میکنند
ایسنا/اشتیاق بیوقفه و سیریناپذیر برای کسب دادههای بیشتر میتواند نقص مهلک هوش مصنوعی یا دستکم سریعترین راه برای نفوذ «سم» به آن باشد و مطالعهای جدید نشان میدهد که چگونه میتوان از چنین حملاتی جلوگیری کرد.
مهاجمان سایبری دوزهای کوچکی از «دادههای مسموم»، به شکل اطلاعات نادرست یا گمراهکننده را به مجموعههای آموزشی مهم هوش مصنوعی وارد میکنند و ماموریت آنها خرابکاری در مدلهایی است که زمانی قابل اعتماد بودند تا آنها را در جهتی کاملا متفاوت منحرف کنند.
به نقل از دیجیتالترندز، اکثر سیستمهای هوش مصنوعی که امروزه با آنها مواجه میشویم از چت جیپیتی گرفته تا توصیههای شخصیسازیشده نتفلیکس فقط به دلیل حجم گسترده متن، تصویر، گفتار و سایر دادههایی که بر اساس آنها آموزش دیدهاند، به اندازه کافی «هوشمند» هستند که چنین شاهکارهای چشمگیری را انجام دهند. اگر این گنجینه غنی آلوده شود، رفتار مدل میتواند دچار مشکل شود.
پیامدهای چنین اتفاقی در دنیای واقعی بسیار فراتر از یک چتبات است که بی هدف حرف میزند یا مولدهای متن به تصویری که وقتی از آنها خواسته میشود پرندهای را نشان دهند، تصویر یک هواپیما را تولید میکنند. گروههایی از افراد سودجو میتوانند به طور بالقوه باعث شوند که یک ماشین خودران چراغ قرمز را نادیده بگیرد، یا در مقیاس بسیار بزرگتر، باعث اختلال و قطعی شبکه برق شوند.
برای دفاع در برابر تهدید حملات مختلف مسمومیت دادهها، گروهی از محققان امنیت سایبری دو فناوری نوظهور یعنی یادگیری فدرال و بلاکچین را برای آموزش ایمنتر هوش مصنوعی ترکیب کردهاند. رویکرد نوآورانه این گروه با موفقیت، دادههای نادرست را قبل از اینکه بتوانند مجموعه دادههای آموزشی را به خطر بیندازند، شناسایی و حذف کرد.
هادی امینی، محقق ارشد و استادیار در دانشکده علوم محاسبات و اطلاعات بنیادی موسسه نایت، میگوید: ما روشی ایجاد کردهایم که میتواند کاربردهای زیادی برای تابآوری زیرساختهای حیاتی، امنیت سایبری حمل و نقل، مراقبتهای بهداشتی و موارد دیگر داشته باشد.
بخش اول این رویکرد جدید شامل یادگیری فدرال است. این روش منحصر به فرد برای آموزش هوش مصنوعی، از یک نسخه کوچک از یک مدل آموزشی استفاده میکند که مستقیما روی دستگاه شما آموزش میبیند و فقط بهروزرسانیها و نه دادههای شخصی کاربر را با مدل جهانی روی سرور یک شرکت به اشتراک میگذارد. این روش اگرچه که حریم خصوصی را حفظ میکند، اما همچنان در برابر حملات دادههای مسموم، آسیبپذیر است.
اروین مور (Ervin Moore)، کاندیدای دکترا در آزمایشگاه امینی و نویسنده اصلی این مطالعه، توضیح میدهد: تأیید اینکه آیا دادههای کاربر قبل از رسیدن به مدل، صحیح یا نادرست است، چالشی برای یادگیری فدرال است. بنابراین، ما برای کاهش این نقص به فکر بلاکچین افتادیم.
بلاکچین که به دلیل نقشش در ارزهای دیجیتال مانند بیتکوین محبوبیت پیدا کرده است، یک پایگاه داده مشترک است که در شبکهای از رایانهها توزیع شده است. دادهها در بلوکهایی که به ترتیب زمانی روی یک زنجیره به هم متصل شدهاند، ذخیره میشوند. هر کدام اثر انگشت خود و همچنین اثر انگشت بلوک قبلی را دارند که آن را عملا آن را ضد دستکاری میکند.
کل زنجیره از یک ساختار خاص پیروی میکند. این مانند یک فرآیند بررسی است تا اطمینان حاصل شود که بلوکهای تصادفی اضافه نمیشوند. میتوان آن را مانند یک چک لیست برای پذیرش داده در نظر گرفت.
محققان هنگام ساخت مدل خود از این قابلیت به نفع خود استفاده کردند. این مدل بهروزرسانیهای بلوک را مقایسه میکرد و محاسبه میکرد که آیا بهروزرسانیها به طور بالقوه سمی هستند یا خیر. بهروزرسانیهای بالقوه سمی ثبت شده و سپس از تجمیع شبکه حذف میشدند.
امینی، که همچنین رهبری تیم متخصصان امنیت سایبری و هوش مصنوعی دانشگاه فلوریدا را بر عهده دارد و در حال بررسی هوش مصنوعی امن برای سیستمهای حمل و نقل متصل و خودران است، میگوید: گروه ما اکنون با همکاری مرکز ملی امنیت سایبری و تابآوری حمل و نقل همکاری نزدیکی دارد تا از رمزگذاری کوانتومی پیشرفته برای محافظت از دادهها و سیستمها استفاده کند. هدف ما تضمین ایمنی و امنیت زیرساختهای حمل و نقل و در عین حال استفاده از قدرت هوش مصنوعی پیشرفته برای بهبود سیستمهای حمل و نقل است.
پربیننده ترین
-
عکس مسی درآمد؛ آخرین توپ طلا با آرایشگر ویژه!
-
10 جایزه 5 میلیون تومانی برای کاربران آخرین خبر (مهلت شرکت در مسابقه تا 9 آذر تمدید شد.)
-
10 جایزه 5 میلیون تومانی برای کاربران آخرین خبر (مهلت شرکت در مسابقه تا 9 آذر تمدید شد.)
-
چراغ قوه همه کاره ( پاور بانک، شیشه شکن و ... )
-
هشدار آبفای کشور به مردم؛ هیچ ماموری فعلا برای قرائت کنتور آب مراجعه نمیکند
-
آخرین وضعیت راهها در چهارمین روز از سال جدید؛ محور چالوس از شنبه دوباره بسته میشود
-
جارو شارژی !! دیگه نگران نظافت ماشین نباشید
-
زنده؛ بیرانوند در یک قدمی استقلال
-
"دنا پلاس اتومات" بخریم یا "تارا اتومات؟"/ مقایسه اختصاصی "آخرینخودرو" از دو خودروی پرطرفدار
-
فشار آبرو چند برابر کن ....
-
فرمانده کل قوا: ملت ایران در مقابل جنگ تحمیلی محکم میایستد همانگونه که در مقابل صلح تحمیلی نیز محکم خواهد ایستاد
-
چالش/ بازیکن داخل تصویر رو حدس بزن (16)
-
5 نشانه ضعیف شدن ریه ها و بهترین روش تقویت آن چیست؟
-
لندکروزر یا ۲۰۶؟ / مقایسه جالب "آخرینخودرو" به بهانه سخنان جنجالی میرسلیم
-
پایان زودهنگام گنبد آهنین؟ اسرائیل مجبور به جیرهبندی موشکها شد
-
سپ، برترین شرکت در خاورمیانه شد
-
گردونه را بچرخانید، بیتکوین دریافت کنید
-
واکنش عراقچی به تجاوز امروز آمریکا به تأسیسات هستهای فردو، نطنز و اصفهان
آخرین اخبار
-
خسارت به موزه باستانشناسی درهشهر در حملات دشمن
-
اعلام همبستگی کشتی آسیا؛ ایران همواره یکی از ارکان کشتی جهان است
-
نیویورک تایمز: ناو جرالد فورد ۳۰ ساعت در آتش میسوخت
-
توزیع میوه شب عید در ایلام تا ۱۵ فروردین ادامه دارد
-
چالش عجیب یونایتد برای فروش برونو به عربستان
-
منابع و جزئیات آزمون دکتری ۱۴۰۶ اعلام شد
-
توصیههای آتشنشانی برای برگزاری چهارشنبهسوری متفاوت در شرایط جنگی
-
واکاوی سناریوهای ادامه لیگ برتر در پرسپولیس
-
خشم کشورهای عربی منطقه از دولت ترامپ
-
معاون وزیر نیرو: قطعی طولانیمدت برق نداریم
-
عارف: در صورت تکرار «فروغ جاویدان»، «مرصاد ۲» را تکرار میکنیم
-
وداع مردم شیراز با پیکر مطهر 5 شهید مدافع میهن
-
عکس/ آثار تجاوز به مناطق مسکونی تهران
-
نجات ۱۵ نفر از کارمندان و مشتریان یک بانک و منازل مسکونی از زیر آوار
-
بهادری جهرمی: استیصال دشمنان نشان از این دارد که کدام طرف نزدیک پیروزی است
سایر اخبار مرتبط
نظرات
ثبت نظر
مهمترین اخبار
معاون وزیر نیرو: قطعی طولانیمدت برق نداریم
سهشنبه 27 اسفند 1404 - 12:49:00
نجات ۱۵ نفر از کارمندان و مشتریان یک بانک و منازل مسکونی از زیر آوار
سهشنبه 27 اسفند 1404 - 12:08:40
مجوزهای کسب و کار به مدت سه ماه تمدید شد
سهشنبه 27 اسفند 1404 - 12:04:50
اطلاعیه درگاه ملی مجوزها درخصوص اختلال در فرآیند صدور مجوزها
سهشنبه 27 اسفند 1404 - 11:42:37
تسهیلات ویژه گمرکی برای ترخیص شبانهروزی دارو و تجهیزات پزشکی
سهشنبه 27 اسفند 1404 - 11:31:21