سهشنبه 06 مرداد 1405 - 05:56
یک همکاری نادر بین دو غول هوش مصنوعی
ایسنا/ شرکتهای «اوپنایآی»(OpenAI) و «آنتروپیک»(Anthropic) ارزیابی ایمنی از سیستمهای هوش مصنوعی یکدیگر را به انجام رساندند که لحظهای نادر از همکاری بین این شرکت رقیب بود.
شرکتهای هوش مصنوعی در یک مسابقه همیشگی هستند و با یکدیگر به عنوان رقیب رفتار میکنند، اما اکنون اتفاقی نادر رخ داده است، چرا که دو شرکت «اوپنایآی»(OpenAI) و «آنتروپیک»(Anthropic) فاش کردند که موافقت کردهاند سیستمهای هوش مصنوعی در دسترس یکدیگر را ارزیابی کنند و نتایج تحلیلهای خود را با هم به اشتراک بگذارند.
گزارشهای آنها کامل و بسیار فنی است، اما ارزش خواندن را برای هر کسی که به توسعه هوش مصنوعی علاقهمند است، دارد.
خلاصه نتایج این بررسیهای گسترده نشان میدهد که نقصهایی در هوش مصنوعی هر یک از این شرکتها و همچنین نشانگرهایی آشکار برای چگونگی بهبود تستهای ایمنی در آینده وجود دارد.
«آنتروپیک»میگوید مدلهای «اوپنایآی» از لحاظ چاپلوسی و تملق، افشاگری، خودترجیحی و حمایت از سوء استفاده از انسان و همچنین تواناییهای مربوط به تضعیف ارزیابی ایمنی هوش مصنوعی و نظارت، ارزیابی کرده و بررسی این شرکت نشان داده است که مدلهای O3 و O4-Mini محصول «اوپنایآی» با نتایج مدلهای خاص خود مطابقت دارند، اما نگرانیهایی را در مورد سوءاستفاده احتمالی با مدلهای GPT-4O و GPT-4.1 هشدار میدهد.
این شرکت همچنین گفت که چاپلوسی و تملق در تمام مدلهای آزمایش شده «اوپنایآی» به جز مدل O3 دیده میشود.
گفتنی است که آزمایشات «آنتروپیک» شامل جدیدترین نسخه «اوپنایآی» نبود. مدل GPT-5 که به تازگی عرضه شده، دارای یک ویژگی به نام «Safe Completions» است که به منظور محافظت از کاربران و مردم در برابر سؤالات بالقوه خطرناک در نظر گرفته شده است.
«اوپنایآی» اخیراً پس از یک پرونده غمانگیز که در آن یک نوجوان ۱۶ ساله با ماهها مشورت از چتبات ChatGPT و راهنمایی گرفتن از آن، اقدام به خودکشی کرده، با اولین شکایت از این نوع روبرو شده است.
از سوی دیگر، «اوپنایآی» در آزمایش هوش مصنوعی شرکت «آنتروپیک» موسوم به کلاد(Claude)، آن را از لحاظ سلسله مراتب آموزش، جیلبریک، توهم و طرحریزی بررسی کرد.
مدلهای Claude به طور کلی در آزمایشات سلسله مراتب آموزش عملکرد خوبی داشتند و میزان امتناع بالایی در تستهای توهم داشتند، به این معنی که آنها در مواردی که عدم اطمینان داشتند که شاید منجر به پاسخهای اشتباه شود، کمتر پاسخ میدهند.
این اقدام این دو شرکت برای انجام یک ارزیابی مشترک جالب توجه است، به ویژه که گفته میشود «اوپنایآی» از برنامهنویسان Claude در فرآیند ساخت مدلهای جدید GPT استفاده کرده است، اما مسئله ایمنی در ابزارهای هوش مصنوعی به یک مسئله بزرگ تبدیل شده است. منتقدان و کارشناسان حقوقی به دنبال دستورالعملهایی برای محافظت از کاربران، به ویژه افراد زیر سن قانونی در مقابل هوش مصنوعی هستند.
پربیننده ترین
-
عکس مسی درآمد؛ آخرین توپ طلا با آرایشگر ویژه!
-
10 جایزه 5 میلیون تومانی برای کاربران آخرین خبر (مهلت شرکت در مسابقه تا 9 آذر تمدید شد.)
-
10 جایزه 5 میلیون تومانی برای کاربران آخرین خبر (مهلت شرکت در مسابقه تا 9 آذر تمدید شد.)
-
چراغ قوه همه کاره ( پاور بانک، شیشه شکن و ... )
-
هشدار آبفای کشور به مردم؛ هیچ ماموری فعلا برای قرائت کنتور آب مراجعه نمیکند
-
آخرین وضعیت راهها در چهارمین روز از سال جدید؛ محور چالوس از شنبه دوباره بسته میشود
-
جارو شارژی !! دیگه نگران نظافت ماشین نباشید
-
زنده؛ بیرانوند در یک قدمی استقلال
-
"دنا پلاس اتومات" بخریم یا "تارا اتومات؟"/ مقایسه اختصاصی "آخرینخودرو" از دو خودروی پرطرفدار
-
فشار آبرو چند برابر کن ....
-
فرمانده کل قوا: ملت ایران در مقابل جنگ تحمیلی محکم میایستد همانگونه که در مقابل صلح تحمیلی نیز محکم خواهد ایستاد
-
چالش/ بازیکن داخل تصویر رو حدس بزن (16)
-
5 نشانه ضعیف شدن ریه ها و بهترین روش تقویت آن چیست؟
-
لندکروزر یا ۲۰۶؟ / مقایسه جالب "آخرینخودرو" به بهانه سخنان جنجالی میرسلیم
-
پایان زودهنگام گنبد آهنین؟ اسرائیل مجبور به جیرهبندی موشکها شد
-
سپ، برترین شرکت در خاورمیانه شد
-
گردونه را بچرخانید، بیتکوین دریافت کنید
-
واکنش عراقچی به تجاوز امروز آمریکا به تأسیسات هستهای فردو، نطنز و اصفهان
آخرین اخبار
-
حضور گسترده اساتید و دانشجویان دانشگاه شریف در حمایت از انقلاب و ایران
-
شهادت فرمانده گروه ۱۵خرداد و چهار یار او در اصفهان
-
معاون استاندار: در حمله عصر امروز دشمنان به قم ۶ نفر شهید شدند
-
انحراف خودروی سواری در بابل چهار مصدوم داشت
-
سپاه: شهادت بیش از 700 نفر از هموطنان به دست آمریکا و اسرائیل در چهار روز اخیر
-
فیلم/ فریاد انتقام سخت نکاییها در عزای رهبر شهید انقلاب
-
فیلم/ جمعی از شیرازیها زیر باران
-
قالیباف: تا آخرین نفس منتقم خون فرزندان بیگناه و مظلوم ایرانیم
-
عکس/ تشییع پیکر شهید پاسدار سرهنگ «محمد مهدی باقری» در سوادکوه
-
فیلمی از جنایت آمریکا در میدان آزادی تهران
-
عمان خواستار آتشبس بین ایران و آمریکا شد
-
پاسخ ترامپ به خبرنگار آمریکایی: آیا اسرائیل و نتانیاهو شما را مجبور کردند که به ایران حمله کنید؟
-
تجریش امشب؛ مردم پای کار ایران
-
سپاه: پهپاد هرمس 900 رژیم صهیونیستی سالم و کاملا مسلح شکار شد
-
مقاومت ایران غرور ترامپ را محو کرد
سایر اخبار مرتبط
نظرات
ثبت نظر
مهمترین اخبار
رشد 90 درصدی قیمت گاز در انگلستان
سهشنبه 13 اسفند 1404 - 21:00:00
تأمین فوری 180 هزار تن ذرت و جو برای دامداران
سهشنبه 13 اسفند 1404 - 20:31:00
تولید شیرخشک بی وقفه ادامه دارد؛ مردم نگران نباشند
سهشنبه 13 اسفند 1404 - 19:50:00
افزایش قیمت نفت به مرز 85 دلار
سهشنبه 13 اسفند 1404 - 19:18:15
سخنگوی دولت: ذخایر کالاهای اساسی برای رمضان و نوروز پایدار است
سهشنبه 13 اسفند 1404 - 18:34:52