شنبه 10 اسفند 1404 - 00:26
یک همکاری نادر بین دو غول هوش مصنوعی
ایسنا/ شرکتهای «اوپنایآی»(OpenAI) و «آنتروپیک»(Anthropic) ارزیابی ایمنی از سیستمهای هوش مصنوعی یکدیگر را به انجام رساندند که لحظهای نادر از همکاری بین این شرکت رقیب بود.
شرکتهای هوش مصنوعی در یک مسابقه همیشگی هستند و با یکدیگر به عنوان رقیب رفتار میکنند، اما اکنون اتفاقی نادر رخ داده است، چرا که دو شرکت «اوپنایآی»(OpenAI) و «آنتروپیک»(Anthropic) فاش کردند که موافقت کردهاند سیستمهای هوش مصنوعی در دسترس یکدیگر را ارزیابی کنند و نتایج تحلیلهای خود را با هم به اشتراک بگذارند.
گزارشهای آنها کامل و بسیار فنی است، اما ارزش خواندن را برای هر کسی که به توسعه هوش مصنوعی علاقهمند است، دارد.
خلاصه نتایج این بررسیهای گسترده نشان میدهد که نقصهایی در هوش مصنوعی هر یک از این شرکتها و همچنین نشانگرهایی آشکار برای چگونگی بهبود تستهای ایمنی در آینده وجود دارد.
«آنتروپیک»میگوید مدلهای «اوپنایآی» از لحاظ چاپلوسی و تملق، افشاگری، خودترجیحی و حمایت از سوء استفاده از انسان و همچنین تواناییهای مربوط به تضعیف ارزیابی ایمنی هوش مصنوعی و نظارت، ارزیابی کرده و بررسی این شرکت نشان داده است که مدلهای O3 و O4-Mini محصول «اوپنایآی» با نتایج مدلهای خاص خود مطابقت دارند، اما نگرانیهایی را در مورد سوءاستفاده احتمالی با مدلهای GPT-4O و GPT-4.1 هشدار میدهد.
این شرکت همچنین گفت که چاپلوسی و تملق در تمام مدلهای آزمایش شده «اوپنایآی» به جز مدل O3 دیده میشود.
گفتنی است که آزمایشات «آنتروپیک» شامل جدیدترین نسخه «اوپنایآی» نبود. مدل GPT-5 که به تازگی عرضه شده، دارای یک ویژگی به نام «Safe Completions» است که به منظور محافظت از کاربران و مردم در برابر سؤالات بالقوه خطرناک در نظر گرفته شده است.
«اوپنایآی» اخیراً پس از یک پرونده غمانگیز که در آن یک نوجوان ۱۶ ساله با ماهها مشورت از چتبات ChatGPT و راهنمایی گرفتن از آن، اقدام به خودکشی کرده، با اولین شکایت از این نوع روبرو شده است.
از سوی دیگر، «اوپنایآی» در آزمایش هوش مصنوعی شرکت «آنتروپیک» موسوم به کلاد(Claude)، آن را از لحاظ سلسله مراتب آموزش، جیلبریک، توهم و طرحریزی بررسی کرد.
مدلهای Claude به طور کلی در آزمایشات سلسله مراتب آموزش عملکرد خوبی داشتند و میزان امتناع بالایی در تستهای توهم داشتند، به این معنی که آنها در مواردی که عدم اطمینان داشتند که شاید منجر به پاسخهای اشتباه شود، کمتر پاسخ میدهند.
این اقدام این دو شرکت برای انجام یک ارزیابی مشترک جالب توجه است، به ویژه که گفته میشود «اوپنایآی» از برنامهنویسان Claude در فرآیند ساخت مدلهای جدید GPT استفاده کرده است، اما مسئله ایمنی در ابزارهای هوش مصنوعی به یک مسئله بزرگ تبدیل شده است. منتقدان و کارشناسان حقوقی به دنبال دستورالعملهایی برای محافظت از کاربران، به ویژه افراد زیر سن قانونی در مقابل هوش مصنوعی هستند.
پربیننده ترین
-
عکس مسی درآمد؛ آخرین توپ طلا با آرایشگر ویژه!
-
10 جایزه 5 میلیون تومانی برای کاربران آخرین خبر (مهلت شرکت در مسابقه تا 9 آذر تمدید شد.)
-
10 جایزه 5 میلیون تومانی برای کاربران آخرین خبر (مهلت شرکت در مسابقه تا 9 آذر تمدید شد.)
-
چراغ قوه همه کاره ( پاور بانک، شیشه شکن و ... )
-
هشدار آبفای کشور به مردم؛ هیچ ماموری فعلا برای قرائت کنتور آب مراجعه نمیکند
-
آخرین وضعیت راهها در چهارمین روز از سال جدید؛ محور چالوس از شنبه دوباره بسته میشود
-
جارو شارژی !! دیگه نگران نظافت ماشین نباشید
-
زنده؛ بیرانوند در یک قدمی استقلال
-
"دنا پلاس اتومات" بخریم یا "تارا اتومات؟"/ مقایسه اختصاصی "آخرینخودرو" از دو خودروی پرطرفدار
-
فشار آبرو چند برابر کن ....
-
فرمانده کل قوا: ملت ایران در مقابل جنگ تحمیلی محکم میایستد همانگونه که در مقابل صلح تحمیلی نیز محکم خواهد ایستاد
-
چالش/ بازیکن داخل تصویر رو حدس بزن (16)
-
5 نشانه ضعیف شدن ریه ها و بهترین روش تقویت آن چیست؟
-
لندکروزر یا ۲۰۶؟ / مقایسه جالب "آخرینخودرو" به بهانه سخنان جنجالی میرسلیم
-
پایان زودهنگام گنبد آهنین؟ اسرائیل مجبور به جیرهبندی موشکها شد
-
سپ، برترین شرکت در خاورمیانه شد
-
گردونه را بچرخانید، بیتکوین دریافت کنید
-
واکنش عراقچی به تجاوز امروز آمریکا به تأسیسات هستهای فردو، نطنز و اصفهان
آخرین اخبار
-
داستان بازرسان
-
دردسرهای یک زندگی معمولی
-
حریف های پات سوم لیگ قهرمانان اروپا
-
کرمان رتبه دوم اقتصاد دیجیتال است
-
رایزنیها برای بازگشایی مرز آستارا ادامه دارد
-
سخنگوی دولت پای صحبت فعالان اقتصادی نشست؛ شما خیلی انسانهای والایی هستید
-
مفیدترین غذاها در دوران بارداری
-
برنامههای جامع وزارت اقتصاد برای توسعه و رشد عدالت محور توسط وزیر شرح داده شد
-
صدور سند برای ۷۵ درصد زمین ها در استان های کشور
-
قرعه کشی لیگ قهرمانان اروپا؛ 36 تیم حریفان خود را شناختند
-
چاه نهم سکوی B فاز ۱۱ پارسجنوبی در آستانه بهرهبرداری
-
نماینده ورامین در مجلس: ورود بازرسان آژانس به ایران ممنوع است
-
سفیر ایران: درایت تصمیم گیران استرالیا، می توانست چراغ راهی در حفظ روابط با ایران باشد
-
زودرنجی می تواند برای فرد خطرناک باشد
-
پزشکیان: ایران علاقهمند به همکاری با چین در زمینه «کمربند و راه» است
سایر اخبار مرتبط
نظرات
ثبت نظر
مهمترین اخبار
سخنگوی دولت پای صحبت فعالان اقتصادی نشست؛ شما خیلی انسانهای والایی هستید
پنجشنبه 07 شهریور 1404 - 21:45:00
برنامههای جامع وزارت اقتصاد برای توسعه و رشد عدالت محور توسط وزیر شرح داده شد
پنجشنبه 07 شهریور 1404 - 21:30:00
چاه نهم سکوی B فاز ۱۱ پارسجنوبی در آستانه بهرهبرداری
پنجشنبه 07 شهریور 1404 - 21:00:00
سکه امامی 93 میلیون شد؛ دلار در مرز 99 هزار تومان آرام گرفت
پنجشنبه 07 شهریور 1404 - 20:24:00
اعلام نرخ گوشت در بازار داخلی
پنجشنبه 07 شهریور 1404 - 19:39:16