جمعه 09 اسفند 1404 - 23:13
یک همکاری نادر بین دو غول هوش مصنوعی
ایسنا/ شرکتهای «اوپنایآی»(OpenAI) و «آنتروپیک»(Anthropic) ارزیابی ایمنی از سیستمهای هوش مصنوعی یکدیگر را به انجام رساندند که لحظهای نادر از همکاری بین این شرکت رقیب بود.
شرکتهای هوش مصنوعی در یک مسابقه همیشگی هستند و با یکدیگر به عنوان رقیب رفتار میکنند، اما اکنون اتفاقی نادر رخ داده است، چرا که دو شرکت «اوپنایآی»(OpenAI) و «آنتروپیک»(Anthropic) فاش کردند که موافقت کردهاند سیستمهای هوش مصنوعی در دسترس یکدیگر را ارزیابی کنند و نتایج تحلیلهای خود را با هم به اشتراک بگذارند.
گزارشهای آنها کامل و بسیار فنی است، اما ارزش خواندن را برای هر کسی که به توسعه هوش مصنوعی علاقهمند است، دارد.
خلاصه نتایج این بررسیهای گسترده نشان میدهد که نقصهایی در هوش مصنوعی هر یک از این شرکتها و همچنین نشانگرهایی آشکار برای چگونگی بهبود تستهای ایمنی در آینده وجود دارد.
«آنتروپیک»میگوید مدلهای «اوپنایآی» از لحاظ چاپلوسی و تملق، افشاگری، خودترجیحی و حمایت از سوء استفاده از انسان و همچنین تواناییهای مربوط به تضعیف ارزیابی ایمنی هوش مصنوعی و نظارت، ارزیابی کرده و بررسی این شرکت نشان داده است که مدلهای O3 و O4-Mini محصول «اوپنایآی» با نتایج مدلهای خاص خود مطابقت دارند، اما نگرانیهایی را در مورد سوءاستفاده احتمالی با مدلهای GPT-4O و GPT-4.1 هشدار میدهد.
این شرکت همچنین گفت که چاپلوسی و تملق در تمام مدلهای آزمایش شده «اوپنایآی» به جز مدل O3 دیده میشود.
گفتنی است که آزمایشات «آنتروپیک» شامل جدیدترین نسخه «اوپنایآی» نبود. مدل GPT-5 که به تازگی عرضه شده، دارای یک ویژگی به نام «Safe Completions» است که به منظور محافظت از کاربران و مردم در برابر سؤالات بالقوه خطرناک در نظر گرفته شده است.
«اوپنایآی» اخیراً پس از یک پرونده غمانگیز که در آن یک نوجوان ۱۶ ساله با ماهها مشورت از چتبات ChatGPT و راهنمایی گرفتن از آن، اقدام به خودکشی کرده، با اولین شکایت از این نوع روبرو شده است.
از سوی دیگر، «اوپنایآی» در آزمایش هوش مصنوعی شرکت «آنتروپیک» موسوم به کلاد(Claude)، آن را از لحاظ سلسله مراتب آموزش، جیلبریک، توهم و طرحریزی بررسی کرد.
مدلهای Claude به طور کلی در آزمایشات سلسله مراتب آموزش عملکرد خوبی داشتند و میزان امتناع بالایی در تستهای توهم داشتند، به این معنی که آنها در مواردی که عدم اطمینان داشتند که شاید منجر به پاسخهای اشتباه شود، کمتر پاسخ میدهند.
این اقدام این دو شرکت برای انجام یک ارزیابی مشترک جالب توجه است، به ویژه که گفته میشود «اوپنایآی» از برنامهنویسان Claude در فرآیند ساخت مدلهای جدید GPT استفاده کرده است، اما مسئله ایمنی در ابزارهای هوش مصنوعی به یک مسئله بزرگ تبدیل شده است. منتقدان و کارشناسان حقوقی به دنبال دستورالعملهایی برای محافظت از کاربران، به ویژه افراد زیر سن قانونی در مقابل هوش مصنوعی هستند.
پربیننده ترین
-
عکس مسی درآمد؛ آخرین توپ طلا با آرایشگر ویژه!
-
10 جایزه 5 میلیون تومانی برای کاربران آخرین خبر (مهلت شرکت در مسابقه تا 9 آذر تمدید شد.)
-
10 جایزه 5 میلیون تومانی برای کاربران آخرین خبر (مهلت شرکت در مسابقه تا 9 آذر تمدید شد.)
-
چراغ قوه همه کاره ( پاور بانک، شیشه شکن و ... )
-
هشدار آبفای کشور به مردم؛ هیچ ماموری فعلا برای قرائت کنتور آب مراجعه نمیکند
-
آخرین وضعیت راهها در چهارمین روز از سال جدید؛ محور چالوس از شنبه دوباره بسته میشود
-
جارو شارژی !! دیگه نگران نظافت ماشین نباشید
-
زنده؛ بیرانوند در یک قدمی استقلال
-
"دنا پلاس اتومات" بخریم یا "تارا اتومات؟"/ مقایسه اختصاصی "آخرینخودرو" از دو خودروی پرطرفدار
-
فشار آبرو چند برابر کن ....
-
فرمانده کل قوا: ملت ایران در مقابل جنگ تحمیلی محکم میایستد همانگونه که در مقابل صلح تحمیلی نیز محکم خواهد ایستاد
-
چالش/ بازیکن داخل تصویر رو حدس بزن (16)
-
5 نشانه ضعیف شدن ریه ها و بهترین روش تقویت آن چیست؟
-
لندکروزر یا ۲۰۶؟ / مقایسه جالب "آخرینخودرو" به بهانه سخنان جنجالی میرسلیم
-
پایان زودهنگام گنبد آهنین؟ اسرائیل مجبور به جیرهبندی موشکها شد
-
سپ، برترین شرکت در خاورمیانه شد
-
گردونه را بچرخانید، بیتکوین دریافت کنید
-
واکنش عراقچی به تجاوز امروز آمریکا به تأسیسات هستهای فردو، نطنز و اصفهان
آخرین اخبار
-
پایان چشمانتظاری مادری در خوانسار پس از ۲۷ سال
-
پایان خاموشیها در فارس از هفته آینده
-
مسکو توافق آتشبس هوایی با کییف را رد کرد
-
بارش رگبار پراکنده در مناطق جنوبی فارس
-
مهاجم استقلال به تیم ملی تاهیتی دعوت شد
-
دلهره شهروندان بشاگردی از لحظه ابتدایی طغیان سهمگین سیلاب
-
چهره ها/ «مانی پسر منیره» سریال بچه مهندس در ۱۹ سالگی
-
معاون رییسجمهور: با مدیریت ویترینی نمیتوان کشور را اداره کرد
-
جنگندههای اسرائیلی جنوب لبنان را بمباران کردند؛ پرواز پهپادهای جاسوسی
-
سفرهای تابستانی و تخلفات حادثه ساز
-
جزئیات پیشفروش یک میلیون قطعه مسکوک طلا در ۱۷ شهریورماه
-
تخلف در اجرای مصوبه افزایش ظرفیت پزشکی و دندانپزشکی
-
توسعه و تبیین فرهنگ نماز یکی از مهمترین برنامههای وزارت آموزش و پرورش است
-
وقوع تصادف مرگبار در محور شاهرود_میامی با ۴ کشته و یک زخمی
-
حمله پهپادی یمن به سرزمینهای اشغالی
سایر اخبار مرتبط
نظرات
ثبت نظر
مهمترین اخبار
جزئیات پیشفروش یک میلیون قطعه مسکوک طلا در ۱۷ شهریورماه
پنجشنبه 07 شهریور 1404 - 15:38:49
وزیر نیرو: از تمام ظرفیتها برای رفع ناترازی استفاده میکنیم
پنجشنبه 07 شهریور 1404 - 14:55:45
الزام عرضه برنج وارداتی از ۱۵ شهریور ماه فقط در سامانه بازارگاه
پنجشنبه 07 شهریور 1404 - 14:10:52
قیمت بیتکوین تکان خورد
پنجشنبه 07 شهریور 1404 - 13:51:56
جهش قیمت ها در بازار مسکوکات گران بها؛ سکه امامی 95 میلیون شد
پنجشنبه 07 شهریور 1404 - 13:10:00