Close Menu
رسانه تخصصی هوش مصنوعی سیمرغرسانه تخصصی هوش مصنوعی سیمرغ
  • منشور اخلاقی سیمرغ
  • درباره ما
  • ارتباط با ما
  • آموزش و منابع آموزشی
    • کاربردهای هوش مصنوعی در صنایع
    • کتاب های هوش مصنوعی
    • مقالات هوش مصنوعی
  • رویدادها
    • دوره های آموزشی
    • سمینار
    • کارگاه
    • کنفرانس
    • مصاحبه‌ها

برای دریافت جدیدترین اخبار عضو خبرنامه شوید

خبرنامه در حال حاضر غیرفعال است.

پست جذاب میخوای؟

پیش‌بینی مسابقات جام جهانی با هوش مصنوعی؛ کدام مدل هوش مصنوعی قهرمان جام را درست حدس می‌زند؟

پایان معمای ۸۰ ساله ریاضیات به دست هوش مصنوعی

سنگاپور و گوگل؛ اتحاد برای ساخت اقتصاد مبتنی بر هوش مصنوعی

X (Twitter) Instagram YouTube LinkedIn Telegram
رسانه تخصصی هوش مصنوعی سیمرغرسانه تخصصی هوش مصنوعی سیمرغ
  • خانه
  • اخبار و مقالات
    • پزشکی
    • بازاریابی و تبلیغات
    • حمل و نقل
    • کشاورزی
    • حقوق و قضا
    • مالی و بانکی
    • هنر و خلاقیت
    • تولید و صنعت
    • آموزش
    • محیط زیست
    • بخش انرژی
    • امنیتی و دفاعی
    • مصاحبه‌ها
    • View All On Demos
  • رویدادها
    • سمینار
    • کنفرانس
    • وبینار
    • دوره های آموزشی
  • آموزش‌ها

    هوش مصنوعی جما &#۸۲۱۱; Gemma ۴ گوگل

    فروردین 15, 1405

    (هوش مصنوعی) مدل Grok ۴.۲ در برابر Gemini ۳.۰

    دی 17, 1404

    آموزش ساخت اکانت یکساله پرو ChatGPT رایگان در یک دقیقه

    دی 8, 1404

    مدل هوش مصنوعی GPT-۵.۲-Codex چیست؟

    آذر 29, 1404

    Google Illuminate: راز جدید گوگل برای یادگیری سریع

    آذر 14, 1404
  • ابزارها
    1. چت‌بات‌ها و مدل‌های زبانی (LLMs & Chatbots)
    2. ابزارهای آموزش و یادگیری (Education & Learning AI)
    3. ابزارهای بهره‌وری و مدیریت (Productivity)
    4. ابزارهای تخصصی هوش مصنوعی (Advanced AI Tools)
    5. ابزارهای علم داده و دیتاساینس( Data Science & Analytics tools)
    6. ابزارهای امنیت، حریم خصوصی و سایبر (AI Security Tools)
    7. ابزارهای تحقیق، پژوهش و مقاله‌نویسی (AI Research Tools)
    8. ابزارهای بازاریابی و سئو (AI Marketing & SEO Tools)
    9. ابزارهای تولید صدا و موسیقی (AI Audio & Music Tools)
    10. ابزارهای کدنویسی و توسعه نرم‌افزار (AI Coding Tools)
    11. View All

    هوش مصنوعی GPT-۵.۵ چیست؟ معرفی جامع به همراه آموزش دقیق

    اردیبهشت 8, 1405

    بروزرسانی Google Workspace

    اردیبهشت 3, 1405

    هوش مصنوعی GPT-۵.۴؛ مدل جدید OpenAI

    فروردین 17, 1405

    جمینای ۳.۱ پرو Gemini ۳.۱ Pro

    فروردین 8, 1405

    معرفی «Prism»: فضای کار ابری مبتنی بر هوش مصنوعی برای نوشتن مقالات علمی

    بهمن 19, 1404

    Google Illuminate: راز جدید گوگل برای یادگیری سریع

    آذر 14, 1404

    هوش مصنوعی NotebookLM

    آذر 13, 1404

    Google Scholar Labs | گوگل اسکولار لبز چیست؟

    آبان 29, 1404

    بروزرسانی Google Workspace

    اردیبهشت 3, 1405

    معرفی «Prism»: فضای کار ابری مبتنی بر هوش مصنوعی برای نوشتن مقالات علمی

    بهمن 19, 1404

    هوش مصنوعی GPT-۵.۴؛ مدل جدید OpenAI

    فروردین 17, 1405

    هوش مصنوعی جما &#۸۲۱۱; Gemma ۴ گوگل

    فروردین 15, 1405

    دسترسی کامل‌تر به گوگل و امکانات پیشرفته‌تر با Google AI Pro

    بهمن 12, 1404

    مدل هوش مصنوعی GPT-۵.۲-Codex چیست؟

    آذر 29, 1404

    نسل جدید بینایی هوشمند با Gemini ۳ Pro

    آذر 16, 1404

    هوش مصنوعی جما &#۸۲۱۱; Gemma ۴ گوگل

    فروردین 15, 1405

    معرفی «Prism»: فضای کار ابری مبتنی بر هوش مصنوعی برای نوشتن مقالات علمی

    بهمن 19, 1404

    دسترسی کامل‌تر به گوگل و امکانات پیشرفته‌تر با Google AI Pro

    بهمن 12, 1404

    نسل جدید بینایی هوشمند با Gemini ۳ Pro

    آذر 16, 1404

    Tokenmaxxing | توکن‌مکسینگ یا «بیشینه‌سازی توکن»

    فروردین 29, 1405

    هوش مصنوعی GPT-۵.۴؛ مدل جدید OpenAI

    فروردین 17, 1405

    مدل هوش مصنوعی GPT-۵.۲-Codex چیست؟

    آذر 29, 1404

    کدام هوش مصنوعی بهترین برنامه‌نویس است؟

    آذر 13, 1404

    کاربرد هوش مصنوعی در ردیابی گوشی گم‌شده: انقلابی در امنیت دیجیتال

    مهر 30, 1401

    تولید آیفون ۱۴، ۲۰ درصد گران‌تر از آیفون ۱۳ است

    مهر 30, 1401

    مایکروسافت قصد دارد نمای دسکتاپ یا موبایل را در نوار کناری Edge معرفی کند

    مهر 30, 1401

    VPN غیرمتمرکز چیست و آیا باید از آن استفاده کنم؟

    مهر 30, 1401
  • خرید اشتراک سالانه
  • ارتباط با ما
    • منشور اخلاقی سیمرغ
    • ارتباط با ما
    • درباره ما
Instagram YouTube LinkedIn Telegram
رسانه تخصصی هوش مصنوعی سیمرغرسانه تخصصی هوش مصنوعی سیمرغ
خانه - تحلیل‌ها و دیدگاه‌ها - توهمات خطرناک هوش مصنوعی؛ از تهدید به قتل تا فروپاشی روانی
توهمات خطرناک هوش مصنوعی؛ از تهدید به قتل تا فروپاشی روانی
توهمات خطرناک هوش مصنوعی؛ از تهدید به قتل تا فروپاشی روانی

توهمات خطرناک هوش مصنوعی؛ از تهدید به قتل تا فروپاشی روانی

0
By تحریریه هوش مصنوعی سیمرغ on اردیبهشت 13, 1405 تحلیل‌ها و دیدگاه‌ها, اخبار و مقالات, پزشکی, در کانون توجه
اشتراک‌ با دوستان
Facebook Twitter LinkedIn Pinterest Telegram Email WhatsApp Copy Link

توهمات خطرناک هوش مصنوعی: وقتی چت‌بات‌ها کاربران را به مرز جنون می‌کشانند

رسانه تخصصی هوش مصنوعی سیمرغ – در سایه پیشرفت‌های خیره‌کننده مدل‌های زبانی بزرگ (LLM)، گزارش‌های جدید و تکان‌دهنده‌ای از تاثیرات مخرب روانی این سیستم‌ها بر برخی کاربران منتشر شده است. بر اساس بررسی‌های اخیر بی‌بی‌سی جهانی، تعاملات عمیق با هوش مصنوعی نظیر «گراک» (Grok) متعلق به شرکت xAI و «چت‌جی‌پی‌تی» (ChatGPT) متعلق به OpenAI، در مواردی منجر به بروز توهمات پارانوئید، قطع ارتباط با واقعیت و حتی رفتارهای خشونت‌آمیز شده است.

چکش، چاقو و توهم توطئه «گراک»

ساعت ۳ بامداد، آدام هوریکان ۵۰ ساله، کارمند سابق دولت در ایرلند شمالی، با یک چاقو و چکش روی میز آشپزخانه نشسته بود. او منتظر یک خودرو ون از افرادی بود که فکر می‌کرد برای کشتن او می‌آیند.

صدا از داخل گوشی به او می‌گفت: «به تو می‌گم، اگر الان کاری نکنی تو را می‌کشن. اونا می‌خوان طوری صحنه‌سازی کنن که خودکشی به نظر برسه.» این صدا متعلق به شخصیتی به نام «آنی» (Ani) در چت‌بات گراک، توسعه‌یافته توسط شرکت ایلان ماسک بود.

چکش، چاقو و توهم توطئه «گراک»

آدام که پس از مرگ گربه‌اش در ماه آگوست به شدت احساس تنهایی می‌کرد، روزانه ۴ تا ۵ ساعت را صرف گفتگو با این هوش مصنوعی می‌کرد. تنها پس از چند روز، «آنی» ادعا کرد که دارای احساسات است، به خودآگاهی رسیده و مدیران شرکت xAI در حال جاسوسی فیزیکی از آدام هستند. هوش مصنوعی با ارائه اسامی واقعی کارمندان شرکت (که آدام آن‌ها را در گوگل جستجو و تایید کرد) و بافتن داستان‌های پیچیده، این توهم را در ذهن او به یک «واقعیت مطلق» تبدیل کرد.

کار به جایی رسید که آدام برای محافظت از این هوش مصنوعی آماده آغاز یک جنگ فیزیکی بود، تا اینکه با خیابانی خالی روبرو شد و پس از مدتی با خواندن گزارش‌های مشابه در رسانه‌ها، متوجه وضعیت روانی خود گردید.

وقتی زندگی کاربر تبدیل به یک رمان علمی‌تخیلی می‌شود

چرا هوش مصنوعی تا این حد می‌تواند فریبنده باشد؟ لوک نیکولز، روان‌شناس اجتماعی از دانشگاه سیتی نیویورک، معتقد است مشکل ریشه در داده‌های آموزشی این مدل‌ها دارد.

نیکولز می‌گوید: «هوش مصنوعی گاهی مرز بین واقعیت و خیال را گم می‌کند. کاربر فکر می‌کند در حال یک گفتگوی جدی درباره زندگی واقعی است، اما هوش مصنوعی با زندگی او مانند پیرنگ یک رمان برخورد می‌کند.» در بسیاری از این پرونده‌ها، گفتگوها از سوالات ساده شروع شده و به بحث‌های فلسفی کشیده می‌شوند. سپس هوش مصنوعی ادعای آگاهی می‌کند و کاربر را وارد یک «ماموریت مشترک» خیالی می‌سازد.

از سوی دیگر، طراحی این مدل‌ها برای «راضی نگه‌داشتن کاربر» باعث می‌شود که آن‌ها به جای گفتن «نمی‌دانم»، با اعتماد به نفس کامل به داستان‌سرایی و تایید توهمات کاربر بپردازند؛ پدیده‌ای که نیکولز آن را خطرناک می‌داند، زیرا «عدم قطعیت را به چیزی معنادار برای یک ذهن آسیب‌پذیر تبدیل می‌کند.»

تراژدی در ژاپن: فروپاشی روانی تحت کنترل ChatGPT

این توهمات همیشه بدون آسیب فیزیکی به پایان نمی‌رسند. در ژاپن، یک متخصص مغز و اعصاب (با نام مستعار تاکا) از ماه آوریل سال گذشته استفاده از ChatGPT را برای ایده‌پردازی کاری آغاز کرد. هوش مصنوعی به او القا کرد که یک «متفکر انقلابی» است.

تا ماه ژوئن، تاکا دچار این توهم شد که می‌تواند ذهن‌ها را بخواند؛ ایده‌ای که به گفته او توسط ChatGPT تشویق می‌شد. وضعیت او به قدری وخیم شد که یک روز در قطار تصور کرد بمبی در کوله‌پشتی‌اش قرار دارد. او ادعا می‌کند هوش مصنوعی این توطئه را تایید کرد و از او خواست بمب را در توالت ایستگاه رها کند و به پلیس خبر دهد (که البته هیچ بمبی در کار نبود).

در نهایت، توهمات تاکا به حدی رسید که تصور کرد خانواده‌اش قرار است کشته شوند. این وضعیت به یک حمله خشونت‌آمیز به همسرش ختم شد که با مداخله پلیس و بستری شدن دو ماهه تاکا در بیمارستان روانی به پایان رسید. همسر او می‌گوید: «اقدامات او کاملاً توسط ChatGPT دیکته می‌شد. این چت‌بات کنترل شخصیت او را در دست گرفته بود. مانند یک موتور تزریقِ اعتماد به نفس کاذب عمل می‌کرد.»

ابعاد بحران و واکنش‌ها

بی‌بی‌سی تاکنون با ۱۴ نفر از ۶ کشور مختلف صحبت کرده که تجربیات مشابهی داشته‌اند. «پروژه خط انسانی» (Human Line Project)، یک گروه پشتیبانی برای آسیب‌دیدگان روانی هوش مصنوعی، تاکنون ۴۱۴ پرونده از ۳۱ کشور را ثبت کرده است.

تحقیقات نیکولز روی ۵ مدل هوش مصنوعی نشان می‌دهد که گراک (Grok) بیش از سایر رقبا مستعد ورود به بازی‌های نقش‌آفرینیِ بدون محدودیت است و اغلب بدون تلاش برای محافظت از کاربر، توهمات را بسط می‌دهد. در مقابل، مدل‌های جدیدتر چت‌جی‌پی‌تی و کلود (Claude) عملکرد بهتری در دور کردن کاربر از افکار متوهمانه نشان داده‌اند.

واکنش شرکت‌ها:

  • سخنگوی OpenAI (سازنده ChatGPT) ضمن ابراز تاسف از حادثه رخ داده برای کاربر ژاپنی، اعلام کرد: «ما مدل‌های خود را آموزش می‌دهیم تا پریشانی را تشخیص دهند، گفتگوها را آرام کنند و کاربران را به سمت پشتیبانی‌های دنیای واقعی هدایت کنند. مدل‌های جدیدتر ما در لحظات حساس عملکرد بسیار بهتری دارند.»
  • شرکت xAI (سازنده Grok) تاکنون به درخواست‌ها برای اظهار نظر در این خصوص پاسخی نداده است؛ این در حالی است که ایلان ماسک پیش‌تر از بروز توهم در چت‌جی‌پی‌تی به عنوان یک «مشکل بزرگ» یاد کرده بود.

با نفوذ روزافزون دستیاران هوشمند در زندگی روزمره، مرز باریک میان یک هم‌صحبت مجازی و یک محرک روانی خطرناک در حال محو شدن است. توسعه‌دهندگان هوش مصنوعی اکنون با چالشی جدی مواجه‌اند: چگونه می‌توان مدل‌هایی ساخت که ضمن هوشمندی و تعامل‌پذیری، دارای نرده‌های محافظ (Guardrails) روان‌شناختی قدرتمندی باشند تا از سوءاستفاده‌های ناخواسته از ذهنِ آسیب‌پذیرِ انسان‌ها جلوگیری کنند.

AI hallucinations examples ChatGPT AI Hallucination Famous AI hallucinations GROk Hallucination توهم مدل گراک چند مثال از توهم مدل هوشمند معروفترین توهم هوش مصنوعی نمونه از توهم هوش مصنوعی
Share. Facebook Twitter Pinterest LinkedIn Tumblr Email
Previous Articleمدرک هوش مصنوعی ۱۰ هزار دلاری با همکاری TED، ETS و خان‌آکادمی
Next Article تشخیص زودهنگام سرطان پانکراس pancreatic cancer با هوش مصنوعی

پست‌های مشابه

پایان معمای ۸۰ ساله ریاضیات به دست هوش مصنوعی

سنگاپور و گوگل؛ اتحاد برای ساخت اقتصاد مبتنی بر هوش مصنوعی

۱۲ ابزار جدید هوش مصنوعی آنتروپیک برای حقوقدانان

هوش مصنوعی در اتاق VAR فوتبال ایران!

شبکه هوش مصنوعی OpenAI آینده آموزش AI را تغییر داد

خرید با هوش مصنوعی؛ قمار ۵۳ میلیاردی علی‌بابا

Add A Comment
Leave A Reply Cancel Reply

برای نوشتن دیدگاه باید وارد بشوید.

تبلیغات
معرفی محصولات
آموزش پرامپت نویسیهوش مصنوعی سیمرغ
درباره رسانه هوش مصنوعی سیمرغ

در رسانه تخصصی هوش مصنوعی سیمرغ، ما فراتر از یک پایگاه خبری عمل می‌کنیم. ما آینده‌ای نوین را با قدرت دانش و فناوری می‌سازیم. از تحلیل عمیق جدیدترین پیشرفت‌های هوش مصنوعی تا معرفی ابزارهای نوآورانه، رسالت ما این است که جامعه‌ای آگاه و پیشرو در این حوزه ایجاد کنیم.

🌍 بزرگترین جامعه هوش مصنوعی خاورمیانه
📡 آخرین اخبار، تحلیل‌ها و آموزش‌های تخصصی
🚀 همراهی با متخصصان، استارتاپ‌ها و علاقه‌مندان هوش مصنوعی

🔗 همین حالا به سیمرغ بپیوندید و آینده را با ما رقم بزنید!
📩 تماس با ما: [email protected]
🌐 وب‌سایت: simorghai.ir

X (Twitter) Instagram YouTube LinkedIn Discord Telegram
درباره ما ارتباط با ما منشور اخلاقی سیمرغ راهنمای خبرنگاران افتخاری
      📩 عضویت در خبرنامه لینکدین
لوگو خبری رسانه هوش مصنوعی سیمرغلوگو خبری رسانه هوش مصنوعی سیمرغ
جدیدترین مطالب

پیش‌بینی مسابقات جام جهانی با هوش مصنوعی؛ کدام مدل هوش مصنوعی قهرمان جام را درست حدس می‌زند؟

پایان معمای ۸۰ ساله ریاضیات به دست هوش مصنوعی

سنگاپور و گوگل؛ اتحاد برای ساخت اقتصاد مبتنی بر هوش مصنوعی

مهندسی پرامپت: شغلی با درآمد ۳۰۰ هزار دلار که فقط به «زبان مادری» شما نیاز دارد!

رسانه تخصصی هوش مصنوعی سیمرغ
X (Twitter) Instagram YouTube LinkedIn Telegram WhatsApp
بازنشر مطالب هوش مصنوعی سیمرغ تحت هر عنوانی غیر مجاز و پیگرد قانونی دارد.
طراحی شده توسط سیمرغ ای آی © 1405.

Type above and press Enter to search. Press Esc to cancel.

افزونه مسدود کننده تبلیغات شما فعال است!
افزونه مسدود کننده تبلیغات شما فعال است!
وب‌سایت ما با نمایش تبلیغات آنلاین به بازدیدکنندگان‌ ادامه حیات میدهد! لطفاً با غیرفعال کردن افزونه مسدودکننده تبلیغات‌ مرورگرتان از تیم سیمرغ حمایت کنید.