جایزه لوبنر مسابقه‌ای سالانه در زمینه هوش مصنوعی بود که به برنامه‌های رایانه‌ای که از نظر داوران شبیه‌ترین برنامه‌های رایانه‌ای هستند، جوایزی اهدا می‌کرد . فرمت مسابقه آزمون تورینگ استاندارد بود . در هر دور، یک قاضی انسانی به طور همزمان با یک برنامه کامپیوتری و یک انسان از طریق کامپیوتر مکالمات متنی انجام می داد. بر اساس پاسخ ها، قاضی تلاش می کند تا مشخص کند کدام کدام است.
این مسابقه در سال 1990 توسط هیو لوبنر در ارتباط با مرکز مطالعات رفتاری کمبریج در ماساچوست ایالات متحده راه اندازی شد . از سال 2014 [1] توسط AISB در بلچلی پارک سازماندهی شد . [2] همچنین با دانشگاه فلیندرز ، کالج دارتموث ، موزه علوم در لندن ، دانشگاه ریدینگ و دانشگاه اولستر ، پردیس مگی ، دری ، شهر فرهنگی بریتانیا مرتبط بوده است . در سال 2004 و 2005، در آپارتمان Loebner در شهر نیویورک برگزار شد . در زمینه هوش مصنوعی، جایزه لوبنر تا حدودی بحث برانگیز است. برجسته ترین منتقد، ماروین مینسکی ، آن را یک شیرین کاری تبلیغاتی نامید که کمکی به این حوزه نمی کند. [3]
برای مسابقه نهایی 2019، قالب تغییر کرد. هیچ هیئت داوری وجود نداشت. در عوض، چت بات ها توسط مردم مورد قضاوت قرار گرفتند و هیچ رقیب انسانی وجود نداشت. [4] این جایزه از سال 2020 منقرض شده است. [5]
در اصل، 2000 دلار برای انسانی ترین برنامه در مسابقه اهدا شد. این جایزه در سال 2005 3000 دلار و در سال 2006 2250 دلار بود. در سال 2008، 3000 دلار اهدا شد.
علاوه بر این، دو جایزه فقط یک بار وجود دارد که هرگز اهدا نشده است. 25000 دلار برای اولین برنامه ای ارائه می شود که قضات نمی توانند آن را از یک انسان واقعی تشخیص دهند و می تواند قضات را متقاعد کند که انسان همان برنامه کامپیوتری است. 100000 دلار پاداش اولین برنامه ای است که داوران نمی توانند در آزمون تورینگ که شامل رمزگشایی و درک متن، ورودی بصری و شنیداری است، از یک انسان واقعی تشخیص دهند. قرار بود این مسابقه پس از کسب این جایزه به پایان برسد.
قوانین در طول سال‌ها متفاوت بود و مسابقات اولیه شامل آزمون‌های تورینگ مکالمه محدود [6] بود، اما از سال 1995 بحث بدون محدودیت بود.
برای سه مدخل در سال 2007، رابرت مدکسزا، نوح دانکن و رولو کارپنتر ، [7] برخی از "سوالات غربالگری" اساسی توسط اسپانسر برای ارزیابی وضعیت فناوری استفاده شد. اینها شامل سؤالات ساده در مورد زمان، دوره مسابقه و غیره بود. دانش عمومی ("چکش برای چیست؟")؛ مقایسه ("کدام سریع تر است، قطار یا هواپیما؟") و سوالاتی که حافظه را برای قسمت های قبلی یک مکالمه نشان می دهد. "همه اسم ها، صفت ها و افعال از فرهنگ لغت مناسب برای کودکان یا نوجوانان زیر 12 سال می آیند." ورودی‌ها نیازی به پاسخ «هوشمندانه» به سؤالات برای پذیرش ندارند.
برای اولین بار در سال 2008، اسپانسر اجازه معرفی مرحله مقدماتی مسابقه را داد تا رقابت را به ورودی‌های مبتنی بر وب که قبلاً مجاز نبودند و توسط بازجوهای مختلف دعوت شده قضاوت شده بودند، باز کرد. قوانین موجود نحوه انتخاب یا آموزش بازجوها را بیان نمی کند. بازجوها (که سیستم ها را قضاوت می کنند) زمان محدودی دارند: 5 دقیقه برای هر شخص در مسابقه 2003، 20+ برای هر جفت در مسابقات 2004-2007، 5 دقیقه برای انجام مکالمه همزمان با یک انسان و برنامه در سال های 2008-2009، به 25 افزایش یافت. دقیقه مکالمه همزمان از سال 2010.
این جایزه مدتهاست که توسط متخصصان این رشته تحقیر شده است، [8] به دلایل مختلف.
این توسط بسیاری به عنوان یک شیرین کاری تبلیغاتی در نظر گرفته می شود. [9] [10] ماروین مینسکی به شدت "جایزه" را به هر کسی که بتواند رقابت را متوقف کند ارائه کرد. لوبنر به شوخی پاسخ داد که پیشنهاد مینسکی برای جلوگیری از رقابت باعث شد تا او به عنوان یک حامی مالی همکاری کند. [11]
قوانین مسابقه، داوران با صلاحیت ضعیف را تشویق به قضاوت سریع کرده است. تعامل بین داوران و رقبا در ابتدا بسیار کوتاه بود، به عنوان مثال به طور موثر 2.5 دقیقه پرسش، که تنها اجازه چند سوال را می داد. [9] پرسش در ابتدا به یک موضوع منفرد به انتخاب شرکت کننده، مانند "مکالمه غریب"، [8] [12] یک دامنه متناسب با ترفندهای استاندارد چت بات محدود می شد. [13]
هدف شرکت کنندگان در مسابقه درک یا هوش نیست، بلکه به ترفندهای سبک ELIZA متوسل می شود ، [9] [14] و شرکت کنندگان موفق متوجه فریب و تظاهر می شوند. [15]
در سال 2006، این مسابقه توسط تیم چایلد (مدیر عامل تلویزیون مجازی) و هوما شاه برگزار شد . [7] [16] در 30 اوت، چهار نامزد نهایی معرفی شدند:
این مسابقه در 17 سپتامبر در تئاتر VR، پردیس Torrington Place دانشگاه کالج لندن برگزار شد . داوران شامل پروفسور سایبرنتیک دانشگاه ریدینگ ، کوین وارویک ، استاد هوش مصنوعی، جان بارندن (متخصص تحقیقات استعاره در دانشگاه بیرمنگام )، وکیل دادگستری، ویکتوریا باتلر-کول و روزنامه نگاری به نام گراهام دانکن-رو بودند. تجربه دومی از این رویداد را می توان در مقاله ای در Technology Review یافت . [17] [18] برنده "جوان" بود، بر اساس Jabberwacky ، هر دو ساخته شده توسط Rollo Carpenter.
مسابقات سال 2007 در 21 اکتبر در شهر نیویورک برگزار شد. داوران عبارت بودند از: استاد علوم کامپیوتر راس ابوت، استاد فلسفه هارتی فیلد ، استادیار روانشناسی کلایتون کورتیس و مدرس انگلیسی اسکات هاچینز . [19]
هیچ رباتی تست تورینگ را قبول نکرد، اما داوران سه شرکت کننده را به شرح زیر رتبه بندی کردند:
برنده 2250 دلار و مدال سالانه دریافت کرد. نفرات دوم هر کدام 250 دلار دریافت کردند.
مسابقه 2008 توسط پروفسور کوین وارویک سازماندهی شد و توسط هما شاه هماهنگ شد و در 12 اکتبر در دانشگاه ریدینگ انگلستان برگزار شد . [20] پس از آزمایش توسط بیش از صد داور در طول مرحله مقدماتی، در ژوئن و ژوئیه 2008، شش فینالیست از سیزده شرکت اصلی مکالمه مصنوعی (ACEs) انتخاب شدند. پنج نفر از دعوت شدگان در فینال رقابت کردند:
در فینال، به هر یک از داوران 5 دقیقه فرصت داده شد تا مکالمات همزمان و دو قسمتی را با دو موجود پنهان انجام دهند. البات [21] از راهکارهای مصنوعی [22] با فریب دادن سه نفر از دوازده داوری که آن را (در مقایسه‌های موازی انسان) به این باور رساندند که انسان است، برنده جایزه برنز جایزه لوبنر در سال 2008، برای بیشتر موجودات مصنوعی مکالمه‌ای شبیه انسان شد. . این بسیار نزدیک به 30٪ است که به طور سنتی برای در نظر گرفتن اینکه یک برنامه واقعاً آزمون تورینگ را پشت سر گذاشته است، لازم است. یوجین گوستمن [23] و اولترا هال [24] هر دو یک قاضی را فریب دادند که آن انسان است.
ویل پاویا، روزنامه نگار روزنامه تایمز ، در مورد تجربه خود نوشته است. داور فینال لوبنر، فریب البات و یوجین را خورد. [25] کوین وارویک و هوما شاه در مورد تست های تورینگ جفت موازی گزارش داده اند. [26]
مسابقه جایزه لوبنر در سال 2009 در 6 سپتامبر 2009 در مرکز برایتون ، برایتون انگلستان همراه با کنفرانس Interspeech 2009 برگزار شد. مبلغ جایزه برای سال 2009 3000 دلار بود.
شرکت کنندگان دیوید لوی ، رولو کارپنتر و موهان امبار بودند که به ترتیب به پایان رسید.
برایان کریستین نویسنده در مسابقه جایزه لوبنر در سال 2009 به عنوان یک هم پیمان انسانی شرکت کرد و تجربیات خود را در این مسابقه در کتاب خود به نام انسان ترین انسان شرح داد .
مسابقه جایزه لوبنر 2010 در 23 اکتبر در دانشگاه ایالتی کالیفرنیا ، لس آنجلس برگزار شد. مسابقه 2010 بیستمین دوره مسابقه بود. برنده بروس ویلکاکس با سوزت بود.
مسابقه جایزه لوبنر 2011 در 19 اکتبر در دانشگاه اکستر ، دوون ، انگلستان برگزار شد. مبلغ جایزه برای سال 2011 4000 دلار بود.
چهار فینالیست و ربات‌های چترشان بروس ویلکاکس (رزت)، آدنا میگنیا (زویی)، موهان امبار (چیپ ویوانت) و ران لی (معلم) بودند که به ترتیب به پایان رسید.
در آن سال گروهی از داوران جوان به نام جورجیا-می لیندفیلد، ویلیام دان، سم کیت و کریل جردف اضافه شدند. نتایج مسابقه نوجوانان به طور قابل توجهی متفاوت از مسابقه اصلی بود، به طوری که چتر ربات های Tutor و Zoe برای مقام اول و Chip Vivant و Rosette به ترتیب در مکان های سوم و چهارم قرار گرفتند.
مسابقه جایزه لوبنر 2012 در پانزدهم ماه مه در بلچلی پارک در بلچلی ، باکینگهامشر ، انگلستان، به افتخار جشن صدمین سالگرد آلن تورینگ برگزار شد . مبلغ جایزه برای سال 2012 5000 دلار بود. سازمان دهنده ترتیبات محلی دیوید لوی بود که در سال های 1997 و 2009 برنده جایزه لوبنر شد.
چهار فینالیست و چتر ربات‌هایشان موهان امبار (چیپ ویوانت)، بروس ویلکاکس (آنجلا)، دنیل برک (آدام)، ام. آلن (لینگو) بودند که به ترتیب به پایان رسید.
در آن سال، تیمی از دپارتمان علوم کامپیوتر دانشگاه اکستر (اد کیدول، مکس دوپنویس و کنت مک‌کلیمونت) اولین پخش زنده اینترنتی مکالمات را انجام دادند. [27]
مسابقه جایزه Loebner 2013، برای تنها بار در جزیره ایرلند ، در 14 سپتامبر در دانشگاه اولستر ، کالج Magee ، دری ، ایرلند شمالی ، بریتانیا برگزار شد.
چهار فینالیست و ربات‌های گفتگوی آنها استیو ورسویک (میتسوکو)، دکتر ران سی لی (مدرس)، بروس ویلکاکس (رز) و برایان ریگزبی (ایزار) بودند که به ترتیب به پایان رسید.
داوران پروفسور راجر شانک (هنرهای سقراطی)، پروفسور نوئل شارکی ( دانشگاه شفیلد )، پروفسور مینهوا (یونیس) ما ( دانشگاه هادرسفیلد ، سپس دانشگاه گلاسکو ) و پروفسور مایک مک‌تیر ( دانشگاه اولستر ) بودند.
برای مسابقه جونیور لوبنر در سال 2013، چت ربات‌های میتسوکو و توتور در جایگاه اول قرار گرفتند و رز و ایزار به ترتیب در مکان‌های سوم و چهارم قرار گرفتند.
مسابقه جایزه لوبنر 2014 در بلچلی پارک انگلستان در روز شنبه 15 نوامبر 2014 برگزار شد. این رویداد به صورت زنده توسط اسکای نیوز فیلمبرداری شد. داور مهمان جیمز می مجری و مجری تلویزیون بود.
پس از ۲ ساعت داوری، «رز» ساخته بروس ویلکاکس برنده اعلام شد. بروس یک چک 4000 دلاری و یک مدال برنز دریافت خواهد کرد. رتبه ها به شرح زیر بود:
رز – رتبه 1 (4000 دلار و مدال برنز)؛ ایزار – رتبه 2.25 (1500 دلار)؛ Uberbot – رتبه 3.25 (1000 دلار)؛ و میتسوکو - رتبه 3.5 (500 دلار).
داوران دکتر یان هاکینگ، نویسنده و مدرس ارشد روانشناسی، کالج کریست چرچ، کانتربری بودند. دکتر گیتا کوادری مستفاوی، مدرس علوم و فناوری کامپیوتر، دانشگاه بدفوردشایر. آقای جیمز می، مجری و مجری تلویزیون؛ و دکتر پل سنت، رئیس دانشگاه UCMK، دانشگاه بدفوردشایر.
مسابقه جایزه لوبنر 2015 بار دیگر برنده «رز» اثر بروس ویلکاکس شد. [28]
داوران ژاکوب آرون، گزارشگر علوم فیزیک نیو ساینتیست بودند. روری سلان جونز، خبرنگار فناوری بی بی سی؛ برت مارتی، کارگردان فیلم و عکاس؛ آریادنه تمپیون، نویسنده.
جایزه لوبنر 2016 در پارک بلچلی در 17 سپتامبر 2016 برگزار شد. پس از 2 ساعت قضاوت نتایج نهایی اعلام شد. رتبه ها به شرح زیر بود:
جایزه لوبنر 2017 در بلچلی پارک در 16 سپتامبر 2017 برگزار شد. این اولین مسابقه ای بود که در آن از یک پیام جدید توسط پروتکل پیام استفاده شد، نه از یک شخصیت سنتی در یک زمان. رتبه ها به شرح زیر بود و توسط یک Nao_(ربات) اعلام شد :
جایزه لوبنر 2018 در پارک بلچلی در 8 سپتامبر 2018 برگزار شد. این آخرین باری بود که در قالب تست تورینگ سنتی خود و آخرین بار در پارک بلچلی برگزار می‌شد. رتبه ها به شرح زیر بود:
جایزه Loebner 2019 در دانشگاه سوانسی از 12 تا 15 سپتامبر، به عنوان بخشی از نمایشگاه بزرگتری که به خلاقیت در رایانه نگاه می کرد، برگزار شد. قالب مسابقه از یک آزمون سنتی تورینگ، با داوران و انسان‌های منتخب، به یک جلسه آزمایشی 4 روزه تغییر کرد که در آن اعضای عموم مردم، از جمله دانش‌آموزان، می‌توانستند با ربات‌ها تعامل داشته باشند و از قبل می‌دانستند که ربات‌ها انسان نیستند. . هفده ربات به جای 4 فینالیست معمولی شرکت کردند. استیو ورسویک برای پنجمین بار با میتسوکو برنده شد که باعث شد در کتاب رکوردهای گینس ثبت شود. [30]
هیئت منصفه منتخب از داوران نیز آنهایی را که بیشتر دوست داشتند، بررسی کرده و به آنها رأی دادند. رتبه ها به شرح زیر بود:
شبیه ترین ربات چت:
بهترین چت بات کلی
لیست رسمی برندگان [31]
گفتگو با برنده 1992; موضوع: مردان و زنان