چگونه این کار را انجام دادیم

روش‌هایی که برای برگزاری و تحلیل گفتگوها درباره هوش مصنوعی به کار بردیم

پروژه تأثیر هوش مصنوعی بر کار دو مرحله داشت. در مرحله نخست، هر کالیفرنیایی می‌توانست دیدگاه خود را از طریق یک نظرسنجی آزاد آنلاین در میان بگذارد. در مرحله دوم، از پاسخ‌دهندگان علاقه‌مند به بحث‌های زنده دعوت کردیم.

توازن منصفانه هر گروه

باید تصمیم می‌گرفتیم چه کسانی را دعوت کنیم. و باید منصفانه انتخاب می‌کردیم و در همان حال گروه‌هایی متوازن می‌ساختیم.

پس از روشی به نام قرعه‌کشی استفاده کردیم که شبیه شیوه انتخاب هیئت منصفه در دادگاه‌هاست. این روش بر دو ایده به یک اندازه مهم بنا شده است:

  • نمایندگی: ما اهداف جمعیتی را بر اساس برآوردهای جمعیت کالیفرنیا تعیین کردیم. این کار فهرست نهایی دعوت‌شدگان را بازتاب‌دهنده تنوع ایالت می‌کرد. معیارها شامل مواردی مانند سن، جغرافیا و حوزه کاری بود.
  • تصادفی بودن: در چارچوب آن اهداف، هر کسی که شرایط را داشت شانس برابری برای انتخاب شدن داشت.

این اصول تضمین کرد که فقط صدای کسانی را که اول پاسخ دادند نشنویم. به ما امکان داد فهرستی منصفانه بسازیم که تقریباً بازتاب کل کالیفرنیایی‌ها بود.

ویژگی‌های جمعیتی

ببینید چقدر به اهداف جمعیتی خود نزدیک شدیم. روی منوی کشویی کلیک کنید تا اندازه‌گیری‌ها را بر این اساس ببینید:

  • منطقه
  • نژاد / قومیت
  • جنسیت
  • حوزه کاری
  • سن

ویژگی‌های جمعیتی نظرسنجی در برابر بحث‌ها

قرعه‌کشی ما را در بحث‌ها به ویژگی‌های جمعیتی متوازن‌تری نزدیک کرد.

نمودار ستونی که شرکت‌کنندگان نظرسنجی و بحث‌ها را با اهداف جمعیتی مقایسه می‌کند، بر حسب واحد درصد فاصله از هدف.

منبع اهداف

  • منطقه: هر منطقه صدایی تضمین‌شده دارد (دست‌کم 6 نفر). باقی جایگاه‌ها را متناسب با جمعیت کالیفرنیا در 2026 بر اساس برآوردهای پیمایش جامعه آمریکایی (ACS) پر کردیم.

رتبه‌بندی ایده‌های سیاستی

در بحث‌ها، شرکت‌کنندگان ایده‌های سیاستی را پیشنهاد کردند و سپس به صورت گروهی به آنها رأی دادند.

ما همه ایده‌هایی را که در یک بحث دست‌کم یک رأی گرفتند گردآوری کردیم. سپس ایده‌های مشابه را کنار هم گذاشتیم و برای هر گروه خلاصه‌ای نوشتیم. این‌ها 26 ایده سیاستی شدند. هر ایده سیاستی بین 1 تا 12 پیشنهاد سیاستی جداگانه را در بر می‌گرفت.

برای رتبه‌بندی ایده‌های سیاستی، هر یک را بر اساس 2 عامل ارزیابی کردیم:

  • بسامد: یک ایده سیاستی چند بار در 14 بحث مطرح شد. شمارش‌ها از 1 تا 8 بود.
  • حمایت: آیا یک ایده سیاستی در یک بحث به بالای فهرست رأی‌ها رسید. برای قرار گرفتن در بالا، باید رأی‌هایی می‌گرفت که آن را در یک‌سوم بالایی قرار دهد. شمارش‌ها از 0 تا 5 بود.

فهرست ایده‌های سیاستی را بر اساس بسامد مرتب کردیم. سپس آن را به دو نیمه تقریبی تقسیم کردیم و نیمه بالایی را «پربسامد» نامیدیم. ایده‌ای «پربسامد» بود که در 5 بحث یا بیشتر مطرح شده باشد.

سپس ایده‌های سیاستی را بر اساس حمایت مرتب کردیم. ایده‌ای را «ایده برتر» نامیدیم که ایده‌های مرتبط با آن در میان 3 موضوع برتر در همه جلسه‌ها قرار گرفته باشد.

ترتیب ایده‌ها معنایی دارد اما مطلق نیست. برای هر عامل، رتبه هر ایده را در مقایسه با همه ایده‌های دیگر محاسبه کردیم. سپس این رتبه‌ها را جمع کردیم تا به هر ایده امتیازی بدهیم. ایده‌های با بالاترین امتیاز را در بالا گذاشتیم. هنگام برابری امتیاز، ترتیب الفبایی را به کار بردیم.

دانلود همه ایده‌های سیاستی

می‌توانید همه سیاست‌هایی را که مردم در بحث‌ها پیشنهاد کردند دانلود کنید و بخوانید. آنها در یک فایل CSV هستند.

چگونه از هوش مصنوعی استفاده کردیم

کارکنان ما از هوش مصنوعی برای کمک به بازبینی و تحلیل این بحث‌ها استفاده کردند.

نمونه‌های استفاده از هوش مصنوعی:

  • تبدیل صدای بحث‌ها به متن،
  • تهیه خلاصه‌های کلی از بحث‌ها و پاسخ‌های نظرسنجی، و
  • برچسب‌گذاری بخش‌هایی از گفتگوها با ایده‌هایی که پوشش می‌دادند.

هوش مصنوعی تعیین نکرد چه کسانی را به بحث‌ها دعوت کنیم. ما دعوت‌شدگان را با قرعه‌کشی برگزیدیم. اطمینان حاصل کردیم که گروه دعوت‌شدگان بازتاب ویژگی‌های جمعیتی کالیفرنیا باشد. همچنین از هوش مصنوعی برای سنجش نگرش پاسخ‌دهندگان به هوش مصنوعی استفاده کردیم. این به ما آمیزه‌ای از دیدگاه‌ها داد.

از آنچه شرکت‌کنندگان با ما در میان گذاشتند حفاظت کردیم. همه کار با هوش مصنوعی درون محیط داده امن ایالت انجام شد. ما هرگز متن‌ها یا پاسخ‌های نظرسنجی را با فروشندگان هوش مصنوعی به اشتراک نگذاشتیم. هیچ محتوایی برای آموزش مدل‌های هوش مصنوعی استفاده نشد.

هوش مصنوعی هرگز جای قضاوت انسانی را نگرفت و هرگز سخنان یک شرکت‌کننده را ننوشت یا ویرایش نکرد. هر نقل‌قول در این گزارش همان است که یک شرکت‌کننده گفته است. آنها را با متن پیاده‌شده مطابقت دادیم و کارکنان آنها را بازبینی کردند.

کارکنان ما ایده‌های سیاستی و موضوع‌هایی که در این گزارش برجسته می‌کنیم را خود شناسایی کردند. آنها متن‌ها و پاسخ‌های نظرسنجی را بدون کمک هوش مصنوعی بازبینی کردند. هر جا هوش مصنوعی در تحلیل کمک کرد، از آن ارجاع دقیق خواستیم. کارکنان پیش از تکیه بر آن گزاره‌ها، آنها را بررسی کردند.

در آزمایش‌ها، خلاصه‌های هوش مصنوعی را با یادداشت‌های یادداشت‌برداران انسانی مقایسه کردیم. دیدیم که همان موضوع‌ها را بدون ساختن محتوا پوشش می‌دهند.