با همکاری مشترک دانشگاه پیام نور و انجمن مدیریت دولتی ایران و انجمن مدیریت رفتار سازمانی

نوع مقاله : اکتشافی

نویسندگان

1 عضو هیات علمی دانشگاه علامه

2 دانشجوی دکتری علامه

چکیده

این پژوهش با هدف طراحی و اعتبارسنجی روش دلفی مبتنی بر هوش مصنوعی بر اساس بازی تقلید (تست تورینگ) انجام شد. سؤال اصلی تحقیق این بود که چگونه می‌توان از تست تورینگ به‌عنوان روشی نوین برای سنجش اعتبار نتایج دلفی مبتنی بر هوش مصنوعی استفاده کرد. این مطالعه از نوع کاربردی–توسعه‌ای است و جامعه پژوهش شامل ۳۰ نفر از متخصصان منابع انسانی، متخصصان هوش مصنوعی و ارزیابان مستقل بود. داده‌ها به‌صورت ثانویه گردآوری شد و خروجی سه مدل زبانی Microsoft Copilot، ChatGPT و Gemini به‌عنوان ورودی در تست تورینگ برای تحلیل میزان شباهت نتایج دلفی انسانی و هوش مصنوعی مورد استفاده قرار گرفت. این داده‌ها از مقالات قبلی نویسندگان که نیازهای توسعه‌ای مدیران منابع انسانی را با روش دلفی احصا کرده بودند، استخراج شده‌اند.
این پژوهش به‌عنوان اولین مطالعه در زمینه استفاده از آزمون تورینگ برای ارزیابی یک روش پژوهشی، نشان داد که دلفی مبتنی بر هوش مصنوعی قادر است داده‌هایی تولید کند که از نظر شباهت به پاسخ‌های انسانی پایا و قابل اعتماد هستند. نتایج حاکی از آن است که مدل‌های زبانی بزرگ رفتار و سبک پاسخ‌دهی انسانی را به‌خوبی شبیه‌سازی کرده‌اند و تمایز بین پاسخ‌های انسانی و ماشینی برای شرکت‌کنندگان دشوار بوده است. این یافته‌ها اعتبار روش دلفی مبتنی بر هوش مصنوعی را تقویت کرده و نشان می‌دهد که این روش می‌تواند به‌عنوان ابزاری مؤثر در پژوهش، بدون کاهش کیفیت تحلیل انسانی، مورد استفاده قرار گیرد.

کلیدواژه‌ها

موضوعات

عنوان مقاله [English]

Validation of an AI-Based Delphi Method in Management Research through the Turing Test

نویسندگان [English]

  • hamed dehghanan 1
  • zahra pouramini 2

1 ATU

2 ATU

چکیده [English]

This study aimed to design and validate an AI-based Delphi method using the imitation game (Turing Test). The main research question was how the Turing Test could serve as a novel approach to assess the validity of AI-based Delphi results. This applied–developmental study involved 30 participants, including HR specialists, AI experts, and independent evaluators. Secondary data were collected, and the outputs of three language models—Microsoft Copilot, ChatGPT, and Gemini—were used as inputs in the Turing Test to analyze the similarity between human and AI-generated Delphi results. These data were extracted from the authors’ previous studies, which had identified the personal development needs of HR managers using the Delphi method.
As the first study to apply the Turing Test for evaluating a research method, the findings demonstrated that AI-based Delphi can produce data that are consistent and reliable in comparison to human responses. The results indicate that large language models effectively simulate human behavior and response styles, making it difficult for participants to distinguish between human and machine-generated answers. These findings strengthen the validity of the AI-based Delphi method and suggest that it can serve as an effective research tool without compromising the quality of human-level analysis. without compromising the quality of human-level analysis

کلیدواژه‌ها [English]

  • Artificial intelligence
  • Delphi Method
  • Turing Test and Personal Development and Coaching