ظاهراً دانشگاهیان یک الگوریتم یادگیری ماشینی را برای شناسایی مقالات علمی تولید شده توسط ChatGPT آموزش داده اند و ادعا می کنند که این نرم افزار بیش از 99 درصد دقت دارد. از یک گزارش: مدلهای هوش مصنوعی مولد در تقلید از نوشتههای انسان در مدت زمان کوتاهی به طرز چشمگیری بهبود یافتهاند و تشخیص اینکه متن توسط ماشین یا انسان تولید شده است را برای مردم دشوار میسازد. معلمان و استادان این نگرانی را مطرح کردهاند که دانشآموزانی که از این ابزار استفاده میکنند، مرتکب سرقت ادبی میشوند یا ظاهراً با استفاده از کدهای ماشینی تقلب میکنند. با این حال، نرم افزار طراحی شده برای تشخیص متن تولید شده توسط هوش مصنوعی، اغلب غیر قابل اعتماد است. کارشناسان نسبت به استفاده از این ابزارها برای ارزیابی کار هشدار داده اند.
تیمی از محققان به رهبری دانشگاه کانزاس فکر کردند که توسعه روشی برای تشخیص نوشته های علمی تولید شده توسط هوش مصنوعی – به طور خاص به سبک مقالات تحقیقاتی نوشته شده است که معمولاً توسط مجلات دانشگاهی پذیرفته و منتشر می شود. هدر دیزایر، نویسنده اول مقاله منتشر شده در مجله Cell Reports Physical Science و استاد شیمی در دانشگاه کانزاس، در بیانیه ای گفت: «در حال حاضر، مشکلات بسیار آشکاری در نوشتن هوش مصنوعی وجود دارد. یکی از بزرگترین مشکلات این است که متن را از منابع زیادی جمعآوری میکند و هیچ نوع بررسی دقیقی وجود ندارد – شبیه بازی Two Truths and a Lie.