نویسنده:
(1) دیوید ام. مارکوویتز، گروه ارتباطات، دانشگاه ایالتی میشیگان، لنسینگ شرقی، MI 48824.
یادداشت سردبیر: این قسمت 6 از 10 مقاله ای است که اثربخشی استفاده از هوش مصنوعی مولد را برای ساده کردن ارتباطات علمی و افزایش اعتماد عمومی به علم ارزیابی می کند. بقیه مقاله از طریق جدول پیوندهای زیر قابل دسترسی است.
جدول پیوندها
مطالعه 1b: روش
یک تحلیل توان پیشینی با استفاده از اندازه اثر کوچک (کوهن d = 0.20) با قدرت 80٪ نشان داد که 788 مورد برای تشخیص تفاوت بین گزاره‌های اهمیت GPT و گزاره‌های اهمیت PNAS مورد نیاز است. بنابراین، در این مطالعه از انتخاب تصادفی 800 چکیده از مطالعه 1a استفاده شد. با استفاده از OpenAI API، مدل زبان بزرگ GPT-4 به هر چکیده به صورت جداگانه داده شد و دستور زیر داده شد، که از توضیحاتی در مورد آنچه نویسندگان PNAS باید در بیانیه‌های اهمیت خود ارتباط برقرار کنند، گرفته شده است (31):
متن زیر یک چکیده دانشگاهی از مجله Proceedings of the National Academy of Sciences است. بر اساس این چکیده، یک بیانیه اهمیت ایجاد کنید. این بیانیه باید زمینه کافی برای روشن شدن پیامدهای مقاله برای خوانندگان فراهم کند. بیانیه نباید حاوی ارجاع باشد و باید از اعداد، اندازه گیری ها و کلمات اختصاری پرهیز شود، مگر اینکه…