Professor Christopher Bartel dari Appalachian State University dikutip oleh The Insider sebagai mengatakan bahwa meskipun esai ChatGPT mungkin memiliki kualitas tata bahasa yang tinggi dan ide-ide yang rumit, esai tersebut masih kurang wawasan. Bartel mengatakan: "Mereka sangat lembut. Tidak ada konteks, tidak ada kedalaman atau wawasan."
Wawasan adalah ciri khas dari esai yang baik dan inilah yang tidak dikuasai dengan baik oleh ChatGPT. Kekurangan wawasan ini perlu diingat ketika mengevaluasi konten yang dibuat oleh mesin.
4. ChatGPT Terlalu Berbelit-belit
Sebuah makalah penelitian yang diterbitkan pada Januari 2023 menemukan pola dalam konten ChatGPT yang membuatnya kurang cocok untuk aplikasi kritis.
Makalah tersebut berjudul, How Close is ChatGPT to Human Experts? Comparison Corpus, Evaluation, and Detection.
Penelitian menunjukkan bahwa manusia lebih memilih jawaban dari ChatGPT dalam lebih dari 50% pertanyaan yang diajukan terkait dengan keuangan dan psikologi. Namun, ChatGPT gagal menjawab pertanyaan kedokteran karena manusia lebih memilih jawaban langsung -- sesuatu yang tidak diberikan oleh AI.
Peneliti menulis:
" ... ChatGPT memiliki kinerja yang buruk dalam domain medis baik dalam bahasa Inggris maupun Cina. ChatGPT sering memberikan jawaban yang panjang untuk konsultasi medis dalam dataset yang dikumpulkan, sementara seorang ahli langsung memberikan jawaban atau saran yang jelas."
ChatGPT cenderung mencakup topik dari berbagai sudut pandang, yang membuatnya tidak sesuai ketika jawaban terbaik adalah jawaban langsung.
Marketers yang menggunakan ChatGPT harus memperhatikan hal ini karena pengunjung situs yang membutuhkan jawaban langsung tidak akan puas dengan halaman web yang bertele-tele.
Jawaban yang singkat dan jelas dapat bekerja dengan baik di Google Voice karena memiliki kesempatan yang lebih baik untuk berada dalam peringkat daripada jawaban yang bertele-tele.
OpenAI, pembuat ChatGPT, mengakui bahwa jawaban bertele-tele adalah keterbatasan yang sudah diketahui. Bias ChatGPT terhadap jawaban yang terlalu bertele-tele adalah hal yang harus dipertimbangkan ketika menggunakan ChatGPT, karena Anda akan menemukan situasi di mana jawaban yang lebih pendek dan langsung itu lebih baik.