เครื่องตรวจจับ AI ยังมีประสิทธิภาพอยู่หรือไม่?

แพร่หลายมากขึ้น ครูและบรรณาธิการจึงต้องค้นหาวิธีอื่นในการพิจารณาว่าข้อความที่นำเสนอนั้นเป็น AI หรือไม่ สิ่งนี้นำไปสู่การเพิ่มขึ้นของเครื่องตรวจจับ AI

อย่างไรก็ตาม นักเขียนและนักการศึกษาหลายคนตั้งคำถามถึงความถูกต้องของ AI หนึ่งในนั้นคือ Christoper Pen ผู้ร่วมก่อตั้ง TrustInsights.ai ซึ่งระบุใน โพสต์ LinkedIn ว่า “ เครื่องตรวจจับ AI” เป็นเรื่องตลก ปากกาไม่ใช่คนเดียวที่คิดว่าเครื่องตรวจจับ AI ไม่น่าเชื่อถือ Dianna Mason ผู้เชี่ยวชาญด้านเนื้อหา SEO กล่าว ในโพสต์ว่า “เครื่องตรวจจับเนื้อหา AI ไม่ทำงาน”

ตาม โพสต์อื่น ใน Reddit ผู้ใช้รายหนึ่งระบุว่า “ ใช่ เครื่องตรวจจับ AI เป็นการหลอกลวง ไม่เคยมีรายงานทางวิชาการใดที่พิสูจน์ได้ว่าเครื่องตรวจจับ AI สามารถทำงานได้อย่างน่าเชื่อถือ ยังไม่มีกรอบทางทฤษฎีที่น่าเชื่อถือเกี่ยวกับวิธีการทำงานของเครื่องตรวจจับ AI ที่เชื่อถือได้ -

ตัวอย่างที่ได้รับการเผยแพร่อย่างดีหลายตัวอย่างแสดงให้เห็นถึงความไร้ประสิทธิภาพของเครื่องตรวจจับ AI ตัวอย่างเช่น เครื่องตรวจจับหนึ่งเครื่อง dent คำประกาศอิสรภาพของสหรัฐอเมริกาถึง 97.75% ว่าประกอบด้วย AI

ในอีกกรณีหนึ่ง พบว่าข้อความจากพระคัมภีร์เขียนโดย AI ภควัทคีตาซึ่งเป็นคัมภีร์ฮินดูก็ได้รับการ dent โดย AI เช่นกัน dent ดังกล่าวทำให้เกิดคำถามที่จริงจังมากเกี่ยวกับความน่าเชื่อถือของเครื่องตรวจจับ AI

เพื่อตรวจสอบประสิทธิภาพของเครื่องตรวจจับ AI เพิ่มเติม เราได้ทดสอบข้อความที่ตัดตอนมาจากพระคัมภีร์ด้วยเครื่องตรวจจับสี่แบบที่แตกต่างกัน ผลลัพธ์ที่ได้ค่อนข้างแตกต่าง

• Quilbott- ตามไซต์นี้ ข้อความที่ตัดตอนมาที่ใช้น่าจะเป็น 0% ไม่ใช่ที่สร้างโดย AI
• Grammaly- Grammaly ฉันยัง dent ข้อความว่าเป็นข้อความที่เขียนโดยมนุษย์ 100%
• Gpt Zero- ไซต์นี้ให้ข้อความมีความน่าจะเป็น 96% ที่จะเขียนโดยมนุษย์
• Zero Gpt- นี่เป็นไซต์สุดท้ายที่ฉันทดสอบและผลลัพธ์ค่อนข้างน่าเหลือเชื่อ ตามข้อมูลของไซต์ ข้อความดังกล่าวเขียนโดย AI ถึง 96%

เครื่องตรวจจับ AI ส่วนใหญ่ใช้ 2 มาตรการ ได้แก่ ความฉงนสนเท่ห์และความไม่ต่อเนื่อง ความฉงนสนเท่ห์วัดความน่าจะเป็นที่คำถัดไปจะถูกต้อง และความพลุกพล่านคือความแปรปรวนของจำนวนคำและวลี แม้ว่างานเขียนของมนุษย์มีแนวโน้มที่จะมีความหลากหลายมากขึ้น แต่ข้อความที่สร้างโดย AI มักจะมีความสม่ำเสมอมากกว่า อย่างไรก็ตาม เนื่องจากโมเดล AI แบบ GPT-4 มีความก้าวหน้ามากขึ้น จึงสามารถจำลองการเขียนโดยมนุษย์ด้วยความสามารถที่สูงกว่า ซึ่งทำให้การตรวจจับทำได้ยากยิ่งขึ้น

ตามที่ Jodie Cook ผู้ก่อตั้ง Coachvox กล่าว “ ตอนนี้เราหัวเราะกับความคิดเห็นใน LinkedIn ที่สร้างโดย AI…. แต่เมื่อเทคโนโลยีดีขึ้น เราก็จะไม่รู้ว่าอะไรจริงและไม่จริง ไม่มีใครจะ -

สำหรับนักเขียน dent และธุรกิจ เดิมพันมีสูง สิ่งนี้ทำให้เกิดคำถามว่าเครื่องตรวจจับ AI สามารถเชื่อถือได้หรือไม่