ChatGPT ve AI İntihal Nasıl Tespit Edilir

Yayınlanan: 2023-06-22

ChatGPT, saniyeler içinde dünyadaki hemen hemen her konu hakkında tutarlı, iyi yazılmış bir kopya oluşturma yeteneğiyle akademik ve iş dünyasını alt üst etti.

Olağanüstü yetenekleri, tüm eğitim seviyelerindeki öğrencilerin - ve Bard gibi rakiplerinin - aksi takdirde tamamlanması saatler alacak olan karmaşık denemeler yazmak için chatbot'a yöneldiğini gördü.

Bu, genellikle "ChatGPT intihali" olarak anılan yeni bir fenomen hakkında küresel bir tartışma başlattı. Bu kılavuz, işletmelerin ve eğitim kurumlarının ChatGPT intihalini, ChatGPT ile hile yapmanın tehlikelerini ve hatta ChatGPT kullanmanın intihal sayıp sayılamayacağını tespit etmek için kullandıkları araçları kapsar.

  • ChatGPT İntihal Nasıl Tespit Edilir
  • En Popüler Yapay Zeka ve ChatGPT İntihal Denetleyicileri
  • AI İçerik Denetleyicileri Gerçekten Çalışıyor mu?
  • ChatGPT veya Bard Kullanmak Aslında İntihal mi?
  • ChatGPT ile Hile Yapmanın Tehlikeleri
  • ChatGPT İntihal Yapar mı?
  • Bard İntihal Yapar mı?
  • Diğer Yapay Zeka Araçları İntihal Yapar mı?
  • Denemelerim veya Çalışmalarım için ChatGPT Kullanmalı mıyım?

ChatGPT İntihal Nasıl Tespit Edilir

ChatGPT intihalini tespit etmek için bir AI içerik denetleyicisine ihtiyacınız vardır. AI içerik denetleyicileri, ChatGPT veya Bard gibi bir sohbet robotu veya bir insan tarafından üretilip üretilmediğini belirlemek için metin gövdelerini tarar. Ancak, daha sonra ele alacağımız gibi, bu araçlar güvenilir olmaktan uzaktır.

Kod söz konusu olduğunda intihali tespit etmek biraz daha zordur, ChatGPT'nin de yetenekli bir şekilde üretebileceği bir şey. İçerik için olduğu gibi kod için de yapay zeka algılama araçlarının ekosistemi aynı değildir.

Ancak, örneğin bir üniversite ortamındaysanız ve teknik seviyenizin çok ötesinde bir kod gönderiyorsanız, profesörünüzün veya öğretim görevlinizin ChatGPT'den size yardım etmesini istediğinize dair çok makul şüpheleri olabilir.

En Popüler Yapay Zeka ve ChatGPT İntihal Denetleyici Araçları İncelendi

ChatGPT'nin Kasım 2022'de piyasaya sürülmesinden bu yana birçok şirket ve eğitim kurumu, yapay olarak oluşturulmuş içerik ile insanlar tarafından oluşturulan içerik arasında ayrım yapabildiğini iddia eden yapay zeka içerik denetleyicileri üretti. Artık birçok şirket, farklı bir dil modeli kullanan Google'ın sohbet robotu Bard'ı da kullanıyor.

Bununla birlikte, en saygın AI içeriği algılama araçlarının sözde doğruluğu bile şiddetle tartışılıyor ve yanlış bir şekilde AI içeriğini ve eğitimi kullanmakla suçlanan öğrenciler arasındaki davalar çoktan gerçekleşti.

Sonuç olarak şudur: Bu alandaki hiçbir araç %100 doğru değildir, ancak bazıları diğerlerinden çok daha iyidir.

GPTZero

GPTZero, "birden fazla bağımsız kaynak tarafından doğrulanmış, kullanım durumlarında en doğru AI dedektörü" olduğunu iddia eden popüler, ücretsiz bir AI içerik algılama aracıdır.

Bununla birlikte, Nisan ayında, UC Davis'te bir tarih öğrencisi, profesörü tarafından kullanılan bir AI içerik algılama aracı olan GPTZero'nun makalesini AI tarafından oluşturulmuş olarak etiketlediğinde yanlış olduğunu kanıtladı.

ChatGPT'den kısa bir hikaye yazmasını isteyerek GPTZero'yu test ettik. Ne yazık ki GPTZero, içeriğin bir AI aracı tarafından yazıldığını söyleyemedi:

GPTZero intihal testi

Özgünlük.ai

Originality.ai kesinlikle şu anda mevcut olan daha doğru AI içerik algılama araçlarından biridir.

Şirket, bu yılın Nisan ayında yapay zeka içerik algılama araçlarıyla ilgili kendi araştırmasını yürüterek yapay olarak oluşturulmuş 600 ve insan tarafından oluşturulmuş 600 metin bloğunu ve benzerlerini yaptıklarını iddia eden diğer popüler araçları kendi içerik algılama sistemine besledi. .

Aşağıdaki sonuçlardan da görebileceğiniz gibi, Originality.ai testte yer alan tüm araçlardan daha iyi performans gösterdi:

özgünlük AI palgiarizm testi

Originality.ai'nin tek dezavantajı, ücretsiz bir plan olmaması ve bu makalede yer alan diğer uygulamalarla yapabileceğiniz gibi ücretsiz olarak test edememenizdir. 2.000 kredi için 20 ABD Doları tutarındadır, bu da 200.000 kelimeyi kontrol etmenizi sağlar.

Copyleaks AI İçerik Dedektörü

Copyleaks, insan tarafından oluşturulan ve yapay zeka tarafından oluşturulan kopyayı %99,12 doğrulukla ayırt edebildiğini iddia eden, kullanımı ücretsiz bir AI içerik dedektörüdür.

Copyleaks ayrıca, diğer bölümleri bir insan tarafından yazılmış gibi görünse bile, bir belgenin veya pasajın belirli yönlerinin yapay zeka tarafından yazıp yazılmadığını size söyleyecektir.

Copyleaks, "ChatGPT, GPT-4, GPT-3, Jasper ve diğerleri" tarafından oluşturulan yapay zeka tarafından oluşturulan içeriği tespit edebildiğini söylüyor ve hatta "daha yeni modeller çıktığında bunu otomatik olarak tespit edebileceğimizi" iddia ediyor.

CopyLeaks'in maliyeti 1.200 kredi için aylık 8,33 ABD dolarıdır (kredi başına 250 kelime kopya).

Bununla birlikte, TechCrunch tarafından Şubat 2023'te gerçekleştirilen bir testte Copyleaks, bir haber makalesi, ansiklopedi girişi ve bir ön yazı dahil olmak üzere yapay zeka tarafından oluşturulan çeşitli farklı kopya türlerini insan tarafından oluşturulmuş olarak yanlış bir şekilde sınıflandırdı.

Ayrıca, Originality.ai'nin yukarıda atıfta bulunulan çalışması, vakaların yalnızca %14,50'sinde doğru olduğunu buldu - CopyLeaks'in iddia ettiği %99,12'lik doğruluk iddiasından çok uzak.

Ancak, test ettiğimizde, girdiğimiz metnin ChatGPT tarafından oluşturulduğunu tespit edebildik:

copyleaks yapay zeka dedektörü

Turnitin AI Dedektörü

Turnitin, çeşitli üniversiteler tarafından öğrencilerinin çalışmalarını taramak için kurulan ABD merkezli bir intihal tespit şirketidir. Turnitin, her türlü intihali tespit edecek şekilde tasarlandı, ancak Nisan ayında bir süredir yapay zeka odaklı bir ekibe yatırım yaptığını ortaya çıkardı.

Turnitin, "kontrollü laboratuvar ortamımızda yapay zeka yazmanın varlığını %98 güvenle ve yüzde birin altında yanlış pozitiflik oranıyla tespit edebildiğini" söylüyor.

Ancak şirket ayrıca, bir içeriği yapay zeka tarafından oluşturulmuş olarak işaretlerse, bunun bir "suçlama değil, gösterge" olarak değerlendirilmesi gerektiğini de söylüyor. Turnitin'in yapay zeka dedektörünün gerçek doğruluğu, Washington Post ve diğer kaynaklar tarafından tartışıldı.

Turnitin'in AI içerik algılama yazılımı şu anda ücretsizdir, ancak şirket web sitesindeki bir SSS'de Ocak 2024'te ücretli bir lisanslama programına geçtiklerini söylüyor – fiyatı belirtilmemiş.

OpenAI Metin Sınıflandırıcı

Üçüncü taraf AI içerik denetleyicileri tarafından manevra yapmak istemeyen OpenAI, içeriğin AI tarafından oluşturulup oluşturulmadığını sınıflandırmak için tasarlanmış bir yazılım yayınladı.

Girdiğiniz belge veya metin 1000 karakterden uzun olmalıdır. Belgenizi girdikten sonra, OpenAI size belgenin insanlar tarafından oluşturulmuş olma olasılığının ne kadar yüksek olduğunu neredeyse anında söyleyecektir.

Bir yazar tarafından yazılan ve OpenAI'nin haklı olarak AI tarafından yazılmış olmasının "pek olası olmadığını" belirlediği yakın tarihli bir Tech.co makalesinden bir alıntı yayınladım.

Daha önce atıfta bulunduğumuz aynı TechCrunch makalesinde yayın, OpenAI'nin metin sınıflandırıcısının AI tarafından oluşturulan içeriğin %74'ünü kaçırdığını tahmin ettiğini söylüyor. Bu konuda da bu kadar dürüst olmaları iyi bir şey - ChatGPT tarafından oluşturulan bir kısa hikayeyi kullanarak ikinci bir test yaptığımızda, bunun yapay zeka tarafından üretildiği gerçeğini anlamadı:

OpenAI metin sınıflandırıcı testi

AI İçerik Tespiti Gerçekten Çalışıyor mu?

Hiçbir AI içerik algılama aracı %100 güvenilir değildir; testlerimiz bunu oldukça güçlü bir şekilde kanıtlıyor.

Bununla birlikte, bugün tartıştığımız araçların hiçbiri aslında %100 doğru olduğunu iddia etmiyor ve çok azı yanlış pozitiflerden tamamen arınmış olduğunu iddia ediyor. GPTZero gibi diğerleri, sonuçlarını müjde olarak kabul etme konusunda sorumluluk reddi beyanları yayınlar.

Denemeler üretmek için yapay zeka kullanmakla suçlanan bazı üniversite öğrencileri, çalışmalarının orijinal olduğunu kanıtlamak zorunda kaldı.

Mart ayında Teksas'ta bir profesör, tüm sınıf öğrencilerini haksız yere makale yazmak için ChatGPT kullanmakla suçladıktan sonra, haksız yere sınıfta kaldı. Ayrıca, en yetenekli intihal denetleyicilerinin bile neredeyse iddia ettikleri kadar doğru olmadığını öne süren bir rapor koleksiyonu ve Originality.ai tarafından yürütülene benzer araştırmalar var.

Turnitin'in AI içerik algılayıcısı bile kusursuz değildir. Daha önce tartıştığımız Washington Post tarafından yürütülen nispeten küçük testin doğruluğu, üretebileceğini iddia ettikleri %98'in çok gerisinde kaldı.

Öte yandan Originality.ai kesinlikle mevcut olanların en sağlamlarından biridir ve algılama teknolojisi bile her seferinde doğru değildir.

Ayrıca, herhangi bir kapasitede yanlış pozitifler varsa, o zaman öğrencilerin çalışmalarının orijinal olduğunu ve basitçe yanlış tanımlandığını iddia etmeleri için her zaman yer olacaktır.

ChatGPT veya Bard İntihal mi Kullanıyor?

ChatGPT'nin aslında intihal olup olmadığı tartışmalıdır. Oxford Languages, intihali “başka birinin çalışmasını veya fikirlerini alıp kendisininmiş gibi dağıtma uygulaması” olarak tanımlar.

ChatGPT bir kişi değildir ve bir yanıt ürettiğinde basitçe diğer insanların çalışmalarını ve fikirlerini yeniden üretmez. Yani, sözlük tanımına göre, bu düpedüz intihal değildir.

Bunu yapıyor olsa bile, nereden geldiği (yani ChatGPT) konusunda dürüst olsaydınız, muhtemelen bu intihal olmazdı.

Bununla birlikte, bazı okullar ve üniversitelerin geniş kapsamlı intihal kuralları vardır ve bu tür makaleler yazmak için chatbot'ları kullanmayı düşünürler. Furman Üniversitesi'ndeki bir öğrenci, makalesini yazmak için ChatGPT'yi kullandıktan sonra Aralık ayında felsefe derecesinde başarısız oldu. Başka bir vakada, Kuzey Michigan Üniversitesi'nden bir profesör, sınıfları için makaleler yazmak üzere sohbet robotunu kullanan iki öğrenciyi yakaladığını bildirdi.

Denemeler oluşturmak için ChatGPT'yi kullanmak ve ardından bunu kendi çalışmanız olarak göstermek, belki de "hile yapmak" olarak daha iyi tanımlanır ve kesinlikle "dürüst değildir".

Bir makale yazmanın tüm amacı, orijinal düşünceler üretebildiğinizi, ilgili kavramları anlayabildiğinizi, çelişen argümanları dikkatlice değerlendirebildiğinizi, bilgileri net bir şekilde sunabildiğinizi ve kaynaklarınızı alıntılayabildiğinizi göstermektir.

ChatGPT'yi bu şekilde kullanmakla başka bir öğrenciye makalenizi sizin yerinize yazması için ödeme yapmak arasında çok az fark vardır ki bu elbette kopya çekmektir.

Google'ın Bard'ı ile ilgili olarak, cevap biraz daha karmaşık. Yukarıda kullanılan mantığın aynısı, ChatGPT için olduğu gibi Bard için de geçerlidir, ancak Bard, intihal suçlamaları ve ChatGPT'nin yapmadığı şekilde internetten aldığı şeyleri yanlış bir şekilde alıntılamakla gölgelendi. Bu nedenle, Bard'ı kullanmak, yanlışlıkla başka kaynaklardan intihal yapmanıza yol açabilir ( bununla ilgili daha fazlası aşağıda ).

ChatGPT ile Hile Yapmanın Tehlikeleri

Elon Üniversitesi'nde Yardımcı Doçent olan Christopher Howell, kısa bir süre önce bir grup öğrenciden kritik bir ödev için ChatGPT'yi kullanmalarını ve ardından kendileri için ürettiği makalelere not vermelerini istedi.

Uzun bir Twitter dizisinde (ilk kısmı aşağıda resmedilmiştir) katılan 63 öğrencinin hepsinin ödevlerinde - sahte alıntılar ve sahte ve yanlış yorumlanmış kaynaklar dahil - bir tür "halüsinasyon" bulduğunu bildirdi.

Profesör chatgpt hatalarından bahsediyor

ChatGPT Yanıtlarında İntihal Yapar mı?

Hayır – ChatGPT diğer kaynaklardan bilgi çekip cümle cümle bir araya getirmez. Bu, Üretken Önceden Eğitilmiş Transformatörlerin nasıl çalıştığına dair bir yanlış anlamadır.

ChatGPT - veya daha doğrusu GPT dil modeli - belgeler, web sitesi materyalleri ve diğer metinlerden oluşan devasa bir veri kümesi üzerinde eğitilmiştir.

Veri kümelerinde dilsel dizileri ve kalıpları bulmak için algoritmalar kullanır. Paragraflar, cümleler ve sözcükler daha sonra dil modelinin bu veri kümelerindeki dizilerden dil hakkında öğrendiklerine dayalı olarak üretilebilir.

Bu nedenle, ChatGPT'ye aynı soruyu iki farklı cihazdan aynı anda sorarsanız, yanıtları genellikle son derece benzerdir - ancak yine de farklılıklar olacaktır ve bazen tamamen farklı yanıtlar verebilir.

Bard Cevaplarında İntihal Yapıyor mu?

ChatGPT'nin en büyük rakibi olan Google'dan Bard, lansmanından bu yana daha popüler muadilinden çok daha fazla intihal içerik sorunu yaşadı. Teknoloji web sitesi Tom's Hardware, Bard'ın makalelerinden birini çaldığını tespit etti ve ardından çalışanlarından biri bunu söyleyince özür dilemeye başladı.

Daha yakın bir zamanda, Mayıs 2023'te PlagiarismCheck, Yahoo News'e Bard ile 35 parça metin oluşturduklarını ve internette zaten yayınlanmış olan mevcut içeriği başka sözcüklerle ifade ederek metnin 25'inde %5'in üzerinde intihal olduğunu bulduğunu söyledi.

Bard ve ChatGPT arasındaki belki de bunu açıklayabilecek büyük bir fark, Bard'ın yanıtları internette arayabilmesidir; bu nedenle, ChatGPT'nin mücadele ettiği 2021'den sonraki olaylarla ilgili soruları daha iyi ele alma eğiliminde olmasının nedeni budur. Bununla birlikte, bu aynı zamanda kaynaklardan daha az orijinal bir şekilde veri çektiği ve kaynaklarından daha sık alıntı yaptığı anlamına da geliyor.

Bu örnekler önemsiz olabilir, ancak Bard'ı önemli işler için kullanıyorsanız riskleri bilmek güzel.

Diğer Yapay Zeka Araçları İntihal Yapar mı?

Ne yazık ki evet - ve bazı şirketler intihalli içeriğe sahip yapay zeka araçlarını kullanarak şimdiden kendilerini utandırdı. Örneğin, dünyanın en büyük teknoloji sitelerinden biri olan CNET'in makaleler oluşturmak için bir yapay zeka aracı kullandığı ve bu konuda hiç şeffaf olmadığı ortaya çıktı. CNET'in AI kullanarak yayınladığı makalelerin yaklaşık yarısında bazı yanlış bilgilerin yer aldığı tespit edildi.

Daha da kötüsü, CNET'in yapay zeka intihaline yönelik bir soruşturma başlatan Futurism, "Botun uygunsuz davranışı, aynen kopyalamadan ılımlı düzenlemelere ve önemli yeniden ifadelere kadar, hepsi de orijinaline uygun şekilde atıfta bulunmadan değişiyor" dedi.

İster sanat ister metin olsun, benzersiz, orijinal içerik oluşturmayan AI araçları, halihazırda internette yayınlanmış olan içeriği intihal etme potansiyeline sahiptir. Yapay zeka aracınızın kullandığı dil modelinin tam olarak nasıl çalıştığını anlamak ve ayrıca ürettiği içerik üzerinde sıkı bir denetime sahip olmak önemlidir, aksi takdirde CNET ile aynı konuma gelebilirsiniz.

ChatGPT'yi Denemeler veya Çalışmalar için Kullanmalı mısınız?

Denemeler için ChatGPT'yi Kullanma

ChatGPT'nin diğer kaynaklardan yanıtları çekip cümleleri bir araya getirmemesi gerçeği , işletmelerin ChatGPT'yi telif hakkı sorunları hakkında endişelenmeden çeşitli farklı görevler için kullanabildikleri anlamına gelir.

Ancak iç mekaniği aynı zamanda sık sık halüsinasyon gördüğü ve hata yaptığı anlamına gelir. Mükemmel olmaktan çok uzak - ve ChatGPT'nin üniversite veya kolej için makalenizi yazmasını sağlamak cazip gelse de, buna karşı tavsiyede bulunuruz.

Her eğitim kurumunun özel başvuru yönergeleri elbette biraz farklı olacaktır, ancak büyük ihtimalle üniversitenizde veya okulunuzda zaten "kopya" veya intihal olarak değerlendiriliyor. Ayrıca, ne kadar doğru olursa olsun, eğitim kurumları, zamanla gelişecek olan yapay zeka içerik algılayıcıları kullanıyor.

ChatGPT'yi İş Yerinde Kullanma

Tabii ki, ChatGPT'yi zaten iş yerinde birçok kişi kullanıyor - çok çeşitli sektörlerde yararlı olduğu kanıtlanıyor ve her türlü görevdeki çalışanların günlük görevlerde değerli zamanlarından tasarruf etmelerine yardımcı oluyor.

Ancak ChatGPT'yi iş yerinde kullanıyorsanız, özellikle de harici paydaşlar için rapor yazmak gibi önemli faaliyetler için kullanıyorsanız, yöneticinize veya amirinize bu konuda açık olmanızı tavsiye ederiz.

Ayrıca, oluşturmak için ChatGPT, Bard veya başka herhangi bir AI aracını kullandığınız tüm çalışmaları hem yoğun bir şekilde düzenlemenizi hem de yakından incelemenizi şiddetle tavsiye ederiz. Bu sohbetlerin nerede depolandığı veya OpenAI'nin güvenlik altyapısı hakkında çok fazla kamuya açık bilgi bulunmadığından, hassas kişisel veya şirket bilgilerini herhangi bir sohbet robotuna koymak akıllıca değildir.

Denemeler veya Çalışmalar İçin Diğer Yapay Zeka Araçlarını Kullanma

Tabii ki Bard ve ChatGPT, oradaki tek yapay zeka sohbet botları değil. Ancak, güçlü dil modelleri tarafından desteklenmeyen daha küçük yapay zeka araçlarına destek vermek konusunda tereddütlü davranırız. O kadar iyi kaynaklara sahip olmayacaklar ve bunları iş için kullanmayı denerseniz, onları yararlı bulmanız pek olası değildir.

Ancak yine de aynı kurallar geçerlidir – yöneticinize karşı açık olun ve bunları kullanırken onay alın, herhangi bir hassas şirket verisi girmeyin ve her zaman size verilen yanıtları gözden geçirin.