AI dedektörleri bizi ChatGPT'den kurtarabilir mi? Öğrenmek için 3 çevrimiçi araç denedim

Bu, yapay zeka tarafından oluşturulan metin sorunlarını araştıran bir dizi haline gelen ikinci makaledir.

Bu taksitte, yapay zeka dostum ve ben, yapay zeka kaynaklı intihale karşı mücadele etmenin mümkün olup olmadığı ve bunun nasıl işe yarayabileceği sorusuna bakıyoruz.

Ayrıca: ChatGPT nedir ve neden önemlidir? İşte bilmeniz gerekenler

Devam etmeden önce, intihal kavramından ve bunun bu sorunla nasıl ilişkili olduğundan bahsetmemiz gerekiyor. Webster's, "intihal"i "(bir başkasının fikirlerini veya sözlerini) kendisininmiş gibi çalmak ve yaymak: (başkasının üretimini) kaynağa atıfta bulunmadan kullanmak" olarak tanımlar.

Bu, AI tarafından oluşturulan içerik için uygundur. Notion AI veya ChatGPT gibi bir AI aracı kullanan biri içeriği çalmıyor olsa da, bu kişi kelimelerin bir AI'dan geldiğini kabul etmez ve kendilerine ait olduğunu iddia ederse, yine de intihalin sözlük tanımını karşılar.

ZDNET'in Önerdiği

En iyi AI sohbet botları: ChatGPT ve denenecek diğer ilginç alternatifler

AI sohbet botları ve yazarlar, e-postalar ve denemeler yazarak ve hatta matematik yaparak iş yükünüzü hafifletmeye yardımcı olabilir. Kullanıcı girişine dayalı olarak metin oluşturmak veya sorguları yanıtlamak için yapay zeka kullanırlar. ChatGPT popüler bir örnektir, ancak kayda değer başka sohbet robotları da vardır.

Şimdi Oku

Bu deneysel makalede, ChatGPT'den yardım istedim. Sözlerim normal ve koyu metinle yazılmıştır. AI'nın kelimeleri italik olarak yazılmıştır. Ayrıca üç çevrimiçi ChatGPT intihal dedektörü kullanacağım (aşağıda daha ayrıntılı olarak açıklayacağım). AI tarafından oluşturulan her bölümden sonra, dedektörlerin sonuçlarını göstereceğim. Makalenin sonunda, dedektörlerin genel olarak ne kadar iyi performans gösterdiğine bakacağız.

İşte kendi yazdığım yukarıdaki metnin sonucu:

• GPT-2 Çıkış Dedektörü: %99,98 gerçek
• Writer AI İçerik Dedektörü: %100 insan yapımı içerik. Fantastik!
• Ölçekte İçerik Yapay Zeka İçerik Tespiti: %100 insan içeriği puanı. Harika görünüyor!

Bununla başlayalım.

İntihal söz konusu olduğunda ChatGPT'nin öğretmenler ve editörler için neden gerçek bir sorun olabileceğini açıklayın

ChatGPT, OpenAI tarafından geliştirilen GPT (Generative Pre-trained Transformer) dil modelinin bir çeşididir. Belirli bir giriş sırasındaki bir sonraki kelimeyi veya tümceciği tahmin ederek insan benzeri bir metin oluşturmak için tasarlanmıştır. ChatGPT, metin oluşturmak ve istemlere yanıt vermek için yararlı bir araç olabilirken, intihal söz konusu olduğunda öğretmenler ve editörler için de bir sorun olabilir.

ChatGPT'nin öğretmenler ve editörler için sorun olabilmesinin ana nedenlerinden biri, gerçek insan yazarlarınkine çok benzeyen metinler üretebilmesidir. Bu, öğrencilerin veya diğer kişilerin daha sonra kendi çalışmaları olarak gönderebilecekleri ve böylece intihal yapabilecekleri metin oluşturmak için potansiyel olarak ChatGPT'yi kullanabilecekleri anlamına gelir.

Ayrıca: Notion AI yazma yardımcısı bu makaleyi yazabilir mi?

Öğretmenler ve editörler için, belirli bir metnin ChatGPT tarafından mı oluşturulduğunu yoksa bir insan tarafından mı yazıldığını tespit etmek çok zor olabilir çünkü oluşturulan metin, yapay kökenini ortaya çıkaracak bariz hatalar veya tutarsızlıklar içermeyebilir. Bu, belirli bir metnin orijinal mi yoksa başka bir kaynaktan mı kopyalandığını söyleyemeyebileceklerinden, öğretmenlerin ve editörlerin intihali tespit etmesini ve önlemesini zorlaştırabilir.

Genel olarak, ChatGPT ve diğer benzer dil modelleri, intihal söz konusu olduğunda öğretmenler ve editörler için bir sorun olabilir çünkü bunlar, insanlar tarafından yazılanlardan ayırt edilmesi zor olan metinler üreterek öğrencilerin ve diğer bireylerin intihal yapmalarını kolaylaştırır. saptanmış.

• GPT-2 Çıkış Dedektörü: %99,69 gerçek
• Writer AI Content Detector: %97 insan yapımı içerik. Fantastik!
• Ölçekte İçerik Yapay Zeka İçerik Tespiti: %87 insan içeriği puanı. İyi görünüyor!

Unutmayın, italik olarak gösterilen metin yapay zeka tarafından oluşturulmuştur.

Bir metin parçası oluşturmak için ChatGPT kullanıldığını tespit edebileceğim en az üç yol göster

Bir metin parçası oluşturmak için ChatGPT'nin mi yoksa başka bir dil modelinin mi kullanıldığını potansiyel olarak tespit etmenin birkaç yolu vardır. İşte kullanabileceğiniz üç potansiyel yaklaşım:

1. Metinde tekrar eden veya alışılmadık kalıpları arayın: Bir metin parçası oluşturmak için bir dil modelinin kullanılıp kullanılmadığını tespit etmenin bir yolu, yazıda tekrar eden veya alışılmadık kalıplar aramaktır. Örneğin, dil modelleri belirli ifadeleri veya kelime kombinasyonlarını tekrarlayabilir veya alışılmadık veya tutarsız cümle yapıları kullanabilir.
2. Orijinallik eksikliğini kontrol edin: Bir metin parçası oluşturmak için bir dil modelinin kullanılıp kullanılmadığını tespit etmenin başka bir yolu, yazıda orijinallik eksikliği olup olmadığını kontrol etmektir. Bir metin parçası başka bir kaynaktan kopyalanmış gibi görünüyorsa veya internette veya diğer kaynaklarda yaygın olarak bulunan bilgileri içeriyorsa, bu metnin bir dil modeli tarafından üretildiğinin bir işareti olabilir.
3. Bir intihal denetleyicisi kullanın: Son olarak, bir metin parçasının başka bir kaynaktan kopyalanmış gibi görünüp görünmediğini kontrol etmek için bir intihal denetleyicisi kullanabilirsiniz. Bir intihal denetleyicisi, bir metin parçası oluşturmak için bir dil modelinin kullanılıp kullanılmadığını kesin olarak belirleyemese de, diğer kaynaklardan kopyalama veya başka kelimelerle ifade etme örneklerini belirlemenize yardımcı olabilir.
4. Yanıt açıkça yanlış olduğunda dikkat edin: Bundan, AI'nın görünüşte otorite ile yazdığı, ancak bariz bir şekilde yanlış olan bazı metinlere dikkat çektiğim Notion AI incelememde bahsetmiştim. Bir öğrenci veya yazar, tartışılan konuya tam olarak hakim değilse, yanlışlıkları fark edemeyebilir ve bunları yapay zeka tarafından oluşturulan yanıtta bırakabilir. Elbette, yanlış ifadeler yalnızca bir AI yazma aracının kapsamı değildir. Örneğin, birçok blog yazarı ve yorumcu, diğer blog yazarları tarafından yapılan açıklamaları basitçe tekrarlayarak, tamamen "yanlış gerçeklerden" oluşan bir yankı odası yaratarak, zekanın yapay olmasına rağmen aptallığın evrensel bir özellik olduğunu gösteriyor.

Bir metin parçası oluşturmak için bir dil modelinin kullanılıp kullanılmadığını kesin olarak belirlemenin zor olabileceğini ve bu yöntemlerin her zaman etkili olmayabileceğini unutmayın. Ancak, dil modeli tarafından oluşturulan metnin potansiyel örneklerini belirlemenize yardımcı olacak faydalı araçlar olabilirler.

Bu test dizisinde, denetleyici paketi aracılığıyla yalnızca yukarıdaki italik içerik çalıştırıldı.

• GPT-2 Çıkış Dedektörü: %99,98 sahte
• Writer AI İçerik Dedektörü: [ sonuç yok ]
• Ölçekte İçerik Yapay Zeka İçerik Tespiti: %0 insan içeriği puanı. Açıkçası yapay zeka

ChatGPT metnini algılayabilen üç intihal denetleyicisini listeleyin

yenilik

• Apple Vision Pro'yu denedim ve beklediğimin çok ötesinde
• Bu küçük uydu iletişim cihazı, birçok özellik ve gönül rahatlığıyla doludur
• ChatGPT nasıl kullanılır: Bilmeniz gereken her şey
• Bunlar iş için en sevdiğim 5 AI aracım

Şu anda ChatGPT veya diğer dil modelleri tarafından oluşturulan metinleri tespit etmek için özel olarak tasarlanmış bir intihal denetleyicisi olmadığını belirtmekte fayda var. Bazı intihal denetleyicileri, dil modeli tarafından üretilen metnin yapay kökenini gösterebilecek belirli özelliklerini belirleyebilse de, bir metin parçasının bir dil modeli tarafından üretilip üretilmediğini kesin olarak belirleyebileceklerinin garantisi yoktur.

Bununla birlikte, dil modeli tarafından oluşturulan metnin potansiyel örneklerini belirlemenize yardımcı olması için kullanmayı düşünebileceğiniz üç intihal denetleyicisi:

1. Turnitin: Turnitin, okullar ve üniversiteler tarafından yaygın olarak kullanılan popüler bir intihal denetleyicisidir. Kopyalama veya başka sözcüklerle ifade etme örneklerini belirlemek için bir metin parçasını diğer metinlerden oluşan bir veri tabanıyla karşılaştırır. Bir metin parçasının bir dil modeli tarafından üretilip üretilmediğini kesin olarak belirleyemese de, dil modeli tarafından üretilen metnin yapay kökenini gösterebilecek belirli özelliklerini potansiyel olarak tanımlayabilir.
2. PlagScan: PlagScan, kopyalama veya başka kelimelerle ifade etme örneklerini belirlemek için bir metin parçasını diğer metinlerden oluşan bir veritabanıyla karşılaştıran başka bir intihal denetleyicisidir. Turnitin gibi, dil modeli tarafından oluşturulan metnin yapay kökenini gösterebilecek belirli özelliklerini tanımlayabilir, ancak dil modeli tarafından oluşturulan metni algılamak için özel olarak tasarlanmamıştır.
3. Copyleaks: Copyleaks, bir metin parçasını taramak ve kopyalama veya başka kelimelerle ifade etme örneklerini belirlemek için diğer metinlerden oluşan bir veri tabanıyla karşılaştırmak için gelişmiş makine öğrenimi algoritmalarını kullanan bir intihal denetleyicisidir. Dil modeli tarafından oluşturulan metnin belirli özelliklerini tanımlayabilse de, dil modeli tarafından oluşturulan metni algılamak için özel olarak tasarlanmamıştır.

Hiçbir intihal denetleyicisinin tamamen kusursuz olmadığını ve dil modeli tarafından oluşturulan bir metnin bir parçasının tespitten kaçma olasılığının her zaman olduğunu belirtmekte fayda var. Bu nedenle, intihali tespit etmek ve önlemek için daha büyük bir stratejinin yalnızca bir parçası olarak intihal denetleyicilerini kullanmak önemlidir.

• GPT-2 Çıkış Dedektörü: %99,62 gerçek
• Writer AI İçerik Dedektörü: [ sonuç yok ]
• Ölçekte İçerik Yapay Zeka İçerik Tespiti: %86 insan içeriği puanı. İyi görünüyor!

Çevrimiçi AI intihal denetleyicileri

Çoğu intihal detektörü, yazıyı başka bir yazı külliyatıyla karşılaştırmak için kullanılır. Örneğin, bir öğrenci bir makale teslim ettiğinde, Turnitin gibi bir ürün, gönderilen makaleyi veri tabanındaki diğer makalelerden oluşan devasa bir kitaplığın yanı sıra, gönderilen makalenin zaten içerip içermediğini belirlemek için internetteki diğer belgelere ve metinlere karşı tarar. yazılı içerik

Ancak AI yazma araçları, en azından teoride orijinal içerik üretir. Evet, içeriklerini üzerinde eğitildikleri şeyden oluştururlar, ancak oluşturdukları gerçek kelimeler her bir kompozisyon için biraz benzersizdir.

Ayrıca: AI'nın gerçek hedefi artık zeka olmayabilir

Bu nedenle, yukarıda belirtilen intihal denetleyicileri muhtemelen işe yaramayacaktır, çünkü yapay zeka tarafından üretilen içerik muhtemelen başka bir öğrencinin ödevinde yoktu.

Bu yüzden Google'a gittim ve yapay zeka güdümlü içeriğin açıklayıcı imzalarını aramak için özel olarak tasarlanmış dedektörleri aradım. üç tane buldum Aşağıdaki ekran görüntülerinde gösterilen test içeriği için ChatGPT'ye şunu sordum: "Star trek, star wars'tan daha mı iyi? Gerekçelendirin ve açıklayın" Cevabı hiç de fena değildi ve bu yanıtı üç test kullanıcısına verdim.

• GPT-2 Çıkış Dedektörü: %99,98 gerçek
• Writer AI İçerik Dedektörü: %100 insan yapımı içerik. Fantastik!
• Ölçekte İçerik Yapay Zeka İçerik Tespiti: %100 insan içeriği puanı. Harika görünüyor!

GPT-2 Çıkış Dedektörü (Doğruluk %66)

Bu ilk araç, New York merkezli yapay zeka şirketi Hugging Face tarafından yönetilen bir makine öğrenimi merkezi kullanılarak oluşturuldu. Şirket, doğal dil kitaplığını geliştirmek için 40 milyon dolar fon almış olsa da, GPT-2 dedektörü, Hugging Face Transformers kitaplığı kullanılarak kullanıcı tarafından oluşturulmuş bir araç gibi görünüyor. Yaptığım altı testten dördü için doğru çıktı.

Writer.com AI İçerik Dedektörü (Doğruluk Yok)

Writer.com, kurumsal ekiplere yönelik AI yazımı üreten bir hizmettir. AI İçerik Dedektörü aracı, oluşturulan içeriği tarayabilir. Ne yazık ki, bu aracı güvenilmez buldum. Üzerinden geçtiğim altı taramadan üçünde başarısız oldu. Başarılı bir şekilde koştuğu üç kişiden ikisini doğru ve birini yanlış yaptı.

Bu makale yayınlandıktan sonra Writer.com'daki arkadaşlar ZDNET'e ulaştı. CEO May Habib paylaşmak için şu yorumu yaptı:

AI dedektörüne olan talep hızla arttı. Birkaç ay önce başlattığımızdan beri trafik haftada 2-3 kat arttı. Artık düşmemesini sağlamak için gerekli ölçeklendirmeye sahibiz ve amacımız onu ücretsiz ve bizimki de dahil olmak üzere en son modellerin çıktılarını yakalayacak şekilde güncel tutmaktır. AI çıktısı kelimesi kelimesine kullanılacaksa mutlaka atfedilmelidir.

Ölçekte İçerik Yapay Zeka İçerik Tespiti (%50 Doğruluk)

Bulduğum üçüncü araç da bir AI içerik oluşturma firması tarafından üretildi, ancak bu güvenilir bir şekilde çalışıyor gibi görünüyordu. Ölçekte İçerik, kendisini "İçerik Oluşturmayı Otomatikleştirerek SEO Odaklı İçerik Pazarlamacılarına Yardımcı Oluyoruz" şeklinde tanıtıyor. Pazarlama için harekete geçirici mesajı şu şekildedir: "Bir anahtar kelime listesi yükleyin ve yapay zeka içerik algılamasını atlayan 2.600'den fazla kelimelik blog gönderisi alın -- bunların hepsini insan müdahalesi olmadan yapın!" Yaptığım altı testten üçü doğru çıktı.

Son düşünceler

Notion AI ve ChatGPT gibi AI araçları, insanlar tarafından yazılanlardan ayırt edilmesi zor olan metinler üretebildiğinden, AI kaynaklı intihal büyüyen bir sorundur. Bir metnin yapay zeka tarafından üretilip üretilmediğini tespit etmenin birkaç yolu vardır; örneğin, tekrar eden veya olağandışı kalıpları aramak, özgünlük eksikliğini kontrol etmek veya bir intihal denetleyicisi kullanmak. Turnitin, PlagScan ve Copyleaks gibi intihal denetleyicileri, dil modeli tarafından oluşturulan metnin belirli özelliklerini belirleyebilir, ancak kusursuz değildirler.

Bulduğum özel aletler bile ne yazık ki göreve uygun değildi. En iyi durum GPT-2 Çıktı Dedektörüydü, ancak gönderilen metnin yalnızca üçte ikisini doğru yaptı.

Bu noktada, yapay zekanın yapay zekayla savaşmasına izin vermeye hazır olduğumuzu düşünmüyorum. Bunun yerine, bir yapay zeka tarafından üretilen çalışmaları belirlemek için insan algısına (bu, insanların dikkat etmesi gerektiği anlamına gelir) güvenmemiz gerekecek.

Bir şeyin makine tarafından üretildiğini hemen varsaymayın. Bir şey aptalca veya çok yanlış olduğu için hemen bir insan tarafından yazılmadığını varsaymayın. Hepimizin bildiği gibi, insanlar kendi başlarına bazı inanılmaz derecede kötü şeyler yazabilirler.

Ayrıca: OpenAI'nin ChatGPT'si işimde çok iyi ama benim yerime geçemez (henüz)

Yani ne düşünüyorsun? Bir parçanın yapay zeka tarafından üretilip üretilmediğini söyleyebilir misiniz? Bu AI yazma araçlarını, birdenbire kullanılabilir hale geldiklerinden beri aylar içinde kullandınız mı? Sizce eğitim ve gazeteciliğe bir yardım mı yoksa engel mi? Aşağıdaki yorumlarda bize bildirin. ChatGPT'nin bunu nasıl yanıtladığı aşağıda açıklanmıştır:

Bir dil modeli olarak, fiziksel yazı parçalarını göremiyorum veya bunlarla etkileşim kuramıyorum, bu nedenle bir parçanın yapay zeka tarafından üretilip üretilmediğini söyleyemem. Bununla birlikte, size birkaç AI yazma aracı olduğunu söyleyebilirim ve bunlar haber makaleleri, kurgu, şiir ve daha fazlası dahil olmak üzere çok çeşitli yazılı içerik oluşturmak için kullanılabilir.

Sadece bir bilgisayar programı olduğum ve internette gezinme veya fiziksel araçları kullanma yeteneğim olmadığı için bu araçları kullanma konusunda kişisel deneyimim yok. Bununla birlikte, belirli görevleri otomatikleştirerek zamandan ve emekten tasarruf sağlayabildikleri için, bazı kişilerin AI yazma araçlarını eğitim ve gazetecilikte yararlı bulduğunu söyleyebilirim. Diğerleri, bu araçların yanıltıcı veya önyargılı içerik üretmek veya insan yazarları değiştirmek için kullanılma potansiyeline ilişkin endişelerini dile getirdi. Nihayetinde, AI yazma araçlarının bir yardım mı yoksa engel mi olduğu, nasıl kullanıldıklarına ve kullanıldıkları bağlama bağlıdır.

Yani, evet, bu var.