ChatGPT bir MBA sınavına girdi. İşte böyle oldu

Pennsylvania Üniversitesi, Wharton'daki bir profesör, tipik bir MBA kursundaki bir final sınavı için ürettiği cevapları işaretledikten sonra ChatGPT'ye teorik olarak B notu verdi.

Wharton'da operasyon yönetimi profesörü olan Christian Terwiesch, ChatGPT'nin "temel operasyon yönetimi ve süreç analizi sorularında harika bir iş çıkardığını" söyledi.

Yeni bir teknik incelemede "Sadece cevaplar doğru değil, aynı zamanda açıklamalar da mükemmel" diye yazıyor.

Ayrıca: ChatGPT'yi kullanmaya nasıl başlanır?

Ancak, chatbot'un "6. sınıf Matematik seviyesinde nispeten basit hesaplamalarda şaşırtıcı hatalar" yaptığını ve şu anda daha ileri düzey süreç analizi sorularını işleyemeyeceğini de sözlerine ekledi. Öte yandan, ChatGPT'nin mevcut sürümü, doğru çözüme ulaşmak için insan ipuçlarına yanıt olarak yanıtlarını değiştirebilir.

Terwiesch, "Bu performans göz önüne alındığında, Chat GPT3 sınavda B'den B'ye kadar bir not alabilirdi" diye yazıyor.

Terwiesch'in sorularından birkaçı, ChatGPT'nin farklı üretim kapasitelerine sahip birden çok makineyle yapılan bir işleme operasyonunda bir darboğaz belirleyip belirleyemeyeceğini test etmeyi amaçlıyordu.

Ancak ChatGPT, orta düzey aritmetik ile hesaplama yaparken "çok büyük bir hata yaptı".

İlginç bir şekilde, ChatGPT başlangıçta Terwiesch'in kuyruk analiziyle ilgili sorusundan birini yanlış yanıtladı. Daha iyi bir yanıt için ipucu verdi ve ChatGPT yanıtını iyileştirdi. Ertesi gün, profesör ipucu vermeden aynı ilk kuyruk sorusunu sordu ve ChatGPT ilk denemesinde doğru yanıt verdi.

"Ya geçmiş geri bildirimlerden öğrenme yeteneğine sahip ya da ben şanslıydım" diye belirtiyor ve yanıtlarının kalitesinde bir miktar rastgelelik olduğunu da sözlerine ekliyor.

Terwiesch, ChatGPT'nin gelecekteki sınavlarda kullanabileceği zekice ve esprili sorular formüle edebildiğini de keşfetti. Bununla birlikte, chatbot ayrıca bazı sorularda cevaplanmalarını imkansız kılan ince kusurlar da ortaya çıkardı.

Ayrıca: Prestijli bilim dergisi editörleri, ChatGPT'nin 'derinlik ve içgörüden yoksun' olduğunu söylüyor

Terwiesch, diğerlerini ChatGPT'nin yetenekleri ve sınırlamaları konusunda dikkatli olmaları konusunda uyarır. İlk sorusuna verdiği yanıtı okuduktan sonra ChatGPT'ye "aşık olduğunu" söylüyor, ancak "bazı oldukça basit durumlarda büyük hatalar yaptığı" konusunda uyarıyor.

"Karmaşık problemler için A+'dan hâlâ uzağız ve döngüde hâlâ bir insana ihtiyacımız var" diye yazıyor.

"Benim eğitim görüşüme göre, bir ilkokul öğrencisinin 7 x 7 = 49'u ve Pensilvanya'nın başkentinin Harrisburg olduğunu öğrenmesi gerekiyor, ancak hesap makineleri 50 yılı aşkın bir süredir yaygın olarak kullanılıyor ve öğrenciler yanıtları bulmak için Google Wikipedia'yı kullanabiliyorlar. çoğu olgusal soru için. Daha ileri konuları kavramak için gereken temel becerilerin doğasıdır."

Terwiesch, eğitimcilerin K-12 öğrencilerinin ChatGPT'yi ödevlerde ve sınavlarda kopya çekmek için kullanabileceği konusunda endişelenmeleri gerektiğini kabul ediyor. Örneğin, New York Şehri Eğitim Bakanlığı, öğretimde güvenilir testler önemli olduğu ve yeni teknoloji nedeniyle beceri sertifikasyonundan taviz verilmemesi gerektiği için yakın zamanda chatbot'u yasakladı. ChatGPT kullanan bir öğrencinin, "ortalama akademik yetkinliğe" sahip bir arkadaşını arayarak onlar adına sınavı tamamlaması gibi bir şey olduğunu belirtiyor.

Ancak, ChatGPT ve benzeri teknolojilerin, ihtiyacı olan MBA öğrencileri arasında becerileri geliştirmek için "mükemmel bir eğitim alanı" olduğuna inandığı, zarif ama çoğu zaman yanlış cevaplar üreten bir "akıllı danışman" rolü oynama yeteneğine sahip olduğunu da savunuyor. önerilen alternatifleri eleştirel olarak değerlendirmek.