Anderson’un Açısı

AI Kullanımı Görevleri Uzatabilir, Araştırmalar Buluyor

mm
Unite.AI sitesini Google'daki tercih ettiğiniz kaynaklara ekleyin
AI-generated image (GPT-2): A man sits at breakfast while a group of identical domestic robots shave him, cut his hair, prepare his food, and clean the house around him, turning even the smallest daily tasks into outsourced labor.

Yeni bir araştırma, AI’ın basit görevleri daha uzun sürmesine neden olabileceğini ve kullanıcıların daha üretken hale geldiğine inanmalarına neden olabileceğini öne sürüyor.

 

Stanford, NYU ve Princeton’dan yapılan bir yeni çalışma, insanların AI’ı verimsiz olduğunda bile sık sık kullandığını ve küçük görevleri AI’a verdiğimizde genellikle daha az zihinsel çaba harcadığımızı ve daha fazla zaman kazandığımızı keşfetti.

Üç insan çalışması boyunca, yazarlar, katılımcıların proposed bir görevde AI’ı kullanmaktan kaçındıkları zaman tahmin ettiklerinden daha fazla zaman ve çaba harcadıklarını ve AI’a olan bağımlılıklarını önemli ölçüde küçümsediklerini buldular.

‘İkinci çalışmada, insanların basit görevlerde AI’ı kullanmalarının nedenini anlamaya çalışıyoruz. Bir hipotez, insanların AI yardımının zaman ve çabayı ne kadar kazandırdığını yanlış hesapladıkları yönünde.

‘Bu hipotezi test etmek için, insanların AI yardımıyla görevleri tamamlama sırasında tahmin ettikleri zaman ve çabayla gerçekte harcadıkları zaman ve çabayı karşılaştırdık ve verimlilik kazancı illüzyonları bulduk, burada insanlar hem zaman hem de çabayı AI yardımıyla kazandıklarını abarttılar.

‘Ortalama olarak, insanlar AI yardımıyla 55.7 saniye zaman kazandıklarını tahmin etti, ancak gerçekte sadece 7.5 saniye kazandılar. Bu yanlış hesap, özellikle basit görevlerde daha şiddetli, burada insanlar AI yardımıyla zaman kazanacaklarını tahmin etti, ancak gerçekte görevleri tamamlamak daha uzun sürdü.’

Yeni makale, The efficiency-gain illusion: People underestimate the rate of AI use and overestimate its benefits on simple tasks adlı, yedi yazar tarafından üç kurumda ortaklaşa yazılmış bir makale, ayrıca AI kullanımının önceki AI kullanımını güçlendirdiğini buldu, yani teknoloji gerçek bir verimlilik kazancı sağlamasa bile.

Basit günlük görevlerde AI'ı kullanmanın nasıl test edildiğini gösteren üç deneyin özeti, kullanıcıların AI'a olan bağımlılıklarını küçümsediklerini, zaman kazancını abarttıklarını ve daha sonra tekrar AI'ı kullanma olasılıklarının daha yüksek olduğunu gösteriyor. Kaynak - https://arxiv.org/pdf/2605.22687

Basit günlük görevlerde AI’ı kullanmanın nasıl test edildiğini gösteren üç deneyin özeti, kullanıcıların AI’a olan bağımlılıklarını küçümsediklerini, zaman kazancını abarttıklarını ve daha sonra tekrar AI’ı kullanma olasılıklarının daha yüksek olduğunu gösteriyor. Kaynak

Üç çalışmadan elde edilen veriler, insanların AI’ı kullandıktan sonra daha sonra tekrar AI’ı kullanma olasılıklarının daha yüksek olduğunu gösterdi, hatta üretken veya zaman kazandıran olmasa bile:

‘Karşıt olarak, experience’in (deneyim) people’in (insanların) AI’ın görevlerde ne kadar faydalı olduğunu doğru bir şekilde tahmin etmelerine yardımcı olabileceği ihtimaline rağmen, biz bir oturum seviyesinde taşıma etkisi bulduk, burada ilk AI kullanımı sonraki AI kullanımını artırıyor.’

‘Katılımcılar, ilk olarak görevleri AI ile tamamladıktan sonra, daha sonra kolay görev varyantları için AI yardımını seçme olasılıkları daha yüksek oldu,尽管 bu şekilde yapmanın ortalama olarak zaman veya çaba kazancı sağlamadığı tespit edildi.’

Bir çalışmada, yazarlar, AI’ın sağladığı tasarrufun tamamen hayal ürünü olduğunu buldular:

‘AI yardımıyla görevi tamamlayanlar, görevi bağımsız olarak tamamlayanlardan 7.06 saniye daha fazla zaman harcadı ve daha yüksek bir çaba bildirdi.’

Çalışma, beş dakikadan kısa süren görevlerle sınırlı olsa da, ChatGPT ve diğer popüler, ticarileştirilmiş LLM’leri (Büyük Dil Modelleri) rutin olarak kullanan eski arama motoru bağımlıları için de ilgili olabilir.

Çalışma Grupları

Farklı kullanıcı çalışmaları boyunca, görevler Kullanıcı İhtiyaçları ve Eylemleri Taksonomisi (TUNA) çerçevesine dayanarak tasarlandı. Deneyler, bilgi arama, özetleme, aritmetik, yazım düzeltme, yeniden yazma ve diğer düşük karmaşıklıkta görevleri kapsadı.

İlk çalışma, katılımcıların AI’ı kullanma isteğini tahmin ettikleriyle gerçekte AI’ı kullanma davranışlarını karşılaştırdı, insanların AI yardımına olan bağımlılıklarını doğru bir şekilde anladıklarını inceleyerek.

İkinci çalışma, insanların AI’ın üretkenlik kazancını abarttıklarını, özellikle de basit görevlerde, gösterdi. AI’ın sağladığı zaman ve çaba kazancını abarttıklarını ve gerçekte sadece birkaç saniye kazandıklarını buldu.

Bir çalışmada, AI’ın sağladığı tasarrufun tamamen hayal ürünü olduğunu buldular:

AI yardımıyla ve bağımsız olarak görev tamamlama sırasında tahmin edilen ve gerçek zaman ve çaba, makalenin önerdiği 'hızlanma illüzyonu'nu gösteriyor, burada katılımcılar AI'ın çok daha fazla zaman kazandırdığını düşünüyorlardı.

AI yardımıyla ve bağımsız olarak görev tamamlama sırasında tahmin edilen ve gerçek zaman ve çaba, makalenin önerdiği ‘hızlanma illüzyonu’nu gösteriyor, burada katılımcılar AI’ın çok daha fazla zaman kazandırdığını düşünüyorlardı.

Çalışma ayrıca algılanan zihinsel çabayı inceledi. Katılımcılar genellikle AI’ın görevleri çok daha kolay hissettireceğini düşünüyorlardı, ancak gerçekte zihinsel çaba azalmıştı. Makale, bu durumu ‘verimlilik kazancı illüzyonu’ olarak tanımlıyor, burada insanlar AI yardımının hızını ve faydasını sistematik olarak abartıyorlar.

AI Kullanımının Zaman Kazancını Abartması

İkinci çalışmada, katılımcılar iki gruba ayrıldı, biri AI’ın zaman ve çabayı ne kadar kazandırdığını tahmin etti, diğeri ise görevleri bağımsız olarak veya AI yardımıyla tamamladı. Görevler, aritmetik, yeniden yazma, bilgi arama, özetleme ve kısa akıl yürütme egzersizleri gibi düşük karmaşıklıkta görevleri kapsadı.

Amac, insanların AI’ın üretkenlik kazancını abarttıklarını, özellikle de basit görevlerde, göstermekti. AI’ın sağladığı zaman ve çaba kazancını abarttıklarını ve gerçekte sadece birkaç saniye kazandıklarını buldu.

Bir çalışmada, AI’ın sağladığı tasarrufun tamamen hayal ürünü olduğunu buldular:

AI yardımıyla ve bağımsız olarak görev tamamlama sırasında tahmin edilen ve gerçek zaman ve çaba, makalenin önerdiği 'hızlanma illüzyonu'nu gösteriyor, где katılımcılar AI'ın çok daha fazla zaman kazandırdığını düşünüyorlardı.

AI yardımıyla ve bağımsız olarak görev tamamlama sırasında tahmin edilen ve gerçek zaman ve çaba, makalenin önerdiği ‘hızlanma illüzyonu’nu gösteriyor, где katılımcılar AI’ın çok daha fazla zaman kazandırdığını düşünüyorlardı.

Çalışma ayrıca algılanan zihinsel çabayı inceledi. Katılımcılar genellikle AI’ın görevleri çok daha kolay hissettireceğini düşünüyorlardı, ancak gerçekte zihinsel çaba azalmıştı. Makale, bu durumu ‘verimlilik kazancı illüzyonu’ olarak tanımlıyor, где insanlar AI yardımının hızını ve faydasını sistematik olarak abartıyorlar.

AI Kullanımı Yanılsamayı Derinleştirir

Son çalışmada, AI kullanımının daha sonra karar verme üzerindeki etkisini test etmek için tasarlandı. Katılımcılar, önce bir ‘maruziyet aşamasına’ geçti, burada bazıları kolay görevleri AI yardımıyla tamamladı, bazıları daha zor görevleri AI yardımıyla tamamladı ve diğerleri aynı görevleri bağımsız olarak tamamladı. Bir kontrol grubu görev aşamasını tamamen atladı.

Sonra, tüm gruplar bir ‘test aşamasına’ geçti, bu kez yeni ve kolay görevler verildi ve AI’ı kullanma kararı kendilerine bırakıldı. Görevler, yeniden yazma, aritmetik, bilgi arama, yazım düzeltme, özetleme ve kısa akıl yürütme egzersizleri gibi düşük karmaşıklıkta görevleri kapsadı.

Çalışma, katılımcıların daha önce AI’ı kullandıklarının, daha sonra AI’ı kullanma olasılıklarının daha yüksek olduğunu buldu, bunun rağmen önceki AI kullanımı zaman veya çaba kazancı sağlamamış olabilir.

Araştırmacılar, daha önce AI’ı kullanan katılımcıların, daha sonra AI’ı kullanma olasılıklarının daha yüksek olduğunu buldu:

Daha önce AI'ı kullanan katılımcıların, daha sonra AI'ı kullanma olasılıklarının daha yüksek olduğunu gösteren sol panel. Sağ panel, önceki AI maruziyetinin, AI yardımının daha hızlı ve daha verimli olduğuna dair inançları artırdığını gösteriyor, ancak ölçülen tamamlama süreleri genellikle çok az fayda sağlıyor ve bazen daha yavaş performans gösteriyor.

Daha önce AI’ı kullanan katılımcıların, daha sonra AI’ı kullanma olasılıklarının daha yüksek olduğunu gösteren sol panel. Sağ panel, önceki AI maruziyetinin, AI yardımının daha hızlı ve daha verimli olduğuna dair inançları artırdığını gösteriyor, ancak ölçülen tamamlama süreleri genellikle çok az fayda sağlıyor ve bazen daha yavaş performans gösteriyor.

Tekrarlanan AI maruziyetinin, katılımcıların AI’ın gerçekten faydalı olup olmadığına ilişkin yargılarını bozduğu bildirildi: AI’ı daha önce kullanan kişiler, görevlerin gerçekten AI olmadan daha hızlı tamamlanabileceğine dair inançlarını azalttı, ancak ölçülen sonuçlar genellikle çok az fayda sağlıyor ve bazen daha yavaş tamamlama süreleri gösteriyordu.

Araştırmacılar, bu durumun, AI kullanımının gelecekteki AI bağımlılığını artıran ve aynı zamanda kullanıcıların AI’ın üretkenliği gerçekten artırıp artırmadığını doğru bir şekilde değerlendirmelerini engelleyen bir ‘kendini güçlendiren döngü’ oluşturabileceğini öne sürüyor.

Sonuç

Görüş Bu yeni makalenin sonuçları, AI’ı küçük görevler için kullanan okuyucular için tanıdık gelebilir.

Kişisel olarak, tekrarlanan görevleri otomatikleştirmeye olan tutkum, şu anki AI patlamasından birkaç on yıl önce başladı. O zaman da şimdi de, soru aynı: AI’ı kurmak ve/veya bakımını yapmak için gereken çaba, görevi yalnızca insan gücüyle yapmak için gereken çabadan daha fazla mı?

Otomatikleştirmeyi sevenler, gerçekten kazanç sağlanmadan bile, yıllarca veya on yıllar sonra bile, yalnızca otomatikleştirmek için otomatikleştirebilirler ve bu, faaliyetin contexto’yu ‘optimizasyon’dan ‘hobi’ye dönüştürür.

Bunun yanlış bir yanı yok, ancak gerçekten kazanç sağlanmadığını kendinize karşı inkar etmemelisiniz. Ben de son yıllarda bu kötü alışkanlığa karşı koymaya çalıştım ve AI’ı kullanmak, özellikle de kötü veya optimal olmayan sonuçlar elde etmenin çok daha hızlı olduğu için, bu alışkanlığı kötüleştirmeye eğilimlidir.

Aldatıcı Göstergeler

Makale, AI’ın faydası hakkında yanılsamaya neden olan bazı noktaları biraz göz ardı ediyor. Örneğin, AI’ın bazen görevleri gerçekten hızlı ve mantıklı bir şekilde çözdüğü, ancak çoğu zaman zorluklar ve AI chatbot’larını kendi ihtiyaçlarına göre uyarlamaya çalışırken hayal kırıklığına uğradığımız durumlar.

Bir ‘sihirli’ sonuç, AI’ın görevi hızlı ve mantıklı bir şekilde çözmesi ve bu durumun gerçekten faydalı olmasıdır.

Örneğin, her zaman bir makaleyi gözden geçirdiğimde, sayfaları yazdırmak ve genellikle sayfa numaralarını büyük ve kalın olarak üstte yazmak zorundayım, çünkü bunlar genellikle yok veya altta küçük yazılmıştır. ChatGPT’ye, sayfalara büyük ve kalın sayfa numaraları ekleyen bir Python betiği üretmesini istemek, gerçekten快速 bir sonuç verdi, çünkü şimdi bir Arxiv PDF’sini bir.BAT dosyasına sürükleyerek, 2-3 saniyede sayfa numaraları olan yeni bir sürüm elde edebiliyorum:

AI tarafından yazılmış bir Python betiği kullanılarak PDF'lere eklenen sayfa numaraları.

AI tarafından yazılmış bir Python betiği kullanılarak PDF’lere eklenen sayfa numaraları.

Bu, belki de AI’ın bana gerçekten faydalı ve düzenli olarak yararlı bir şey yarattığı en hızlı zamandı.

AI’ın gerçekten zaman kazandırdığını veya zihinsel çabayı azalttığını gösteren örneklerin, AI’ın gerçek yeteneklerini abartmamıza neden olabileceğini düşünüyorum. Bu, AI’ın gerçekten faydalı olduğu durumları abartmamıza ve AI’ın faydasını abartmamıza neden olabilir.

Araştırmalar, insanların AI’ı kullandıklarında gerçekten zaman kazandıklarını veya zihinsel çabayı azalttıklarını düşünmelerine neden olabileceğini gösteriyor. Ancak, bu durumun gerçekten öyle olup olmadığını ölçmek için daha fazla araştırmaya ihtiyaç vardır.

Sonuç olarak, AI’ın faydası hakkında yanılsamaya neden olan bazı noktaları göz ardı etmemeliyiz. AI’ın gerçekten faydalı olduğu durumları abartmamalıyız ve AI’ın faydasını abartmamalıyız.

Araştırmalar, insanların AI’ı kullandıklarında gerçekten zaman kazandıklarını veya zihinsel çabayı azalttıklarını düşünmelerine neden olabileceğini gösteriyor. Ancak, bu durumun gerçekten öyle olup olmadığını ölçmek için daha fazla araştırmaya ihtiyaç vardır.

AI’ın faydasını ölçmek için daha fazla araştırmaya ihtiyaç vardır. AI’ın gerçekten faydalı olduğu durumları belirlemek için daha fazla çalışmaya ihtiyaç vardır.

AI’ın faydasını ölçmek için, AI’ın gerçekten zaman kazandırdığını veya zihinsel çabayı azalttığını gösteren örnekleri incelemeliyiz. Ancak, bu durumun gerçekten öyle olup olmadığını ölçmek için daha fazla araştırmaya ihtiyaç vardır.

Makine öğrenimi üzerine yazar, insan görüntü sentezi alanında uzman. Metaphysic.ai'de araştırma içeriği başkanı, DNEG'in Brahma.ai'ye dönüşümüne kadar.
Portfolio sitesi: martinanderson.ai
İletişim: martin@martinanderson.ai