Bilgisayar kullanan yapay zekâ: ekranı gören ajanlar ve riskleri

Orhan, e-ticaret yapan küçük bir firmada çalışıyor. Her sabah aynı üç sitede aynı formları dolduruyor. “Bir yapay zekâ fareyi benim yerime kullansa” diye düşündü. Peki bu aracı kendi hesaplarının açık olduğu bir bilgisayara salmak akıllıca mı?

Bu derste bilgisayar kullanan yapay zekânın (computer use) nasıl çalıştığını ve neden özel dikkat gerektirdiğini şirketlerin kendi açıklamalarından öğreneceksiniz.

Aklınıza bir soru mu takıldı?

Sorunuzu ya da aradığınız konuyu yazın Ders bul

Bu derste neler öğreneceksiniz?

• Ekranı gören ajanın bir turda ne yaptığını.
• İstem enjeksiyonunun bu araçlarda neden daha tehlikeli olduğunu.
• Hangi önlemlerin üreticiler tarafından önerildiğini.

Nasıl çalışır?

Anthropic’in geliştirici belgeleri bilgisayar kullanım aracını, Claude’a bir masaüstü ortamında ekran görüntüsü alma, fare ve klavye kontrolü verilmesi olarak anlatıyor. Model ekran görüntüsünü inceler, bir sonraki adımı belirler, uygulamanız o adımı çalıştırır ve yeni ekran görüntüsü döner. OpenAI da Computer-Using Agent için benzer bir döngü tarif ediyor: ekranı gözlemle, adım adım düşün, tıkla, kaydır ya da yaz.

Riskler ve sınırlar

• Hata: Anthropic bu özelliğin tanıtım yazısında deneysel, zaman zaman hantal ve hata yapmaya açık olduğunu söylemişti. Güncel belgeler de modelin yanlış tıklayabileceğini belirtiyor.
• İstem enjeksiyonu (prompt-injection/”>prompt injection): Web sayfasındaki ya da görüntüdeki gizli talimatlar aracın niyetinizi aşmasına yol açabilir. Anthropic bunu başlıca endişe olarak sayıyor.
• Gerçek sonuçlar: Sipariş vermek, e-posta göndermek ya da bir şeyi onaylamak geri alınamayabilir.

Anthropic’in belgeleri önlem olarak en az yetkili, ayrılmış bir sanal makine (virtual machine) ya da konteyner kullanmayı, hesap girişi gibi hassas verileri modele vermemeyi, internet erişimini izinli alan adlarıyla sınırlamayı ve gerçek sonuçları olan kararları bir insana onaylatmayı öneriyor. OpenAI ise aracın sipariş vermek ya da e-posta göndermek gibi dış etkisi olan adımlardan önce onay istediğini, e-posta gibi hassas sitelerde kullanıcının izlemesini gerektiren bir izleme modu bulunduğunu ve bankacılık gibi bazı riskli işleri reddettiğini yazıyor.

Videoyla izleyin

İzlerken şuna dikkat edin: Aracın ekranda nasıl adım adım ilerlediğine dikkat edin; videodaki demonun kontrollü bir ortamda kaydedildiğini unutmayın.

Video: Anthropic (İngilizce). Türkçe altyazı için YouTube’da altyazı ayarını açabilirsiniz.

Adım adım uygulama

1. Aracın resmî sayfasından bugünkü kapsamını ve sınırlarını okuyun.
2. Hassas bilgi içermeyen ayrı bir hesap ya da sanal ortam hazırlayın.
3. Görevi dar tanımlayın: yalnızca okumak, kaydetmek, bir tabloya yazmak.
4. Satın alma, gönderme ve giriş yapma adımlarını açıkça yasaklayın.
5. Çalışırken izleyin; beklenmedik bir ekran ya da talimat çıkarsa durdurun.
6. Çıktıyı kendiniz kontrol edin; hata varsa görevi daha da daraltın.

Kendinizi deneyin

Kaynaklar

• Claude Geliştirici Belgeleri, Computer use tool (İngilizce)
• Anthropic, Developing a computer use model (İngilizce)
• Anthropic, Introducing computer use (İngilizce)
• OpenAI, Computer-Using Agent (İngilizce)
• Anthropic: Claude | Computer use for automating operations (video, İngilizce)

Son kontrol: 11 Kasım 2026

Kaynak: yzdersleri.com/ders/bilgisayar-kullanan-yapay-zeka-ekrani-goren-ajanlar-ve-riskleri/ · Yapay Zeka Dersleri