Microsoft, AI kodlama ajanlarının teknolojilerle etkileşimini geliştirmek amacıyla yeni bir değerlendirme kılavuzu sundu.
Kılavuzun Amacı ve İçeriği
AX Practitioner Playbook, AI kodlama ajanlarının teknolojinizle nasıl etkileşimde bulunduğunu değerlendirme, hataların nedenlerini teşhis etme ve bu hataları kaynağında düzeltme yöntemlerini içermektedir. Microsoft’un geliştirme ilişkileri ekibi, bu kılavuzu oluşturmak için yüzlerce ajan oturumundan elde edilen verileri bir araya getirdi.
Kullanıcılar, bir kodlama ajanına belirli bir teknoloji ile bir şey inşa etmesini istediğinde, ortaya çıkan kodun genellikle mantıklı göründüğünü ancak çoğu zaman yanlış SDK sürümü ya da güncel olmayan kimlik doğrulama yöntemleri içerdiğini görebiliyor. Bu hatalar, ajanın eğitim verileri doğrultusunda yaptığı işlemlerdir.
Değerlendirme Süreci ve Sonuçlar
Kılavuz, kurulumdan düzeltme aşamasına kadar olan bir değerlendirme sürecini takip etmektedir. Herhangi bir değerlendirme, yanıltıcı sonuçlar verebilir; bu nedenle kılavuz, güvenilir sonuçlar elde etmek için belirli kriterler belirlemektedir. Bu kriterler, kodun çalışıp çalışmadığını kanıtlamak için gerekli olan unsurları da içermektedir.
Ayrıca, kılavuz, her teknoloji için tekrar eden dokuz hata desenini tanımlayarak, hangi durumların hangi çözümleri gerektirdiğini belirlemenize yardımcı olmaktadır.
Gerçek Değerlendirme Örnekleri
Kılavuz, Cosmos DB, SharePoint Framework (SPFx) ve diğer teknolojiler üzerinde gerçekleştirilen gerçek değerlendirmelere dayanmaktadır. Bu değerlendirmeler, belge güncellemeleri ve ajan uzantılarında birçok düzeltmeye yol açmıştır. Örneğin, Azure Cosmos DB Ajan Kiti’ne 46 iyileştirme gerçekleştirilmiştir.
Kılavuz, senaryo üzerinden düzeltmelere kadar olan süreci adım adım ele almaktadır. Kullanıcılar, kendi değerlendirmelerini yaparken bir kalite kontrol listesi ile süreci gözden geçirebilirler.
Kılavuzun Hedef Kitlesi
AX Practitioner Playbook, AI kodlama ajanları tarafından kullanılan teknolojileri veya uzantıları geliştiren herkes için tasarlanmıştır. SDK, API, hizmet, CLI, MCP sunucusu, eklenti veya belge yazan kişiler, ajanların keşfettiği ve uyguladığı bilgileri kontrol etme yetkisine sahiptir.
Bu yöntem, belirli bir değerlendirme sistemine bağlı değildir; kullanıcılar mevcut bir sistemi veya kendi ekiplerinin geliştirdiği bir sistemi kullanabilirler.
Etkin Öğrenme İmkanları
PDF dosyasının yanı sıra, kullanıcıların kılavuzu uygularken öğrenmelerini sağlayacak AX Practitioner becerisi de sunulmaktadır. Bu beceri, kullanıcıların kendi değerlendirmeleri sırasında sorular sormalarını ve kılavuzun standartlarına göre senaryolarını gözden geçirmelerini sağlar.
Kullanıcılar, AX Practitioner Playbook’u indirerek ilk değerlendirmelerini başlatabilir ve süreç içinde öğrenmeye devam edebilirler. Kılavuz, ajanın doğru bilgileri öğrenip öğrenmediğini belirlemenin yollarını sunmaktadır.
