Yapay zeka pilot projesi nasıl yürütülür?
Yayın: · yapayzeka.org.tr
Kısa yanıt
Yapay zeka pilot projesi, sınırlı bir işte tanımlanmış varsayımı sınamak için yürütülür; kapsam, mevcut durum ölçümü ve başarı koşulları deneme başlamadan yazılır. Deneme sonunda yetkili ekip kanıta bakarak yaygınlaştırma, yeniden deneme veya durdurma kararı verir.
Pilotun sınayacağı varsayımı yazın
Bir yapay zeka pilot projesini, belirli bir işte beklenen faydanın kabul edilebilir koşullarda elde edilip edilmediğini sınayacak şekilde yürütün. 'Aracı deneyeceğiz' ifadesi sonuçta hangi kararı vereceğinizi açıklamadığı için önce yönetimin neyi öğrenmek istediğini sorun. Mevcut iş yükünü azaltmak isteyen bir ekiple, çıktı kalitesini iyileştirmek isteyen ekip aynı denemeyi yapsa bile farklı kanıtlar toplayacaktır.
Diyelim ki destek ekibi, onaylı yardım metinlerinden müşteri yanıtı taslağı hazırlamak istiyor. Pilotu taslak hazırlama ve insan kontrolüyle sınırlamayı seçtiğinizde, yanıtın otomatik gönderilmesi ayrı bir kararın konusu olur. Hangi taleplerin denemeye alınacağını baştan yazın ki ekipler farklı güçlükte işler seçmesin. Kapsam dışındaki bir talep geldiğinde çalışan eski iş akışını sürdürür ve neden dışarıda kaldığını kaydeder.
Pilot başlamadan bitiş ve karar tarihleri belirlenir. Süre şirketinize bağlıdır. İş hacmi düşükse normal akışın yanında istisnaları da gözlemek için gereken aralığı düşünün, çünkü takvimde zaman geçmesi yeterli örnek biriktiğini göstermez. Karar tarihi yaklaşırken bu kanıtın toplanıp toplanmadığına bakın. Uzatma gerekiyorsa hangi sorunun yanıtsız kaldığını yazın ki denemenin yeni bilgi getirmesiyle kararın ertelenmesi arasındaki fark açık olsun.
Birleşik Krallık'ın yapay zeka uygunluk rehberi, küçük ölçekli kavram kanıtının iş gerekçesini sınamak için kullanılmasını öneriyor. Şirketinizde pilotun kapsamına gerçek iş akışındaki kullanım koşullarını gözlemlemeyi de eklemeyi düşünün. İlk yapay zeka pilotunu tasarlama eğitimi, senaryo seçimi ile ölçüm ve karar hazırlığını kapsayan bir atölyedir; uygulamada hangi işin sınanacağını ise şirketin ayrıca belirlemesi gerekir.
Başarı koşulu ve karşılaştırma kaydı
Denemeden önce mevcut işi ölçün. Taslak hazırlama süresinin yanında kontrol ve düzeltmeye harcanan zaman da kayda girer, çünkü üretimde azalan iş başka bir aşamaya taşınmış olabilir. Süreç sahibinin verdiği örnekler de kabul edilebilir çıktının ne olduğunu açıklar. Başlangıç kaydı tutulmamışsa çalışanların daha hızlı hissettiklerini söylemesi yararlı bir gözlemdir, ama süre karşılaştırması için önceki işin ölçümü eksik kalır.
Başarı eşiğini şirketinizin iş ihtiyacına göre kararlaştırın. İşin süresi kısalırken hata yükünün artması kabul edilebilir mi? Bazı hata türleri denemenin durmasını gerektiriyorsa, bunları tek bir ortalama kalite puanına gömmeyin. Çalışanın hangi durumda aracı kullanmayı bırakacağını bilmesi gerekir. Kullanım sayısı, bu koşullardan ayrı bir göstergedir; çok kullanımın kabul edilebilir sonuç verdiği ayrıca doğrulanır.
NIST'in Yapay Zeka Risk Yönetimi Çerçevesi'ne (AI RMF) göre ölçüm kullanım bağlamında yapılır ve riskler izlenir. Ayrıntılı test tasarımı için yapay zeka çıktılarının değerlendirilmesi rehberine bakın. Pilotta, NIST'in yaklaşımından hareketle sonucun hangi koşullarda geçerli sayılacağını yazın. Pilot yöneticisi, teknik değerlendirmeyle iş biriminin kabulünü aynı karar dosyasında buluşturur. İkisini de bu koşullara göre değerlendirir.
Kayıt düzenini sade tutun, çünkü her işlemde gereksiz ayrıntı isteyen form çalışana ek iş yükler. Başlangıçta kararda kullanılmayacak alanları ayıklayın ve her örneği kabul sonucuyla eşleştirin. Reddedilen çıktılar da dosyada kalsın, çünkü bunları düzeltilen ve doğrudan kabul edilen işlerle birlikte incelediğinizde ekibin zorlandığı örnekler de değerlendirmeye girer.
Katılımcıların işi ve müdahale yetkisi
Süreç sahibi, denemenin işte uygulanmasını ve çıktının kabulünü üstlenir. Teknik sorumlu erişim ile işletim sorunlarını izler; kullanıcılar da karşılaştıkları örnekleri bildirir. Son kararı verecek yönetici, deneme başlamadan bu görev dağılımını kabul eder. Kullanıcıların günlük işe ayıracağı zaman değişiyorsa bölüm yöneticisi bunu planlar, çünkü denemenin yalnızca gönüllülerin boş zamanına dayanması gözlemlerin düzenli toplanmasını güçleştirebilir.
Sorun bildirimi için çalışanların ulaşacağı bir kişi belirlerken görev ayrımını da koruyun: erişim sorunu teknik ekibe gider, ama cevabın iş açısından yanlışlığına süreç sahibi bakar. İki bildirim aynı kanala geliyorsa sınıflandırmayı koordinatöre vermeyi düşünün. Durdurma yetkisini de kayda yazın ki kullanıcı şüpheli çıktıyı bekletip incelemeye göndermek için kime başvuracağını bilsin. Denemeden önce bu bildirim yolunu kontrol edin.
Pilot sırasında yeni istek gelebilir. Örnekteki yanıt taslağına sipariş güncelleme görevi de eklendiğinde veri ve yetki sınırı değişir. Bu isteği sonraki kararın konusu olarak kaydederseniz başlangıç varsayımı denemenin odağında kalır. Kapsamı değiştirmeniz zorunluysa önceki sonuçlara yeniden bakın. Hangi gözlemin yeni işte de geçerli kaldığı anlaşılmadan, dar kapsamda elde edilen başarı bütün sürecin kabulüne dayanak olarak kullanılmamalıdır.
Karar toplantısı ve pilotta kalma sorunu
Karar toplantısında başlangıçta yazılan soru yeniden açılır. Kullanıcı örnekleriyle ölçüm sonucu başlangıçtaki soruya yanıt aramak için birlikte incelenirken, dışarıda kalan işler ve kararı etkileyen açık sorular da dosyada yer alır. İşletim hazırlığı ayrıca değerlendirilir. Kullanıcılar çözümü kabul etmiş olsa bile bakımı üstlenecek ekip veya kullanımın devamını karşılayacak kaynak eksikse bunlar yaygınlaştırma öncesinde tamamlanacak işlerdir.
İşletimi devralacak ekip kendi takviminde yer ayırmamışsa, denemeyi yürütenler işini bitirdiğinde sonuç raporu devir bekler ve pilotta takılı kalınır. Başlangıçta bu bağımlılığı konuşun ve devir için bir muhatap belirleyin, çünkü denemeyle sonraki işletimin kapsamını birlikte okuyup ortak hazırlıkları değerlendirecek birine ihtiyaç vardır. Devir planı da karar toplantısına bu hazırlıkla gelir.
Yaygınlaştırma, yeniden deneme, bekletme ve durdurma kararlarını şirketinizin onay düzenine göre uyarlarken karar notuna seçilen yolun gerekçesini ve ardından işi üstlenecek kişinin adını da yazın. Her biri için beklenen kaydı da tanımlayın ki pilotun ardından hangi işin başlayacağı belli olsun.
- Yaygınlaştırma kararı, kabul edilen kapsamı ve işletimi devralacak ekibi belirtir.
- Yeniden deneme kararı, eksik kanıtı ve onu sağlayacak sınırlı değişikliği açıklar.
- Bekletme kararı, devam etmek için gereken koşulu ve bu koşulun sahibini kaydeder.
- Durdurma kararı, kapatılacak erişimi ve işin döneceği yöntemi tarif eder.