Who Is Really in the Product Loop: AI, Product Teams, or Both?

Merve Erdem (Senior Product Team Manager @Commencis) ve Melikcan Şirvan (Senior PM @Commencis) Mercury adlı mobil bankacılık agent çözümünü tanıttılar.

Demo — Nazılı persona: 15 yıllık beyaz yaka, mobil bankacılıkta finansal özet, kardeşine para gönderme, yatırım hesapları, ev kredisi senaryoları. Mercury chatbot interface'i üzerinden seamless deneyim.

3 katmanlı mimari:

• Interface Layer — text-based chatbot + admin panelinden eklenen UI komponentleri (karüzel, aksiyon butonları); sistem bağlama göre hangi UI'ı nerede kullanacağına karar veriyor
• Intelligence Layer — modular agent'ların orkestre edildiği, niyet anlama, guardrail yönetimi ve memurriye alınacak veriler kararlarının verildiği katman
• Integration Layer — MCP'ler, banka API'ları, deterministik tool katmanı

Testing & Metrics:

• Golden Datasets — her senaryoda kabul edilebilir cevap kümesi hazırlayıp sistemle kıyaslama
• Confidence threshold'ları — AI'ın bir öneri yapması için yüzde kaç güven gerek
• Guard rail'lar tool'ların testine bırakılmıyor; QA ekibi manuel test ediyor
• Feedback metric, retention, conversion karışık

Zorluklar: Deterministik → olasılıklar mindset geçişi, pixel-level control kaybı, AI çıktısının bug mu/halüsinasyon mu/kabul edilebilir aralık mı olduğuna karar verme.