Bunların işe yarayıp yaramadığı konusunda henüz kesin bir karar verilmemiştir. Kanıtlar bazı yönlerden umut vericidir ancak yapay zekâ öğretmenlerin her ortamda öğrenmeyi iyileştireceği yönündeki genel iddiaları desteklemiyor gibi görünmektedir. Bazen bu teknoloji durumu daha da kötüleştirebilir. İngiltere’de yakın zamanda yapılan bir çalışmada, öğretmenlerin üçte ikisi, yapay zekâ kullanımına bağlı olarak öğrencilerde yazma ve problem çözme becerilerinde bir düşüş gözlemlediklerini belirtti. Ayrı bir çalışma ise “sık yapay zekâ aracı kullanımı ile eleştirel düşünme becerileri arasında önemli bir negatif korelasyon” olduğunu ortaya koyuyor. Çalışma, çocuklara özel ders vermek amacıyla yapay zekâ kullanımının “kullanıcıların derin ve yansıtıcı düşünme süreçlerine katılımını istemeden azaltabileceğini” belirtiyor. Bu, çocukları yapay zekâ araçlarını kullanmaya teşvik etmenin getirdiği en büyük gelişimsel risklerden biridir. Yapay zeka bir cevabı çok hızlı veriyorsa ya da en azından süreci öğrenen için çok kolaylaştırıyorsa çocuklarda uzun vadede zararlı olabilecek bir bilişsel tembellik gelişebilir. Kısıtlamasız sohbet robotları ve benzeri araçları kullananlar için sohbetlerin yaşa uygun olmayan konulara sapma riski bulunuyor. Bir yapay zekâ öğretmen, bir çocuğun cevaplarından çok daha fazlasını toplayabilir. Ürüne bağlı olarak, sorular, okul ödevleri, performans verileri, ilgi alanları, hesap bilgileri, cihaz tanımlayıcıları ve ses kayıtlarını saklayabilir. Model ile paylaşılan her şey, eğitim amaçlı kullanılabilir ve muhtemelen diğer kullanıcılara sızabilir. Ayrıca reklamverenler ve diğer üçüncü taraflarla da paylaşılabilir. Bu durum sadece bir gizlilik riski oluşturmakla kalmaz; model sağlayıcısının veya çocuğunuzun verilerini elinde bulunduran güvenilir üçüncü taraflardan birinin güvenlik ihlali yaşaması hâlinde tam anlamıyla bir güvenlik sorununa dönüşebilir. Sesle etkinleştirilen bir araç söz konusuysa sağlayıcı çocuğunuzun biyometrik verilerine sahip olacaktır ve hackerlar bu verileri çocuğunuzun kimliğiyle ilişkilendirebilirlerse bu veriler son derece değerli hâle gelebilir.