اختبرت دراسة حديثة مدى كفاءة ودقة المساعدات الشخصية المدمجة بالهواتف والأجهزة الذكية، إذ وجهت لها 4952 سؤالا مختلفا وتم تقسيم كل رد إلى واحدة من خمس فئات، وهى هل قام المساعد بالإجابة اللفظية؟ هل تم الحصول على الإجابة من قاعدة بيانات مثل الرسم البيانى المعرفي؟ هل جاءت الإجابة من مصدر خارجى مثل ويكيبيديا؟ هل فشل المساعد فى فهم السؤال؟ هل فهم المساعد السؤال، ولكن أخفق فى الإجابة بشكل صحيح؟
ووفقا لموقعPhonearena الهندى، كانت المساعدات الشخصية الأربعة المختبرة هم أليكسا التابع لأمازون وكورتانا الخاص بشركة مايكروسوفت ومساعد جوجل الشخصى المدمج بجهازGoogle Homeوالهواتف الذكية وسيرى على أجهزة أبل، ورغم أن المساعدات الأربعة يمكنها التعامل مع الطلبات العادية مثل ضبط المنبه وطلب الزهور والحصول على حجوزات العشاء، لكن تم إجراء هذا الاختبار بدقة لقياس المساعد الأكثر ذكاءً.
وأظهر مساعد جوجل على الهواتف الذكية تفوقه، إذ نجح فى الإجابة على معظم الأسئلة بشكل كامل وصحيح، واحتل كورتانا المرتبة الثانية فى النسبة المئوية للإجابات الصحيحة، يليه مساعدGoogleعلىGoogle Home، واليكسا، ثم سيرى.