قطع صلاة القصر لجماعة أخرى

مصلي يصلي العصر قصراً، ومن الركعة الثانية دخلت جماعة المسجد وأقامت لصلاة الظهر قصراً؛ هل يلزمه قطع صلاته والدخول معهم؟