ولم يستطع برنامج "X Factor" من تكرار معدلات النجاح الذي حققها برنامج "American Idol" لشبكة " Fox"، حيث جذب 6.2 مليون مشاهد فقط في نهائي موسمه الثالث في ديسمبر، وهو ما يعادل نصف مشاهدي نهائي الموسم الأول من البرنامج نفسه.
وفي محاولة لانقاذ البرنامج في نسخته بانجلترا، قرر مقدم ومنتج البرنامج سيمون كويل المشاركة في النسخة البريطانية، بعد تدني نسب المشاهدة هناك.
وعلق كويل على انهاء البرنامج: "قضيت وقتا ممتعا طوال الـ 12 عاما الماضية في كل من The X Factor و American Idol".
وتابع: "بجانب كوني محظوظا في ايجاد العديد من المواهب في البرنامج، حظيت بترحيب جارف من الشعب الأمريكي ... معظم الوقت".
وكان كويل قد توقع أن يحقق " The X Factor" نجاحا مبهرا عند انطلاقه في 2011، إلا أن البرنامج فشل في تحقيق نسب مشاهدة مرتفعة مع كل موسم، كما لم ينجح في تقديم فائز قوي يستطيع منافسة الحائز على لقب "American Idol".
ومن المعروف أن شخصية كويل اللاذعة على الشاشة ساعدات في جذب المشاهدين إلى " The X Factor "، و" American Idol " الذي قضى به تسع سنوات.
وجاء قرار الإلغاء بعد محاولات متعددة لإحياء البرنامج بحكام جديد كل موسم، من بينهم بول أبدول وبريتني سبيرز وديمي لوفاتو وكيلي رولاند.