هل يكفر الإنسان بترك الحج ؟

السؤال: إذا كان الإنسان لا يكفر بترك الحج فما هو توجيه قوله تعالى بعد ذكره لوجوب الحج {ومن كفر فإن الله غني عن العالمين } ؟