Faits: A. B._, ressortissante française née en 1944, réside en Suisse depuis le 1er décembre 2001. Elle n'y exerce aucune activité lucrative et est de ce fait au bénéfice d'un forfait fiscal. Depuis le 1er janvier 2005, elle perçoit une pension de retraite de la sécurité sociale française (régime général) et des rentes du régime complémentaire professionnel français. Le 1er mars 2003, la Caisse cantonale vaudoise de compensation AVS (CCVD) a ouvert un compte individuel au nom de B._ pour une affiliation obligatoire en qualité d'assurée n'exerçant aucune activité lucrative. Calculée sur la base du montant de son forfait fiscal, la cotisation annuelle acquittée correspondait au maximum légal. Par courrier du 8 octobre 2007, B._ a demandé à la CCVD à être exemptée de l'assujettissement à l'assurance-vieillesse, survivants et invalidité suisse avec effet rétroactif au 1er janvier 2005. Après avoir consulté l'Office fédéral des assurances sociales (OFAS), la CCVD a, en date du 21 octobre 2008, informé B._ du rejet de sa demande d'exemption. L'assurée a alors requis par courrier du 29 janvier 2009 une décision formelle de l'OFAS que celui-ci a notifiée le 24 février 2009. B. Par jugement du 13 mai 2011, le Tribunal administratif fédéral a rejeté le recours formé par l'assurée contre cette décision. C. B._ interjette un recours en matière de droit public. Elle conclut principalement à la réforme du jugement attaqué, en ce sens qu'elle est mise au bénéfice d'une exemption de l'assujettissement à l'assurance-vieillesse, survivants et invalidité obligatoire avec effet au 1er janvier 2005, subsidiairement à l'annulation de ce jugement et au renvoi de la cause à l'autorité inférieure pour nouvelle décision au sens des considérants. L'OFAS conclut au rejet du recours. B._ a présenté des observations complémentaires. 