A.- C._, ressortissante italienne, souffre de surdité congénitale. Par décision du 20 février 1984, la Caisse cantonale genevoise de compensation (ci-après: la caisse) l'a mise au bénéfice d'une formation scolaire spéciale dispensée par la Société X._, avec effet rétroactif au 29 août 1983. Par décision du 25 juillet 1985, la caisse a, d'une part, prolongé la durée de la formation précitée jusqu'au 31 décembre 1985 et, d'autre part, pris en charge la préparation à une activité en atelier protégé dans le cadre de la Société X._, ainsi que les frais de repas de midi, ce pour la période du 1er janvier 1986 au 30 juin de la même année. Le 3 juillet 1986, C._ a déposé une demande de rente de l'assurance-invalidité. Par décision du 25 septembre 1986, la caisse lui a alloué une rente d'invalidité extraordinaire simple, dès le 1er septembre 1986. Cette décision était fondée sur un prononcé du 6 août 1986 par lequel la Commission de l'AI du canton de Genève avait fixé le taux de l'invalidité permanente de l'assurée à 80%. A la suite du départ définitif de C._ de la Suisse, le 31 août 2000, son dossier a été transféré à l'Office de l'assurance-invalidité pour les assurés résidant à l'étranger (ci-après : l'Office). Par décision du 22 septembre 2000, l'Office a nié le droit de C._ à des prestations de l'assurance-invalidité suisse; d'une part elle ne pouvait pas prétendre une rente extraordinaire au-delà du 31 août 2000, attendu qu'elle était domiciliée en Italie à partir de cette date; d'autre part, elle n'avait pas non plus droit à une rente ordinaire, dans la mesure où elle n'avait pas cotisé pendant une année au moins avant la survenance du cas d'assurance. B.- Par jugement du 6 avril 2001, la Commission fédérale de recours en matière d'AVS/AI pour les personnes résidant à l'étranger a rejeté le recours formé contre cette décision par C._. C.- Représentée par son père, c._ interjette un recours de droit administratif dans lequel elle conclut, implicitement, au versement d'une demi-rente ordinaire d'invalidité. L'Office conclut au rejet du recours. Quant à l'Office fédéral des assurances sociales, il ne s'est pas déterminé à son sujet. 