Faits: Faits: A. Ressortissant égyptien né en 1951, A._ a débuté des études de pharmacie à l'Université de Genève en 1978. Il a été naturalisé suisse le 24 janvier 1996. En 1981, A._ a passé avec succès l'examen de sciences naturelles et, en 1983, l'examen de validation de son stage d'assistant-pharmacien, les deux épreuves faisant partie des examens universitaires du diplôme cantonal de pharmacien. En 1984, il a obtenu l'autorisation d'exercer comme assistant-pharmacien et a été inscrit en cette qualité dans le registre de la profession. En 1986, le prénommé a échoué à l'examen scientifique, partie pratique, des examens du diplôme cantonal de pharmacien. Il s'y est présenté une nouvelle fois en 1988, sans toutefois pouvoir mener les épreuves à terme, pour des raisons de santé. S'étant représenté en juillet 1989, il a fait défaut à l'une des épreuves, absence justifiée par la production, trois jours plus tard, d'un certificat médical. Il lui a cependant été attribué la note 0 pour l'épreuve ainsi manquée, de sorte que l'examen a été considéré comme un deuxième échec. A._ a fait opposition puis recours à la Commission de recours de l'Université. Par courrier du 2 mars 1990, le Président de la Section de pharmacie de l'Université de Genève lui a accordé « une toute dernière chance » de se présenter aux examens en vue de l'obtention du diplôme cantonal de pharmacien. Il était précisé qu'il devait à cet effet subir avec succès une épreuve pratique d'analyse médicale biologique, une épreuve orale de microbiologie générale et médicale ainsi que la totalité de l'examen final (épreuves pratiques et orales); concernant l'examen final, il était rappelé que les résultats des deux parties de celui-ci étaient établis séparément et que seul pouvait se présenter à la partie orale le candidat qui avait réussi la partie pratique. Le recours a alors été retiré par lettre du 7 mars 1990 et rayé du rôle par décision du 19 mars 1990. A._ a réussi les épreuves pratique d'analyse médicale biologique et orale de microbiologie générale et médicale le 6 août 1990. Il s'est inscrit à l'examen final, partie pratique, pour la session d'été 1992, mais a été contraint d'abandonner pour des raisons médicales. Par courrier du 7 juin 1993, la Faculté des Sciences de l'Université de Genève l'a éliminé du cursus en vue de l'obtention du diplôme cantonal de pharmacien faute d'avoir réussi l'examen final entre l'automne 1986 et le printemps 1993. Une fois naturalisé suisse, A._ a demandé et obtenu, par décision du 12 septembre 1996, l'attestation fédérale d'assistant-pharmacien en dispense d'examens. Par requête du 23 septembre 1998 adressée au Comité directeur des examens fédéraux pour les professions médicales (ci-après: le Comité directeur), A._ a demandé son admission à l'examen final (fédéral) de pharmacien. Dans un prononcé du 20 janvier 1999, le Comité directeur a décidé que A._ serait admis à se présenter aux examens fédéraux des professions médicales une fois qu'il aurait réussi les examens complémentaires de maturité qui lui seraient imposés par la Commission fédérale de maturité; au surplus il l'a dispensé des examens propédeutiques fédéraux de pharmacien et a constaté qu'il devait « passer l'examen final complet de pharmacien », étant précisé qu'il avait « encore droit à un essai à cet examen ». Dans la motivation, il était indiqué que A._ avait « subi deux échecs à l'examen final de pharmacien, soit en 1986 et 1989 ». Cette décision n'a pas été contestée. A._ a réussi la partie pratique de l'examen final à la session de juillet 2000. Il a en revanche échoué à la partie orale en automne 2002. Par courrier du 27 décembre 2002, A._ a demandé de « pouvoir, à titre exceptionnel, repasser tous ses examens oraux avant la prochaine session d'automne 2003, en se basant uniquement sur les cours qu'il a d'ores et déjà suivis, et non sur le nouveau programme qui sera donné l'année prochaine ». Dans sa réponse du 9 janvier 2003, le Comité directeur lui a fait savoir que, compte tenu d'un troisième échec à l'examen final le 29 novembre 2002, l'exclusion définitive de tout examen équivalent des professions médicales avait été prononcée, de sorte qu'il ne pouvait être autorisé à se présenter une nouvelle fois à l'examen final de pharmacien. Par courrier du 27 décembre 2002, A._ a demandé de « pouvoir, à titre exceptionnel, repasser tous ses examens oraux avant la prochaine session d'automne 2003, en se basant uniquement sur les cours qu'il a d'ores et déjà suivis, et non sur le nouveau programme qui sera donné l'année prochaine ». Dans sa réponse du 9 janvier 2003, le Comité directeur lui a fait savoir que, compte tenu d'un troisième échec à l'examen final le 29 novembre 2002, l'exclusion définitive de tout examen équivalent des professions médicales avait été prononcée, de sorte qu'il ne pouvait être autorisé à se présenter une nouvelle fois à l'examen final de pharmacien. B. Par courriers des 25 février et 6 mars 2003, A._ a sollicité du Comité directeur le réexamen de sa décision du 20 janvier 1999. La demande a été « rejetée » par décision du 30 mai 2003. B. Par courriers des 25 février et 6 mars 2003, A._ a sollicité du Comité directeur le réexamen de sa décision du 20 janvier 1999. La demande a été « rejetée » par décision du 30 mai 2003. C. A._ a recouru contre ce prononcé auprès de la Commission fédérale de recours pour la formation de base et la formation postgrade des professions médicales (ci-après: la CRFPM). Cette autorité a rejeté le recours par jugement du 18 septembre 2003. C. A._ a recouru contre ce prononcé auprès de la Commission fédérale de recours pour la formation de base et la formation postgrade des professions médicales (ci-après: la CRFPM). Cette autorité a rejeté le recours par jugement du 18 septembre 2003. D. Agissant par la voie du recours de droit administratif, A._ demande au Tribunal fédéral d'annuler ce jugement et d'ordonner au Comité directeur d'entrer en matière sur la demande de réexamen de sa décision du 20 janvier 1999, sous suite de dépens. Il fait valoir un motif de réexamen obligatoire. La CRFPM et le Comité directeur concluent au rejet du recours. 