Faits: Faits: A. R._, né en 1955, travaillait comme restaurateur indépendant. En raison d'épisodes dépressifs, il a connu dès le 15 juillet 1997 des incapacités de travail à un taux variable. Le 25 août 1999, il a présenté une demande de prestations de l'assurance-invalidité. L'Office cantonal AI du Valais (ci-après : l'office AI) lui a alloué une demi-rente, fondée sur un degré d'invalidité de 50 %, à partir du 1er août 1998 (décisions du 2 septembre 2002). A. R._, né en 1955, travaillait comme restaurateur indépendant. En raison d'épisodes dépressifs, il a connu dès le 15 juillet 1997 des incapacités de travail à un taux variable. Le 25 août 1999, il a présenté une demande de prestations de l'assurance-invalidité. L'Office cantonal AI du Valais (ci-après : l'office AI) lui a alloué une demi-rente, fondée sur un degré d'invalidité de 50 %, à partir du 1er août 1998 (décisions du 2 septembre 2002). B. B.a L'assuré a recouru devant le Tribunal cantonal valaisan des assurances contre ces décisions, en faisant valoir un degré d'invalidité plus élevé. Par jugement du 12 février 2004, le tribunal cantonal a partiellement admis le recours en ce sens qu'il a annulé les décisions de l'office AI et renvoyé le dossier audit office afin qu'il en complète l'instruction au sens des considérants. B.b Après avoir pris connaissance de ce jugement, l'office AI a requis du docteur A._, lequel s'était déjà prononcé sur le cas dans la procédure administrative, un rapport médical complémentaire. R._ ayant manifesté son désaccord, l'office AI l'a informé, le 19 août 2004, qu'il confiait une expertise au docteur S._, psychiatre à Lausanne. Le mandataire de l'assuré s'est opposé à la désignation du docteur S._ comme expert, en invoquant essentiellement le fait que ce médecin ne possédait pas les compétences professionnelles requises pour procéder à cette expertise. Par décision incidente du 16 septembre 2004, l'office AI a rejeté la demande de récusation présentée, sans frais. L'intéressé a déféré cette décision au Tribunal cantonal valaisan des assurances, qui l'a débouté par jugement du 27 octobre 2004. Par décision incidente du 16 septembre 2004, l'office AI a rejeté la demande de récusation présentée, sans frais. L'intéressé a déféré cette décision au Tribunal cantonal valaisan des assurances, qui l'a débouté par jugement du 27 octobre 2004. C. R._ interjette recours de droit administratif contre ce jugement. Sous suite de dépens, il conclut à son annulation et au renvoi du dossier à l'administration pour désignation d'un nouvel expert. L'office AI conclut au rejet du recours, tandis que l'Office fédéral des assurances sociales a renoncé à se déterminer. 