Faits: Faits: A. N._, né en 1951, a travaillé en qualité de maraîcher et de chef de dépôt, jusqu'au 20 décembre 1999, date à laquelle il a cessé son activité en raison d'une atteinte à la santé. Le 12 mai 2000, il a présenté une demande de rente de l'assurance-invalidité. L'Office de l'assurance-invalidité pour le canton de Vaud a recueilli divers avis médicaux. En outre, il a confié une expertise au docteur R._, spécialiste en médecine physique et réhabilitation (rapport du 27 novembre 2001). Ce médecin n'ayant pas constaté d'éléments cliniques objectifs de nature à expliquer les symptômes présentés par l'assuré, une autre expertise a été confiée au docteur E._, spécialiste en psychiatrie et psychothérapie, lequel a fait état d'un trouble douloureux associé à la fois à des facteurs psychologiques et une affection médicale générale chronique (rapport du 5 décembre 2002). Par décision du 26 février 2003, confirmée sur opposition le 19 mai suivant, l'office AI a rejeté la demande, motif pris que l'assuré ne souffrait pas d'une atteinte à la santé physique ou psychique de nature à influer sur sa capacité de gain. Par décision du 26 février 2003, confirmée sur opposition le 19 mai suivant, l'office AI a rejeté la demande, motif pris que l'assuré ne souffrait pas d'une atteinte à la santé physique ou psychique de nature à influer sur sa capacité de gain. B. Saisi d'un recours contre la décision sur opposition, le Tribunal des assurances du canton de Vaud l'a rejeté par jugement du 25 octobre 2004. B. Saisi d'un recours contre la décision sur opposition, le Tribunal des assurances du canton de Vaud l'a rejeté par jugement du 25 octobre 2004. C. N._ interjette recours de droit administratif contre ce jugement, dont il demande l'annulation, en concluant à l'octroi d'une rente entière d'invalidité, avec effet rétroactif. Subsidiairement, il requiert la mise en oeuvre d'une expertise psychiatrique. L'office intimé conclut au rejet du recours, tandis que l'Office fédéral des assurances sociales a renoncé à présenter des déterminations. 