Faits: Faits: A. Après avoir exercé le métier de boucher, puis de chauffeur de cars, S._, né en 1949, a été engagé en février 1989 par la commune de A._ comme employé au service de la voirie. Au cours de sa vie professionnelle, le prénommé a été victime de plusieurs incidents. En particulier, il a dû être hospitalisé en 1986 pour une fracture comminutive du plateau tibial interne et externe, lésion qui lui a laissé à ce jour des séquelles importantes (chondrose avancée du condyle fémoral externe et interne gauche avec érosion centrale de la rotule). Le 26 septembre 1989, un couvercle de fonte est tombé sur son épaule gauche; cet accident - qui a donné lieu à deux rechutes et motivé une intervention chirurgicale le 8 septembre 1997 pour une rupture des coiffes des rotateurs ainsi qu'un syndrome du tunnel carpien - a été pris en charge par la Caisse nationale suisse d'assurance en cas d'accidents (CNA); cette dernière lui verse dans ce contexte une rente fondée sur une incapacité de gain de 25 % depuis le 1er janvier 1999 (décision du 21 mai 1999). Enfin, le 5 juillet 1998, l'explosion d'une bonbonne de gaz lui a occasionné des brûlures du 1er et du 2ème degré au bras et à la jambe droites ainsi qu'au visage. En raison de ces multiples atteintes, S._ s'est trouvé en incapacité de travail totale du 8 septembre 1997 au 11 janvier 1998; par la suite, il pu reprendre son activité mais à un taux réduit (25 % du 12 janvier au 3 mai 1998 et 50 % du 4 mai au 5 juillet 1998); dès le 6 juillet 1998, il a derechef été mis en arrêt de travail à 100 %. Le 31 août suivant, son employeur a résilié les rapports de service. Entre-temps, le 30 avril 1998, il a déposé une demande de prestations de l'assurance-invalidité tendant à une rente. Après avoir recueilli divers renseignements médicaux, l'Office AI du canton de Fribourg (ci-après: l'office AI) a organisé à l'intention de l'assuré un stage d'observation professionnelle qui s'est déroulé au centre ORIPH de B._ du 18 octobre au 12 novembre 1999. Dans leur rapport du 13 janvier 2000, les responsables de la réadaptation ont conclu que nonobstant les différents problèmes de santé de l'assuré, celui-ci devrait être en mesure de reprendre un travail dans une activité adaptée avec un taux de présence de 100 % et un rendement de 50 % (voir également le rapport du 15 novembre 1999 du médecin-conseil du centre ORIPH). Le 6 décembre 1999, S._ a dû être opéré pour un phlegmon du plancher buccal; cette affection n'a toutefois entraîné qu'une incapacité de travail temporaire. Par prononcé du 3 mai 2000, l'office AI a informé l'assuré qu'il le considérait apte à retravailler dans une activité adaptée dès le 1er novembre 1998 et qu'en conséquence, il avait droit à une rente entière du 1er septembre au 31 octobre 1998 puis, au-delà de cette date, à une demi-rente fondée sur un degré d'invalidité de 61 % - prestations assorties d'une rente complémentaire pour son épouse. Par prononcé du 3 mai 2000, l'office AI a informé l'assuré qu'il le considérait apte à retravailler dans une activité adaptée dès le 1er novembre 1998 et qu'en conséquence, il avait droit à une rente entière du 1er septembre au 31 octobre 1998 puis, au-delà de cette date, à une demi-rente fondée sur un degré d'invalidité de 61 % - prestations assorties d'une rente complémentaire pour son épouse. B. S._ a recouru au Tribunal administratif du canton de Fribourg, en concluant à l'octroi d'une rente d'invalidité entière et, à titre subsidiaire, à la mise en oeuvre d'une expertise médicale. Dans sa réponse, l'office AI a proposé de soumettre l'assuré à un examen médical approfondi auprès du Centre d'observation médicale de l'AI (COMAI) à Berne. La procédure a été suspendue. Dans leur rapport du 15 juillet 2002, complété le 13 janvier 2003, les médecins du COMAI sont parvenus aux mêmes conclusions que les maîtres de stage et le médecin-conseil du centre ORIPH, à savoir que l'assuré peut travailler à plein temps avec un rendement de 50 % dans une activité légère sans port répété de charges au-delà de 10 kg et ne nécessitant ni déplacement sur un sol inégal, ni manipulations au-dessus de l'horizontale. Après que les parties ont eu l'occasion de se déterminer sur ce rapport, le tribunal a rejeté le recours par jugement du 5 juin 2003. Dans leur rapport du 15 juillet 2002, complété le 13 janvier 2003, les médecins du COMAI sont parvenus aux mêmes conclusions que les maîtres de stage et le médecin-conseil du centre ORIPH, à savoir que l'assuré peut travailler à plein temps avec un rendement de 50 % dans une activité légère sans port répété de charges au-delà de 10 kg et ne nécessitant ni déplacement sur un sol inégal, ni manipulations au-dessus de l'horizontale. Après que les parties ont eu l'occasion de se déterminer sur ce rapport, le tribunal a rejeté le recours par jugement du 5 juin 2003. C. S._ interjette recours de droit administratif contre ce jugement, dont il requiert l'annulation. Sous suite de dépens, il conclut à l'octroi d'une rente d'invalidité entière au-delà du 31 octobre 1998. L'office AI conclut au rejet du recours, tandis que l'Office fédéral des assurances sociales a renoncé à présenter des déterminations. 