Faits: Faits: A. B._, né le 19 septembre 1942, dessinateur en bâtiment de formation, travaillait à temps partiel à raison de 50 % en qualité de surveillant de chantier pour le compte de la Fondation X._. Il lui arrivait de temps à autre d'effectuer certains travaux spécifiques sur les chantiers dont il avait la surveillance. Victime d'un accident de chantier, l'intéressé a subi le 21 novembre 2001 une cure de hernie discale par isthmotomie L4 et L5 droite. Malgré l'apparition d'une atteinte radiculaire L5 post-opératoire, l'assuré a repris son activité professionnelle à temps partiel le 4 février 2002 auprès de son employeur. Il a toutefois dû renoncer à travailler sur les chantiers. Le 7 novembre 2002, B._ a déposé une demande de prestations de l'assurance-invalidité tendant à l'octroi d'une rente. Dans le cadre de l'instruction de cette demande, l'Office de l'assurance-invalidité pour le canton de Vaud (ci-après: l'office AI) a recueilli les avis des docteurs H._, médecin traitant, et F._, médecin ayant procédé à l'intervention chirurgicale, qui concluaient tous deux à une capacité résiduelle de travail de 50 % (rapports des 4 décembre 2002 et 12 février 2003). L'office AI a également versé au dossier deux expertises neurologiques réalisées pour le compte de Y._, assureur-accidents de l'employeur. Selon la doctoresse R._, les difficultés motrices du membre inférieur droit et le syndrome douloureux résiduel tant au bas du dos et dans le territoire L5 droit que lors de positions assises ou de déplacements prolongés rendaient prématurée pour l'heure une augmentation de la capacité de travail à plus de 50 %. Cette capacité pourrait être améliorée dans le futur, à condition d'éviter les travaux lourds, le port de charges et les travaux dans de mauvaises positions (rapport du 18 février 2003). Pour le docteur U._, dont les constatations cliniques recoupaient celles de sa consoeur R._, la capacité résiduelle de travail de l'assuré était de 75 % au moins dans une activité adaptée ne nécessitant pas le port de charges lourdes, des déplacements en terrain inégal, un engagement physique lourd en général et permettant des changements fréquents de position (rapport du 26 mars 2004). Par décision du 10 septembre 2004, confirmée sur opposition le 9 septembre 2005, l'office AI a rejeté la demande de prestations de l'assuré. Il a considéré que l'activité exercée pour le compte de la Fondation X._ n'était pas représentative de sa capacité résiduelle de gain, dès lors que l'exercice à 80 % d'une activité lucrative adaptée à ses limitations fonctionnelles - notamment l'activité de dessinateur-architecte - était raisonnablement exigible de sa part. Par décision du 10 septembre 2004, confirmée sur opposition le 9 septembre 2005, l'office AI a rejeté la demande de prestations de l'assuré. Il a considéré que l'activité exercée pour le compte de la Fondation X._ n'était pas représentative de sa capacité résiduelle de gain, dès lors que l'exercice à 80 % d'une activité lucrative adaptée à ses limitations fonctionnelles - notamment l'activité de dessinateur-architecte - était raisonnablement exigible de sa part. B. Par jugement du 29 juin 2006, notifié le 3 novembre suivant, le Tribunal des assurances du canton de Vaud a rejeté le recours formé par l'assuré à l'encontre de la décision sur opposition du 9 septembre 2005. B. Par jugement du 29 juin 2006, notifié le 3 novembre suivant, le Tribunal des assurances du canton de Vaud a rejeté le recours formé par l'assuré à l'encontre de la décision sur opposition du 9 septembre 2005. C. B._ a interjeté un recours de droit administratif contre ce jugement dont il a demandé l'annulation. Sous suite de frais et dépens, il a conclu, principalement, à l'octroi d'une demi-rente d'invalidité et, subsidiairement, au renvoi de l'affaire à la juridiction cantonale pour complément d'instruction et nouveau jugement. L'office AI a conclu au rejet du recours, tandis que l'Office fédéral des assurances sociales a renoncé à se déterminer. 