Faits: Faits: A. Par contrat du 19 février 1998, Y._ a remis à bail aux époux X._ une villa jumelle sise à A._, pour une durée initiale de trois ans, du 1er mai 1998 au 30 avril 2001, avec clause de reconduction tacite annuelle, sauf dénonciation donnée trois mois à l'avance, pour un loyer de 3'000 fr. par mois, charges non comprises. Le 16 septembre 2003, le propriétaire a résilié le bail pour le 30 avril 2004, au motif que son fils souhaitait habiter la villa. A. Par contrat du 19 février 1998, Y._ a remis à bail aux époux X._ une villa jumelle sise à A._, pour une durée initiale de trois ans, du 1er mai 1998 au 30 avril 2001, avec clause de reconduction tacite annuelle, sauf dénonciation donnée trois mois à l'avance, pour un loyer de 3'000 fr. par mois, charges non comprises. Le 16 septembre 2003, le propriétaire a résilié le bail pour le 30 avril 2004, au motif que son fils souhaitait habiter la villa. B. Le 10 octobre 2003, les locataires ont saisi la Commission de conciliation en matière de baux et loyers d'une requête en prolongation de bail. Par décision du 29 novembre 2004, cette autorité a accordé aux locataires une première prolongation au 30 avril 2006. Le 15 décembre 2004, le propriétaire a saisi le Tribunal des baux et loyers en concluant à l'octroi d'une prolongation unique au 31 décembre 2005. Par jugement du 4 mai 2005, celui-ci a accordé aux locataires une unique prolongation de deux ans à l'échéance du 30 avril 2006. Par arrêt du 6 mars 2006, la Chambre d'appel en matière de baux et loyers a confirmé le jugement attaqué. B. Le 10 octobre 2003, les locataires ont saisi la Commission de conciliation en matière de baux et loyers d'une requête en prolongation de bail. Par décision du 29 novembre 2004, cette autorité a accordé aux locataires une première prolongation au 30 avril 2006. Le 15 décembre 2004, le propriétaire a saisi le Tribunal des baux et loyers en concluant à l'octroi d'une prolongation unique au 31 décembre 2005. Par jugement du 4 mai 2005, celui-ci a accordé aux locataires une unique prolongation de deux ans à l'échéance du 30 avril 2006. Par arrêt du 6 mars 2006, la Chambre d'appel en matière de baux et loyers a confirmé le jugement attaqué. C. Les époux X._ (les défendeurs) interjettent un recours en réforme au Tribunal fédéral. Ils concluent principalement à l'annulation de l'arrêt entrepris et à sa réforme en ce sens qu'il leur est accordé une première prolongation de bail au 30 avril 2006, subsidiairement à l'annulation de l'arrêt entrepris et au renvoi de la cause à l'autorité cantonale pour nouvelle décision dans le sens des considérants, le tout avec suite de dépens. Y._ (le demandeur) propose le rejet du recours dans la mesure où il est recevable et la confirmation de la décision attaquée, avec suite de dépens. 