Faits: A. A.Y._ et B.Y._ sont copropriétaires dans le village de D._ de la parcelle n° 4690 de la Commune d'Ollon. Cette parcelle, qui supporte un bâtiment d'habitation et une place-jardin, est contigüe, à l'est et au sud, à la parcelle n° 4689. Cette dernière comprend un bâtiment d'habitation constitué en propriété par étages détenue par A.X._ et B.X._ ainsi que C.X._ (ci-après PPE X._). Le 20 décembre 2011, les époux Y._ ont déposé une demande de permis de construire portant sur la rénovation de leur habitation. Au cours de l'enquête publique, la PPE X._ a formé opposition au projet en tant qu'il visait la pose d'une isolation périphérique sur la façade sud et une partie de la façade ouest ainsi que la création d'une lucarne à pan sur le versant est de la toiture. Elle faisait pour l'essentiel valoir que les travaux projetés porteraient atteinte à la vue et à la luminosité dont bénéficiaient les intéressés. Par décision du 29 mars 2012, la Municipalité d'Ollon a levé les oppositions et délivré le permis de construire. B. Par arrêt du 10 avril 2013, la Cour de droit administratif et public du Tribunal cantonal du canton de Vaud a statué sur le recours de la PPE X._. Admettant très partiellement le recours, elle a réformé la décision communale en ce sens que, s'agissant de l'isolation périphérique, des mesures minimales ont été imposées aux constructeurs en matière de résistance au feu des matériaux utilisés. Vu l'issue de la procédure, des frais judiciaires et des dépens réduits ont été mis à la charge des recourants. Agissant par la voie du recours en matière de droit public, la PPE X._, A.X._ et B.X._, ainsi que C.X._ demandent au Tribunal fédéral de réformer l'arrêt du Tribunal cantonal en ce sens que le permis de construire est refusé et les oppositions admises. Ils concluent, à titre subsidiaire, à ce que la projet de construction soit soumis à une enquête publique complémentaire et, plus subsidiairement encore, sollicitent le renvoi de la cause devant la cour cantonale pour nouvelle décision. En tout état, ils concluent à ce que les frais judiciaires et les dépens soient mis à la charge des constructeurs. Les constructeurs et la Municipalité d'Ollon concluent au rejet du recours, avec suite de frais et dépens à la charge des recourants. La cour cantonale a renoncé à répondre au recours et s'est référée aux considérants de sa décision. Par ordonnance du 3 juin 2013, le Président de la Ire Cour de droit public a rejeté la requête d'effet suspensif des recourants. 