Sachverhalt: Sachverhalt: A. Die Baukommission Rüschlikon bewilligte den Eheleuten A.X._ und B.X._ am 27. März 2000 den Neubau eines Mehrfamilienhauses auf dem Grundstück Kat.-Nr. 3976 in Rüschlikon. Am 6. Juli 2005 genehmigte die Baukommission eine Projektänderung, die den Anbau eines Balkons je im 1. Obergeschoss und im darüber liegenden Dachgeschoss vorsah. Der obere Balkon ist zur Hauptsache einer Dachaufbaute und im Übrigen einer Dachterrasse vorgelagert. A. Die Baukommission Rüschlikon bewilligte den Eheleuten A.X._ und B.X._ am 27. März 2000 den Neubau eines Mehrfamilienhauses auf dem Grundstück Kat.-Nr. 3976 in Rüschlikon. Am 6. Juli 2005 genehmigte die Baukommission eine Projektänderung, die den Anbau eines Balkons je im 1. Obergeschoss und im darüber liegenden Dachgeschoss vorsah. Der obere Balkon ist zur Hauptsache einer Dachaufbaute und im Übrigen einer Dachterrasse vorgelagert. B. Die Nachbarin Y._ focht die Bewilligung dieser Projektänderung bei der Baurekurskommission II des Kantons Zürich an; diese wies den Rekurs am 28. Februar 2006 ab. Bezüglich des Balkons im Dachgeschoss zog Y._ den Rekursentscheid mit Beschwerde an das Verwaltungsgericht des Kantons Zürich weiter. Das Verwaltungsgericht hiess die Beschwerde am 12. Juli 2006 gut und hob die Baubewilligung für den Balkonanbau im Dachgeschoss auf. B. Die Nachbarin Y._ focht die Bewilligung dieser Projektänderung bei der Baurekurskommission II des Kantons Zürich an; diese wies den Rekurs am 28. Februar 2006 ab. Bezüglich des Balkons im Dachgeschoss zog Y._ den Rekursentscheid mit Beschwerde an das Verwaltungsgericht des Kantons Zürich weiter. Das Verwaltungsgericht hiess die Beschwerde am 12. Juli 2006 gut und hob die Baubewilligung für den Balkonanbau im Dachgeschoss auf. C. Mit staatsrechtlicher Beschwerde vom 14. September 2006 beantragen A.X._ und B.X._ die Aufhebung des verwaltungsgerichtlichen Entscheids. Sie rügen eine Verletzung des Willkürverbots (Art. 9 BV). Y._ und das Verwaltungsgericht ersuchen um Abweisung der Beschwerde, soweit darauf einzutreten sei. Die Baukommission Rüschlikon spricht sich für die Gutheissung der Beschwerde aus. 