Sachverhalt: A. A.a. A._, geboren 1949, meldete sich am 18. Februar 2008 bei der Ausgleichskasse der Sozialversicherungsanstalt Aargau zum Bezug von Ergänzungsleistungen an. Mit Verfügung vom 18. Juli 2008 bejahte diese den Anspruch ab 1. Februar 2008. Die Leistungen wurden mit Verfügungen vom 18. November 2008 und 5. September 2012 an veränderte Verhältnisse angepasst. A.b. Mit Verfügung vom 18. April 2013 forderte die Ausgleichskasse von A._ Fr. 11'281.- an zu Unrecht ausgerichteten Ergänzungsleistungen zurück. Sie begründete es im Wesentlichen mit der Anpassung der Pensionskassenrente ab Januar 2009, der Anpassung des Mietverhältnisses ab April 2013 und der Anpassung des Vermögens ab Meldemonat Januar 2013. In der dagegen erhobenen Einsprache liess A._ beantragen, es seien die Ergänzungsleistungen unter Berücksichtigung des effektiven Mietzinses neu zu berechnen. Die Ausgleichskasse wies die Einsprache mit Entscheid vom 24. Juli 2013 ab. B. A._ erhob Beschwerde beim Versicherungsgericht des Kantons Aargau. Dieses hiess sie mit Entscheid vom 27. Mai 2014 teilweise gut. Es änderte den Einspracheentscheid dahingehend ab, dass A._ der Ausgleichskasse Aargau unter dem Titel der Rückforderung anstelle des geforderten Betrags von Fr. 11'281.- nur einen solchen von Fr. 10'123.- zu bezahlen hat. C. Die Ausgleichskasse Aargau führt Beschwerde in öffentlich-rechtlichen Angelegenheiten. Sie beantragt, der Einspracheentscheid vom 24. Juli 2013 sei zu bestätigen. Der angefochtene Entscheid sei aufzuheben, soweit er die Rückforderung von Januar 2009 bis März 2012 betreffe; eventualiter sei die Angelegenheit aufgrund offensichtlich unrichtiger Sachverhaltsfeststellung an die Vorinstanz zurückzuweisen. A._ beantragt die Abweisung der Beschwerde und die Ablehnung des vorinstanzlichen Entscheides. Die Vorinstanz und das Bundesamt für Sozialversicherungen verzichten auf eine Vernehmlassung. 