Sachverhalt: A. Der 1948 geborene H._, beruflich im Anlagewesen bei einer Bank tätig, verwaltet das Stockwerkeigentum X._ und ist zusammen mit drei weiteren Personen am Baukonsortium Y._ beteiligt. Aufgrund von Steuermeldungen wurde er der SVA Aargau, Ausgleichskasse (hiernach: Ausgleichskasse) zwangsweise angeschlossen. Am 3. Dezember 2008 erliess diese vier Beitragsverfügungen für die Beitragsperioden 2003, 2004, 2005 und 2006, worin sie die Beiträge von H._ auf Einkommen aus selbstständiger (Neben-)Erwerbstätigkeit von Fr. 12'560.- (2003), Fr. 9'516.- (2004), Fr. 10'342.- (2005) und Fr. 3'834.- (2006) festsetzte. Dies bestätigte sie mit Einspracheentscheid vom 2. Juni 2009. B. Die von H._ dagegen erhobene Beschwerde hiess das Versicherungsgericht des Kantons Aargau mit Entscheid vom 26. Oktober 2010 gut, indem es den Einspracheentscheid der Ausgleichskasse aufhob. C. Das Bundesamt für Sozialversicherungen (BSV) führt Beschwerde in öffentlich-rechtlichen Angelegenheiten und beantragt die Aufhebung des angefochtenen Entscheides. 