Sachverhalt: Sachverhalt: A. Der 1967 geborene E._ bezieht zufolge eines psychischen Leidens ab 1. April 2001 eine ganze Rente der Invalidenversicherung. Vom 8. Mai 2003 bis zu seiner bedingten Entlassung am 24. Juni 2004 verbüsste er eine Zuchthausstrafe in der Strafanstalt X._. Nachdem die IV-Stelle des Kantons Zürich von dieser Tatsache seitens Dritter Kenntnis erhielt, forderte sie zu viel bezogene Rentenleistungen in der Höhe von Fr. 20'256.- zurück (Verfügung vom 12.Oktober 2004). Diese Verfügung ist unangefochten in Rechtskraft erwachsen. Am 10. November 2004 liess der Versicherte ein Erlassgesuch stellen, welches die IV-Stelle wegen fehlenden guten Glaubens beim Leistungsbezug (Meldepflichtverletzung) mit Verfügung vom 27. Dezember 2004 abwies. Daran hielt sie mit Einspracheentscheid vom 21. Februar 2005 fest. A. Der 1967 geborene E._ bezieht zufolge eines psychischen Leidens ab 1. April 2001 eine ganze Rente der Invalidenversicherung. Vom 8. Mai 2003 bis zu seiner bedingten Entlassung am 24. Juni 2004 verbüsste er eine Zuchthausstrafe in der Strafanstalt X._. Nachdem die IV-Stelle des Kantons Zürich von dieser Tatsache seitens Dritter Kenntnis erhielt, forderte sie zu viel bezogene Rentenleistungen in der Höhe von Fr. 20'256.- zurück (Verfügung vom 12.Oktober 2004). Diese Verfügung ist unangefochten in Rechtskraft erwachsen. Am 10. November 2004 liess der Versicherte ein Erlassgesuch stellen, welches die IV-Stelle wegen fehlenden guten Glaubens beim Leistungsbezug (Meldepflichtverletzung) mit Verfügung vom 27. Dezember 2004 abwies. Daran hielt sie mit Einspracheentscheid vom 21. Februar 2005 fest. B. Die hiegegen erhobene Beschwerde wies das Sozialversicherungsgericht des Kantons Zürich mit Entscheid vom 29. Juni 2005 ab. B. Die hiegegen erhobene Beschwerde wies das Sozialversicherungsgericht des Kantons Zürich mit Entscheid vom 29. Juni 2005 ab. C. E._ beantragt mit Verwaltungsgerichtsbeschwerde die Aufhebung des kantonalen Gerichtsentscheides. Sowohl die IV-Stelle wie das Bundesamt für Sozialversicherung haben auf eine Vernehmlassung verzichtet. 