Sachverhalt: Sachverhalt: A. Der 1961 geborene türkische Staatsangehörige K._ war als Betriebsmitarbeiter bei der Firma A._ AG angestellt, als er am 22. Juni 1993 bei der Arbeit eine Vorfussquetschung erlitt. Von der Unfallversicherung wurde ihm deshalb in der Folge eine Invalidenrente von 18 % zugesprochen. Die Invalidenversicherung richtete ihm gemäss Verfügung vom 15. Januar 1996 für die Zeit vom 1. Juni bis 30. September 1994 eine befristete ganze Invalidenrente aus. Aufgrund einer Neuanmeldung vom 5. Juni 1997 sprach sie dem Versicherten im Wesentlichen gestützt auf das psychosomatische Gutachten der Klinik X._ vom 22. Dezember 1998 mit Verfügung vom 16. November 1999 mit Wirkung ab 1. Juni 1996 bei einem Invaliditätsgrad von 56 % eine halbe Invalidenrente zu (letztinstanzlich bestätigt gemäss Urteil des Eidgenössischen Versicherungsgerichts vom 5. März 2001, I 296/00). Mit Gesuch vom 27. März 2001 machte K._ unter Hinweis auf den Bericht des behandelnden Psychiaters Dr. med. B._ vom 9. Mai 2000 eine Verschlechterung seines Gesundheitszustandes geltend und ersuchte um Zusprechung einer ganzen Invalidenrente. Die IV-Stelle holte den Bericht des Dr. med. B._ vom 25. Juli 2001 ein, worauf der Versicherte einen Bericht dieses Arztes vom 4. Oktober 2001 einreichte. Mit Verfügung vom 13. November 2001 wies die IV-Stelle des Kantons Aargau das Revisionsgesuch ab. Das Versicherungsgericht des Kantons Aargau bestätigte diese Verfügung mit Entscheid vom 20. August 2002. Die dagegen erhobene Verwaltungsgerichtsbeschwerde hiess das Eidgenössische Versicherungsgericht mit Urteil vom 11. März 2003 gut, indem es den vorinstanzlichen Entscheid aus formellen Gründen aufhob und die Sache im Sinne der Erwägungen an das kantonale Gericht zurückwies, damit es unter Einbezug des im erstinstanzlichen Verfahren eingereichten psychiatrischen Gutachtens des Dr. med. O._ vom 20. Juni 2002 über die Beschwerde neu befinde. Mit Entscheid vom 12. August 2003 wies das Versicherungsgericht des Kantons Aargau die Beschwerde erneut ab. A. Der 1961 geborene türkische Staatsangehörige K._ war als Betriebsmitarbeiter bei der Firma A._ AG angestellt, als er am 22. Juni 1993 bei der Arbeit eine Vorfussquetschung erlitt. Von der Unfallversicherung wurde ihm deshalb in der Folge eine Invalidenrente von 18 % zugesprochen. Die Invalidenversicherung richtete ihm gemäss Verfügung vom 15. Januar 1996 für die Zeit vom 1. Juni bis 30. September 1994 eine befristete ganze Invalidenrente aus. Aufgrund einer Neuanmeldung vom 5. Juni 1997 sprach sie dem Versicherten im Wesentlichen gestützt auf das psychosomatische Gutachten der Klinik X._ vom 22. Dezember 1998 mit Verfügung vom 16. November 1999 mit Wirkung ab 1. Juni 1996 bei einem Invaliditätsgrad von 56 % eine halbe Invalidenrente zu (letztinstanzlich bestätigt gemäss Urteil des Eidgenössischen Versicherungsgerichts vom 5. März 2001, I 296/00). Mit Gesuch vom 27. März 2001 machte K._ unter Hinweis auf den Bericht des behandelnden Psychiaters Dr. med. B._ vom 9. Mai 2000 eine Verschlechterung seines Gesundheitszustandes geltend und ersuchte um Zusprechung einer ganzen Invalidenrente. Die IV-Stelle holte den Bericht des Dr. med. B._ vom 25. Juli 2001 ein, worauf der Versicherte einen Bericht dieses Arztes vom 4. Oktober 2001 einreichte. Mit Verfügung vom 13. November 2001 wies die IV-Stelle des Kantons Aargau das Revisionsgesuch ab. Das Versicherungsgericht des Kantons Aargau bestätigte diese Verfügung mit Entscheid vom 20. August 2002. Die dagegen erhobene Verwaltungsgerichtsbeschwerde hiess das Eidgenössische Versicherungsgericht mit Urteil vom 11. März 2003 gut, indem es den vorinstanzlichen Entscheid aus formellen Gründen aufhob und die Sache im Sinne der Erwägungen an das kantonale Gericht zurückwies, damit es unter Einbezug des im erstinstanzlichen Verfahren eingereichten psychiatrischen Gutachtens des Dr. med. O._ vom 20. Juni 2002 über die Beschwerde neu befinde. Mit Entscheid vom 12. August 2003 wies das Versicherungsgericht des Kantons Aargau die Beschwerde erneut ab. B. K._ lässt Verwaltungsgerichtsbeschwerde führen mit dem Antrag, es sei die Sache zur ergänzenden Abklärung an die Verwaltung zurückzuweisen. Die IV-Stelle schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde, während das Bundesamt für Sozialversicherung auf eine Vernehmlassung verzichtet. 