Sachverhalt: Sachverhalt: A. Am 13. Juni 2002 reichte X._ beim Gemeinderat Diepoldsau ein Baugesuch für die Errichtung eines Stöcklis und einer Remise auf seinem Grundstück, Parzelle Nr. 954 Grundbuch Diepoldsau, ein. Am 15. Juli 2003 stimmte der Gemeinderat dem Bauvorhaben unter Hinweis auf die raumplanungsrechtliche Teilverfügung des Amts für Raumentwicklung vom 9. Juli 2003 zu. In der Folge wurde festgestellt, dass das Stöckli nicht gemäss der Baubewilligung erstellt wurde. Am 20. Juni 2005 reichte X._ ein Korrekturgesuch ein. Dieses wies das Amt für Raumentwicklung mit Teilverfügung vom 16. September 2005 ab. Mit Entscheid vom 28. September 2005 verweigerte der Gemeinderat Diepoldsau die nachträgliche Baubewilligung. Gegen diesen Entscheid erhob X._ am 12. Oktober 2005 Rekurs beim Baudepartement des Kantons St. Gallen. Nachdem der Rekurrent den verlangten Kostenvorschuss nicht innert Frist geleistet hatte, wurde das Rekursverfahren am 18. November 2005 abgeschrieben. Am 4. Januar 2006 beschloss der Gemeinderat Diepoldsau unter Bezugnahme auf die Beurteilung des Amts für Raumentwicklung vom 19. Dezember 2005, dass für eine von X._ anbegehrte Projektänderung (Stilllegung verschiedener Räume anstelle eines Rückbaus) keine Baubewilligung in Aussicht gestellt werden könne. Am 27. Januar 2006 teilte der Gemeinderat Diepoldsau X._ mit, die Verweigerung der Baubewilligung sei in Rechtskraft erwachsen und es werde die Wiederherstellung des rechtmässigen Zustandes angeordnet werden müssen. Am 4. Januar 2006 beschloss der Gemeinderat Diepoldsau unter Bezugnahme auf die Beurteilung des Amts für Raumentwicklung vom 19. Dezember 2005, dass für eine von X._ anbegehrte Projektänderung (Stilllegung verschiedener Räume anstelle eines Rückbaus) keine Baubewilligung in Aussicht gestellt werden könne. Am 27. Januar 2006 teilte der Gemeinderat Diepoldsau X._ mit, die Verweigerung der Baubewilligung sei in Rechtskraft erwachsen und es werde die Wiederherstellung des rechtmässigen Zustandes angeordnet werden müssen. B. Diese Anordnung traf der Gemeinderat mit Beschluss vom 8. März 2006, nachdem der Bauherr am 23. Februar 2006 erfolglos den Verzicht auf die Wiederherstellung beantragt hatte. Das Baudepartement führte auf Rekurs von X._ hin am 5. Juni 2006 in Anwesenheit der Verfahrensbeteiligten und eines Vertreters des Landwirtschaftlichenzentrums St. Gallen einen Augenschein durch und wies den Rekurs am 29. September 2006 ab, soweit es darauf eintrat. Der Entscheid wurde am 2. Oktober 2006 versandt. B. Diese Anordnung traf der Gemeinderat mit Beschluss vom 8. März 2006, nachdem der Bauherr am 23. Februar 2006 erfolglos den Verzicht auf die Wiederherstellung beantragt hatte. Das Baudepartement führte auf Rekurs von X._ hin am 5. Juni 2006 in Anwesenheit der Verfahrensbeteiligten und eines Vertreters des Landwirtschaftlichenzentrums St. Gallen einen Augenschein durch und wies den Rekurs am 29. September 2006 ab, soweit es darauf eintrat. Der Entscheid wurde am 2. Oktober 2006 versandt. C. Auf eine vom Rechtsvertreter mit Eingabe vom 23. Oktober 2006 erhobene Beschwerde trat das Verwaltungsgericht des Kantons St. Gallen wegen Verspätung nicht ein. X._ führt gegen dieses Urteil mit Eingabe vom 16. Mai 2007 beim Bundesgericht Beschwerde in öffentlich-rechtlichen Angelegenheiten mit dem Begehren, das Urteil des Verwaltungsgerichts des Kantons St. Gallen vom 11. April 2007 aufzuheben. Er macht geltend, das Baudepartement habe den am 29. September 2006 gefällten Entscheid dem Rechtsvertreter per A-Post zukommen lassen, obwohl die Zustellung gemäss Vermerk per Einschreiben erfolgt sein soll. Der Rechtsvertreter habe das ihm am 3. Oktober 2006 ins Postfach gelegte Kuvert nicht geöffnet, sondern bei einer Poststelle die Korrektur des Versehens erwirkt und das Schreiben als eingeschriebene Sendung am 10. Oktober 2007 entgegengenommen, womit die 14-tägige Rechtsmittelfrist eingehalten worden sei. Das Verwaltungsgericht und das Baudepartement des Kantons St. Gallen beantragen, die Beschwerde sei abzuweisen. Die politische Gemeinde Diepoldsau hat auf einen Antrag verzichtet. Das Verwaltungsgericht und das Baudepartement des Kantons St. Gallen beantragen, die Beschwerde sei abzuweisen. Die politische Gemeinde Diepoldsau hat auf einen Antrag verzichtet. D. Mit Verfügung vom 18. Juni 2007 hat das präsidierende Mitglied der I. öffentlich-rechtlichen Abteilung des Bundesgerichts der Beschwerde gesuchsgemäss die aufschiebende Wirkung zuerkannt. 