Sachverhalt: Sachverhalt: A. X._ reichte am 7. September 2006 in einer Bausache eine Beschwerde beim Verwaltungsgericht des Kantons Appenzell Ausserrhoden ein. Am 11. September 2006 stellte er ein Ausstandsbegehren gegen den Verwaltungsgerichtsschreiber Toni Bienz. Zur Begründung führte er an, dieser habe in einem anderen Verfahren (Proz. Nr. 03-07-II) vor Verwaltungsgericht im Wissen um seinen bevorstehenden Auslandaufenthalt ein Urteilsdispositiv mutwillig zurückgehalten und verspätet verschickt, sodass er es vor seiner Abreise nicht mehr erhalten habe. Anschliessend habe der Verwaltungsgerichtsschreiber das Urteil mit einem verleumderischen Begleitbrief seiner betagten Mutter zugestellt, welche seither schockiert und nur noch schwer ansprechbar sei. Das Verwaltungsgericht wies das Ausstandsbegehren am 26. September 2006 ab. Das Verwaltungsgericht wies das Ausstandsbegehren am 26. September 2006 ab. B. Mit staatsrechtlicher Beschwerde vom 3. November 2006 wegen Willkür beantragt X._, diesen Entscheid aufzuheben und seinem Ausstandsbegehren stattzugeben. Ausserdem ersucht er um unentgeltliche Rechtspflege. Das Departement Bau und Umwelt des Kantons Appenzell Ausserrhoden verzichtet auf Vernehmlassung. Der Verwaltungsgerichtsschreiber weist die gegen ihn erhobenen Vorwürfe zurück und verweist auf den angefochtenen Entscheid. Das Verwaltungsgericht verzichtet auf Vernehmlassung. Der Beschwerdeführer teilt mit, er habe inzwischen gegen den Verwaltungsgerichtsschreiber Strafanzeige wegen Amtsgeheimnisverletzung eingereicht und repliziert auf dessen Vernehmlassung. 