Sachverhalt: Sachverhalt: A. X._ (geb. 1984) stammt aus Bosnien-Herzegowina. Er wurde am 21. Juni 1993 als Flüchtling anerkannt. Am 5. Dezember 2005 widerrief das Bundesamt für Migration das Asyl, nachdem X._ hier wiederholt straffällig geworden und unter anderem zu einer Zuchthausstrafe von drei Jahren verurteilt worden war. Im Anschluss hieran wies die Fremdenpolizei des Kantons Schwyz ihn am 20. März 2006 aus der Schweiz aus. A. X._ (geb. 1984) stammt aus Bosnien-Herzegowina. Er wurde am 21. Juni 1993 als Flüchtling anerkannt. Am 5. Dezember 2005 widerrief das Bundesamt für Migration das Asyl, nachdem X._ hier wiederholt straffällig geworden und unter anderem zu einer Zuchthausstrafe von drei Jahren verurteilt worden war. Im Anschluss hieran wies die Fremdenpolizei des Kantons Schwyz ihn am 20. März 2006 aus der Schweiz aus. B. Am 18. September 2006 wurde X._ in Untersuchungshaft und auf seine Entlassung aus dieser hin am 27. September 2006 in Ausschaffungshaft genommen. Der ANAG-Einzelrichter am Verwaltungsgericht des Kantons Schwyz prüfte diese tags darauf und bestätigte sie bis zum 26. Februar 2007. B. Am 18. September 2006 wurde X._ in Untersuchungshaft und auf seine Entlassung aus dieser hin am 27. September 2006 in Ausschaffungshaft genommen. Der ANAG-Einzelrichter am Verwaltungsgericht des Kantons Schwyz prüfte diese tags darauf und bestätigte sie bis zum 26. Februar 2007. C. X._ hat hiergegen am 30. Oktober 2006 beim Bundesgericht Verwaltungsgerichtsbeschwerde eingereicht. Er beantragt, den angefochtenen Entscheid aufzuheben und die Vorinstanzen anzuweisen, ihn spätestens per 27. Dezember 2006 aus der Ausschaffungshaft zu entlassen. X._ macht geltend, der Haftrichter habe zu Unrecht die erstmalige Haft für fünf statt nur für drei Monate genehmigt. Der ANAG-Einzelrichter und das Bundesamt für Migration beantragen, die Beschwerde abzuweisen. 