Sachverhalt: Sachverhalt: A. Am 4. April 2001 wurde B._ bei der Einreise von Österreich in die Schweiz beim Zollamt Kriessern/SG einer Zollkontrolle unterzogen. Diese ergab, dass er 37 kg Schweinefleisch mitführte, die er nicht zur Verzollung angemeldet hatte. Wie sich in der gegen ihn angehobenen Untersuchung herausstellte, hatte B._ seit mehreren Jahren ohne Zollanmeldung Schweinefleisch aus Österreich in die Schweiz eingeführt. Dieses verkaufte er jeweils an verschiedene Restaurants, darunter regelmässig auch das Restaurant S._ in X._. Dessen Eigentümer und Betreiber, A._, bezog zwischen 1997 und 2001 von B._ insgesamt 4055,4 kg Fleisch (vorwiegend Schweinefleisch). Am 30. August 2001 stellte die Zollkreisdirektion Schaffhausen gegen A._ ein Schlussprotokoll aus. Mit diesem wurde ihm zur Last gelegt, gegen das Zollgesetz, das Tierseuchengesetz sowie das Mehrwertsteuerrecht verstossen zu haben. Gleichzeitig erliess sie eine Verfügung, mit welcher sie A._ in solidarischer Leistungspflicht mit B._ für Abgaben in der Höhe von insgesamt Fr. 91'475.85 (Zoll: Fr. 87'827.--; Mehrwertsteuer: Fr. 3'648.85) leistungspflichtig erklärte. Dieser Betrag entspricht den auf dem von B._ bezogenen Fleisch lastenden Abgaben. Mit Entscheid vom 6. Januar 2003 wies die Oberzolldirektion die von A._ am 25. September 2001 gegen seine Leistungsverpflichtung erhobene Beschwerde ab. Dagegen wandte sich A._ an die Eidgenössische Zollrekurskommission, welche seine Beschwerde am 12. November 2003 abwies. Dagegen wandte sich A._ an die Eidgenössische Zollrekurskommission, welche seine Beschwerde am 12. November 2003 abwies. B. Mit Verwaltungsgerichtsbeschwerde vom "10. Dezember 2003" (der Post übergeben am 3. Dezember 2003) beantragt A._ dem Bundesgericht, die Entscheide der Eidgenössischen Zollrekurskommission und der Oberzolldirektion sowie die Verfügung der Zollkreisdirektion Schaffhausen aufzuheben. Die Oberzolldirektion beantragt, die Verwaltungsgerichtsbeschwerde abzuweisen. Die Eidgenössische Zollrekurskommission hat auf eine Vernehmlassung verzichtet. 