Sachverhalt: Sachverhalt: A. Die seit dem 4. Mai 1976 im Handelsregister des Kantons Zürich eingetragene Firma X._ wurde von G._ und O._ gemäss Kaufvertrag vom 20. März 1997 erworben. Sie war der Ausgleichskasse der Zürcher Arbeitgeber (nachfolgend: Ausgleichskasse) seit Mai 1997 als beitragspflichtige Arbeitgeberin angeschlossen und rechnete die paritätischen und FAK-Beiträge monatlich auf Grund einer Pauschale ab. Am 10. Januar 2001 wurde über die Gesellschaft der Konkurs eröffnet. Dabei kam die Ausgleichskasse mit ihrer Forderung paritätischer Sozialversicherungsbeiträge (Beiträge der AHV/ IV/ EO und der Arbeitslosenversicherung) für die Jahre 1998-2000 gemäss Konkurseingabe vom 2. März 2001 in der Höhe von Fr. 367'166.20 (zuzüglich Verwaltungskosten, Verzugszinsen, Mahngebühren und Betreibungskosten) zu Verlust. Mit Verfügung vom 23. November 2001 forderte die Ausgleichskasse von den ehemaligen Verwaltungsräten G._ und O._ in solidarischer Haftbarkeit Schadenersatz für entgangene Sozialversicherungsbeiträge im genannten Gesamtbetrag. Dagegen erhoben die Betroffenen am 9. Januar 2002 Einspruch. Mit Verfügung vom 23. November 2001 forderte die Ausgleichskasse von den ehemaligen Verwaltungsräten G._ und O._ in solidarischer Haftbarkeit Schadenersatz für entgangene Sozialversicherungsbeiträge im genannten Gesamtbetrag. Dagegen erhoben die Betroffenen am 9. Januar 2002 Einspruch. B. Mit Eingabe vom 8. Februar 2002 reichte die Ausgleichskasse beim Sozialversicherungsgericht des Kantons Zürich Klage auf Schadenersatz im reduzierten Umfang von Fr. 331'826.70 ein. Am 19. April 2002 liessen G._ und O._ beim kantonalen Gericht ein Fristwiederherstellungsbegehren stellen, welches mit Verfügung vom 25. April 2002 abgewiesen wurde. Nach dagegen erhobener Verwaltungsgerichtsbeschwerde bestätigte das Eidgenössische Versicherungsgericht die Abweisung des Begehrens mit Urteil vom 6. August 2002. Mit Entscheid vom 30. Juni 2003 hiess das kantonale Sozialversicherungsgericht die Klage der Ausgleichskasse gut, indem G._ und O._ verpflichtet wurden, ihr in solidarischer Haftung Schadenersatz in der Höhe von Fr. 331'826.70 zu bezahlen. Mit Entscheid vom 30. Juni 2003 hiess das kantonale Sozialversicherungsgericht die Klage der Ausgleichskasse gut, indem G._ und O._ verpflichtet wurden, ihr in solidarischer Haftung Schadenersatz in der Höhe von Fr. 331'826.70 zu bezahlen. C. Gegen den kantonalen Entscheid lässt G._ Verwaltungsgerichtsbeschwerde erheben und die Rechtsbegehren stellen, in Aufhebung des kantonalen Entscheides sei die Klage der Ausgleichskasse abzuweisen. Demgemäss sei unter Kosten- und Entschädigungsfolgen zu Lasten der Beschwerdegegnerin festzustellen, dass ihn keine solidarische Haftung für Forderungen der Ausgleichskasse gegen O._ treffe. Die Ausgleichskasse und das Bundesamt für Sozialversicherung sowie O._ verzichten auf eine Vernehmlassung. 