Sachverhalt: Sachverhalt: A. Der 1965 geborene G._ war ab 1. September 1994 als Sachbearbeiter bei der Firma N._ angestellt, wobei er seit April 1995 in einem Teilzeitpensum von 90 % tätig war. Für die berufliche Vorsorge war er bei der Pensionskasse der Firma N._ versichert. Auf den 29. Februar 1996 löste er das Arbeitsverhältnis auf. Am 2. Mai 1996 trat G._ eine neue Stelle als Sachbearbeiter bei der Firma V._ an und war bei deren Vorsorgestiftung für die berufliche Vorsorge versichert. Zusätzlich arbeitete er während Jahren teilzeitlich als Schlafwagenbegleiter. Nachdem er gemäss Attest der Psychiaterin Frau Dr. med. et phil. T._ (vom 12. Juni 1996) seit 7. Mai 1996 zufolge Krankheit voll arbeitsunfähig gewesen war, kündigte die Firma V._ den Arbeitsvertrag auf den 17. Juni 1996. Mit Schreiben vom 21. Juni 1996 trat die Vorsorgestiftung der Elvia vom Vorsorgevertrag zurück, weil G._ bei der medizinischen Untersuchung wesentliche Fragen nicht oder falsch beantwortet habe. Mit Verfügung vom 28. Dezember 1998 sprach die IV-Stelle Basel-Stadt G._ rückwirkend ab 1. Mai 1997 bei einem Invaliditätsgrad von 100 % eine ganze Invalidenrente zu. Am 19. Februar 1999 beschied die Pensionskasse der Firma N._ das Gesuch von G._ um Gewährung von Invalidenleistungen abschlägig mit der Begründung, dass die der Invalidität zu Grunde liegende Arbeitsunfähigkeit nach dem Austritt aus der Firma N._ eingetreten sei. Mit Schreiben vom 3. Mai 1999 lehnte es die Vorsorgestiftung der Elvia ebenfalls ab, Leistungen aus der beruflichen Vorsorge zu erbringen, weil G._ bereits vor dem Stellenantritt bei der Firma V._ erheblich in der Arbeitsfähigkeit eingeschränkt gewesen sei. Mit Verfügung vom 28. Dezember 1998 sprach die IV-Stelle Basel-Stadt G._ rückwirkend ab 1. Mai 1997 bei einem Invaliditätsgrad von 100 % eine ganze Invalidenrente zu. Am 19. Februar 1999 beschied die Pensionskasse der Firma N._ das Gesuch von G._ um Gewährung von Invalidenleistungen abschlägig mit der Begründung, dass die der Invalidität zu Grunde liegende Arbeitsunfähigkeit nach dem Austritt aus der Firma N._ eingetreten sei. Mit Schreiben vom 3. Mai 1999 lehnte es die Vorsorgestiftung der Elvia ebenfalls ab, Leistungen aus der beruflichen Vorsorge zu erbringen, weil G._ bereits vor dem Stellenantritt bei der Firma V._ erheblich in der Arbeitsfähigkeit eingeschränkt gewesen sei. B. Am 21. Mai 2001 liess G._ beim Sozialversicherungsgericht des Kantons Zürich Klage einreichen mit dem Antrag, die Vorsorgestiftung der Elvia sei zu verpflichten, ihm ab 1. Mai 1998 eine jährliche Invalidenrente von Fr. 33'000.- sowie das gemäss Leistungsausweis versicherte Invaliditätskapital von Fr. 66'000.-, je zuzüglich Zins zu 5 % seit Klageeinreichung, zu bezahlen. In verfahrensrechtlicher Hinsicht liess er beantragen, die Pensionskasse der Firma N._ sei zum Verfahren beizuladen, welchem Rechtsbegehren das Sozialversicherungsgericht mit Verfügung vom 31. Mai 2001 und Zwischenentscheid vom 1. November 2001 stattgab. Nach Beizug der Akten der Invalidenversicherung holte das kantonale Gericht eine ergänzende Stellungnahme der Frau Dr. T._ (vom 14. April 2003) ein. Mit Entscheid vom 15. August 2003 verpflichtete es die Vorsorgestiftung der Elvia in Gutheissung der Klage, G._ nebst einem Invaliditätskapital von Fr. 66'000.- ab 1. Mai 1998 eine ganze Invalidenrente in der Höhe von jährlich Fr. 33'000.- unter Anpassung an die Preisentwicklung gemäss BVG, zuzüglich Verzugszins von 5 % auf den von Mai 1998 bis Juni 2001 geschuldeten Rentenbetreffnissen ab 22. Mai 2001, für die restlichen ab dem jeweiligen Fälligkeitsdatum, auszurichten. Gleichzeitig verpflichtete es G._, die ihm ausgerichtete Austrittsleistung von Fr. 7715.30, samt Zinsen, zurückzuerstatten. B. Am 21. Mai 2001 liess G._ beim Sozialversicherungsgericht des Kantons Zürich Klage einreichen mit dem Antrag, die Vorsorgestiftung der Elvia sei zu verpflichten, ihm ab 1. Mai 1998 eine jährliche Invalidenrente von Fr. 33'000.- sowie das gemäss Leistungsausweis versicherte Invaliditätskapital von Fr. 66'000.-, je zuzüglich Zins zu 5 % seit Klageeinreichung, zu bezahlen. In verfahrensrechtlicher Hinsicht liess er beantragen, die Pensionskasse der Firma N._ sei zum Verfahren beizuladen, welchem Rechtsbegehren das Sozialversicherungsgericht mit Verfügung vom 31. Mai 2001 und Zwischenentscheid vom 1. November 2001 stattgab. Nach Beizug der Akten der Invalidenversicherung holte das kantonale Gericht eine ergänzende Stellungnahme der Frau Dr. T._ (vom 14. April 2003) ein. Mit Entscheid vom 15. August 2003 verpflichtete es die Vorsorgestiftung der Elvia in Gutheissung der Klage, G._ nebst einem Invaliditätskapital von Fr. 66'000.- ab 1. Mai 1998 eine ganze Invalidenrente in der Höhe von jährlich Fr. 33'000.- unter Anpassung an die Preisentwicklung gemäss BVG, zuzüglich Verzugszins von 5 % auf den von Mai 1998 bis Juni 2001 geschuldeten Rentenbetreffnissen ab 22. Mai 2001, für die restlichen ab dem jeweiligen Fälligkeitsdatum, auszurichten. Gleichzeitig verpflichtete es G._, die ihm ausgerichtete Austrittsleistung von Fr. 7715.30, samt Zinsen, zurückzuerstatten. C. Mit Verwaltungsgerichtsbeschwerde beantragt die Vorsorgestiftung, unter Aufhebung des vorinstanzlichen Entscheides sei die Klage abzuweisen; eventuell sei ihre Leistungspflicht auf die obligatorische berufliche Vorsorge zu beschränken und die Sache sei zur Festlegung der obligatorischen Mindestleistungen an das kantonale Gericht zurückzuweisen. G._ lässt auf Abweisung der Verwaltungsgerichtsbeschwerde schliessen. Die als Mitinteressierte beigeladene Pensionskasse der Firma N._ und das Bundesamt für Sozialversicherung (BSV) nehmen ebenfalls in ablehnendem Sinne Stellung zur Verwaltungsgerichtsbeschwerde. 