Sachverhalt: Sachverhalt: A. A.a Mit Vertrag vom 28. Juli 1989 mietete X._ (der Beklagte) von der Rechtsvorgängerin von Y._ (Kläger) verschiedene Bauten und Unterstände in einer Liegenschaft zum "Betrieb als Werkstätten/Lager und Verkauf gem. HR-Eintrag (als integrierender Bestandteil diesem Vertrag beigeheftet)". Gemäss Ziff. 2 des Vertrages, die unter dem Titel "Verwendungszweck" stand, sollten die Mietobjekte wie folgt genutzt werden: Erdgeschoss zum Betrieb von Werkstätten und als Ausstellungsräume zu Verkaufszwecken, Dachgeschoss zu Lagerzwecken von nicht feuergefährlichen Materialien. Im nächsten Absatz dieser Bestimmung verabredeten die Parteien, dass die gemieteten Objekte keinen anderen als den angegebenen Nutzungsarten zugeführt werden dürften und dass für jede Änderung im Gebrauch der Mietsache eine schriftliche Zustimmung der Vermieterschaft erforderlich sei. A.b Die Parteien gerieten mehrfach in gerichtliche Auseinandersetzungen. Mit amtlichem Formular vom 18. November 2003 kündigte der Kläger das Mietverhältnis auf den 30. Juni 2004 gestützt auf Art. 266g OR aus wichtigen Gründen wegen Verstössen gegen den Mietvertrag, strafbarer Handlungen gegen den Vermieter, schädigender Praktiken des Mieters, Weigerung, beanstandete Mängel zu beheben und Verhinderung von Unterhaltsleistungen. A.b Die Parteien gerieten mehrfach in gerichtliche Auseinandersetzungen. Mit amtlichem Formular vom 18. November 2003 kündigte der Kläger das Mietverhältnis auf den 30. Juni 2004 gestützt auf Art. 266g OR aus wichtigen Gründen wegen Verstössen gegen den Mietvertrag, strafbarer Handlungen gegen den Vermieter, schädigender Praktiken des Mieters, Weigerung, beanstandete Mängel zu beheben und Verhinderung von Unterhaltsleistungen. B. Der Kläger beantragte der Schlichtungsbehörde und nach fehlgeschlagenem Einigungsversuch mit Klage vom 9. Dezember 2004 dem Mietgericht des Bezirkes Zürich, dem Beklagten zu befehlen, das Mietobjekt zu räumen und vertragsgemäss sofort abzugeben, unter der Androhung der Bestrafung gemäss Art. 292 StGB im Widerhandlungsfalle. Das Mietgericht schützte die Klage und befahl dem Beklagten am 2. Dezember 2005, sämtliche Mietobjekte bis spätestens 30 Tage nach Eintritt der Rechtskraft des Urteils ordnungsgemäss zu übergeben, unter Androhung von Zwangsvollstreckung im Unterlassungsfall. Das Obergericht des Kantons Zürich wies die Berufung des Beklagten am 4. Mai 2006 ab und bestätigte das Urteil des Bezirksgerichts. C. Der Beklagte beantragt dem Bundesgericht mit eidgenössischer Berufung, die Aufhebung des Beschlusses des Obergerichts und die Abweisung der Klage. Der Kläger schliesst auf kostenfällige Abweisung der Berufung und Bestätigung des angefochtenen Beschlusses. 