Aktienkaufvertrag; Vergleichsvereinbarung, hat sich ergeben: A.- Mit Vertrag vom 28. Dezember 1988 verkaufte B._ 49% der Aktienanteile der X._ AG an C._ zum Preis von Fr. 350'000.--. Dieser Vertrag wurde in der Folge von keiner Seite erfüllt. Am 29. Mai 1992 schlossen die Parteien eine als Vergleich benannte Vereinbarung, mit der sie Klarheit hinsichtlich der Beteiligungsverhältnisse an der X._ AG und an deren Tochtergesellschaften schaffen wollten. In dieser Vereinbarung wurde der Kaufvertrag vom 28. Dezember 1988 als hinfällig erklärt und C._ anerkannte, dass er am Aktienkapital der X._ AG oder am Gesellschaftskapital der Tochtergesellschaften nicht beteiligt sei und ihm diesbezüglich keine Ansprüche zuständen. C._ verpflichtete sich sodann, alle Erklärungen abzugeben bzw. Handlungen vorzunehmen, die für die Erfüllung der Vereinbarung notwendig sein sollten. B._ verpflichtete sich seinerseits, C._ einen Betrag von Fr. 1'450'000.-- in Raten zu bezahlen. Am 30. August 1992 schlossen die Parteien eine zweite Vereinbarung, mit der sie jene vom 29. Mai 1992 teilweise änderten. Sie hielten zudem fest, dass B._ bisher Zahlungen im Gesamtbetrag von Fr. 775'000.-- erbracht habe und C._ bestimmten Vertragspflichten noch nicht nachgekommen sei. Mit Schreiben vom 18. Dezember 1992 erklärte C._ gegenüber B._, er trete von den Vereinbarungen vom 29. Mai und 30. August 1992 wegen Täuschung und Grundlagenirrtums zurück. Er machte geltend, er sei über den Preis getäuscht worden, zu welchem die Aktien der X._ AG an einen Dritten verkauft worden seien, und es hätten sich "auch weitere Vertragsgrundlagen als hinfällig erwiesen". Er kündigte an, er werde seinen Rechtsanwalt mit der Rückabwicklung der Vertragsverhältnisse beauftragen. Mit Brief vom 3. Januar 1994 nahm der Anwalt von C._ gegenüber jenem von B._ Bezug auf die mehrmonatigen, erfolglosen Vergleichsverhandlungen zwischen den Parteien und erklärte, dass sein Mandant nun die unverzügliche beidseitige volle Erfüllung der Vereinbarungen vom 29. Mai und 30. August 1992 verlange. Darauf wies der Rechtsvertreter von B._ mit Antwortschreiben vom 10. Januar 1994 darauf hin, dass C._ die Vereinbarungen wegen Täuschung und Grundlagenirrtums angefochten habe, und stellte die Frage, ob es nicht widersprüchlich sei, wenn gleichwohl ein dermassen angefochtener Vertrag vollzogen werden solle. Er schloss das Schreiben mit der Mitteilung, dass er die Äusserungen des Gegenanwalts nicht als Abbruch der Vergleichsverhandlungen verstehe. Dieser antwortete am folgenden Tag, dass das Verhalten seines Klienten nicht widersprüchlich sei, weil dieser den Vertrag trotz der Anfechtung nachträglich genehmigen könne, wenn die Gegenpartei die Wirksamkeit der Anfechtung bestreite. Im Übrigen erklärte er, an der Aufforderung zur Vertragserfüllung gemäss seinem Schreiben vom 3. Januar 1994 festzuhalten. Mit schriftlicher Erklärung, datiert vom 11. Januar 1994, trat C._ seine sämtlichen Ansprüche aus den Vereinbarungen vom 28. Dezember 1988 sowie vom 29. Mai und 30. August 1992 mit B._ an A._ ab. B.- Am 10. Juni 1994 reichte A._ beim Bezirksgericht March Klage gegen B._ ein. Der Kläger stellte das Rechtsbegehren, den Beklagten zur Zahlung von Fr. 571'625.-- nebst Zins zu verpflichten. Mit Urteil vom 24. September 1998 verpflichtete das Bezirksgericht den Beklagten, dem Kläger bei Erhalt der Erklärungen im Sinne von Ziff. 4 der Vereinbarung vom 29. Mai 1992 Zug um Zug Fr. 423'875.-- zu zahlen. Auf Berufung des Beklagten und Anschlussberufung des Klägers hin wies das Kantonsgericht des Kantons Schwyz die Klage mit Urteil vom 14. November 2000 ab. C.- Mit Berufung beantragt der Kläger dem Bundesgericht, das Urteil des Kantonsgerichts aufzuheben und den Beklagten zur Zahlung von Fr. 423'875.-- zu verpflichten, eventuell die Sache zur Neubeurteilung an die Vorinstanz zurückzuweisen. Der Beklagte schliesst auf Abweisung der Berufung. 