Sachverhalt: A. Am 31. Januar 2010 um ca. 07.10 Uhr wurde A._ nach einem Besuch des Lokals B._ von mehreren Personen zusammengeschlagen. Er erlitt aufgrund von Tritten gegen den Körper und Kopf diverse Verletzungen im Gesicht, an den Schultern und am Rücken. X._ wird vorgeworfen, an diesem Übergriff beteiligt gewesen zu sein. Kurz zuvor hatte A._ im Innern des Lokals eine Bierflasche gegen den Kopf von X._ geworfen, was bei diesem eine Risswunde im Bereich der rechten Augenbraue verursachte. Bevor A._ vom Sicherheitsdienst aus dem Lokal geführt wurde, war es in der Männertoilette des Lokals zu einer handgreiflichen Auseinandersetzung zwischen X._ und A._ gekommen. B. Das Kantonsgericht St. Gallen verurteilte X._ am 11. November 2013 zweitinstanzlich wegen versuchter schwerer Körperverletzung zu einer teilbedingten Freiheitsstrafe von 2 1⁄2 Jahren. Es verpflichtete ihn, A._ eine Genugtuung von Fr. 6'000.-- nebst Zins sowie eine Parteientschädigung von Fr. 5'568.25 zu bezahlen. C. X._ führt Beschwerde in Strafsachen mit dem Antrag, das Urteil des Kantonsgerichts sei aufzuheben. Er sei vollumfänglich freizusprechen. Auf die Anträge von A._ sei nicht einzutreten, eventualiter seien diese abzuweisen. Er ersucht um Gewährung der aufschiebenden Wirkung sowie der unentgeltlichen Rechtspflege und Verbeiständung. 