Sachverhalt: A. A._, geboren 1966, meldete sich am 30. März 2006 unter Hinweis namentlich auf Rücken- und psychische Beschwerden bei der Invalidenversicherung zum Leistungsbezug an. Die IV-Stelle Schwyz liess ihn zunächst psychiatrisch durch das Institut X._ abklären (Gutachten vom 14. Dezember 2007) und holte anschliessend auf Empfehlung ihres Regionalen Ärztlichen Dienstes (RAD) ein interdisziplinäres Gutachten (mit orthopädischer, neurochirurgischer und psychiatrischer Untersuchung) der Medizinischen Abklärungsstelle (MEDAS) vom 25. September 2009 ein. Dem Versicherten wurde eine volle Arbeitsfähigkeit mit einer 10%igen Leistungseinbusse attestiert. Gestützt darauf lehnte die IV-Stelle den Anspruch auf eine Invalidenrente mit Verfügung vom 19. Mai 2010 ab. Sie gewährte jedoch gleichentags berufliche Massnahmen und übernahm die Kosten für ein Arbeitstraining. Nachdem der Hausarzt am 23. September 2011 neue medizinische Unterlagen eingereicht hatte, liess die IV-Stelle den Versicherten durch das Zentrum Z._ abklären (Gutachten vom 7. Januar 2013). Mit Verfügung vom 29. April 2013 lehnte sie den Anspruch auf eine Invalidenrente erneut ab. B. Die dagegen erhobene Beschwerde wies das Verwaltungsgericht des Kantons Schwyz mit Entscheid vom 17. Dezember 2013 ab. C. A._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen mit dem Antrag, unter Aufhebung des angefochtenen Entscheides sei ihm eine ganze, eventualiter mindestens eine Viertelsrente zuzusprechen. Die vorinstanzlichen Akten wurden eingeholt. Ein Schriftenwechsel wurde nicht durchgeführt. 