Sachverhalt: A. Der 1963 geborene A._ war ab 1. August 2006 als Automatiker für die X._ AG tätig. Mit Schreiben vom 27. September 2012 kündigte er das Arbeitsverhältnis per 31. Dezember 2012. Er meldete sich am 16. Januar 2013 zur Arbeitsvermittlung an. Am 22. Januar 2013 stellte er Antrag auf Arbeitslosenentschädigung ab 7. Januar 2013, teilte mit, dass er am 20. Dezember 2012 die mündliche Zusage für eine neue Stelle erhalten habe und reichte eine Bestätigung des Logistikcenters D._ vom 15. Januar 2013 ein, worin der Stellenantritt auf den 1. März 2013 festgesetzt wurde. Die Kantonale Arbeitslosenkasse St. Gallen stellte ihn daraufhin ab "1. Januar 2013" für 35 Tage in der Anspruchsberechtigung ein mit der Begründung, es wäre ihm zumutbar gewesen, mit der Kündigung der alten Stelle bis zum definitiven Finden einer neuen Stelle zu warten, weshalb ihm ein schweres Verschulden an der Arbeitslosigkeit anzulasten sei (Verfügung vom 29. Januar 2013). Daran hielt sie auf Einsprache hin fest (Einspracheentscheid vom 2. April 2013). B. Das Versicherungsgericht des Kantons St. Gallen wies die dagegen erhobene Beschwerde ab (Entscheid vom 9. Dezember 2013). C. A._ führt am 16. Januar 2013 (Postaufgabedatum) Beschwerde in öffentlich-rechtlichen Angelegenheiten mit dem Rechtsbegehren, die 35 Einstelltage seien aufzuheben. Nachdem ihn das Bundesgericht auf einen Mangel in der Rechtsschrift hingewiesen hat, lässt er, nunmehr anwaltlich vertreten, mit Eingabe vom 3. Februar 2014 beantragen, der Entscheid des kantonalen Gerichts sei aufzuheben. Die Arbeitslosenkasse schliesst auf Abweisung der Beschwerde. Das Staatssekretariat für Wirtschaft verzichtet auf eine Stellungnahme. 