Faits: A. B.X._ et A.X._ sont domiciliés à Z._, dans le canton de Genève. En 2009, A.X._ exerçait la profession d'inspecteur d'assurances. Par décisions sur réclamation du 10 novembre 2010, l'Administration fiscale cantonale genevoise (ci-après: Administration fiscale cantonale) a taxé les intéressés en matière d'impôt fédéral direct (ci-après: IFD) et d'impôts cantonal et communal (ci-après: ICC) pour l'année 2009. Elle a arrêté le revenu imposable à 185'500 fr. pour l'IFD et à 206'449 fr. pour l'ICC. L'Administration fiscale cantonale a notamment admis une déduction forfaitaire pour autres frais professionnels de 43'159 fr. fondée sur une attestation d'une association professionnelle. Le 23 février 2011, les contribuables ont recouru auprès du Tribunal administratif de première instance de la République et canton de Genève (ci-après: Tribunal administratif de première instance) contre les décisions du 10 novembre 2010. Ils ont conclu à la déduction de 57'392 fr., au titre d'autres frais professionnels effectifs. Par jugement du 14 mai 2012, le Tribunal administratif de première instance a rejeté le recours. Il a considéré qu'il appartenait aux intéressés de justifier l'intégralité des dépenses engagées. Les frais pour l'usage des locaux professionnels étaient admis à concurrence de 10'882 fr. pour le loyer, le chauffage et l'électricité, de même que les frais de location annuelle d'une place de parking, soit 600 fr., ainsi que les frais de téléphone du raccordement du bureau de 1'824,84 fr. et 60% des frais de téléphone portable à concurrence de 203 fr. Etaient en revanche écartés les frais de location des trois autres places de parking, de restaurants, de sortie de bureau, de train pour séminaires, faute de justification par pièces ou de démonstration d'un lien de nécessité ou de causalité avec l'exercice de l'activité professionnelle. Enfin, n'étant pas indépendant, A.X._ ne pouvait déduire les charges salariales de la personne qu'il employait. Le Tribunal administratif de première instance a encore relevé que le total des frais effectifs admissibles, soit 25'555,54 fr., était inférieur au montant forfaitaire admis par l'Administration fiscale cantonale et que la déduction du montant de 12'646 fr. au titre de commissions versées à des tiers n'était pas litigieuse. Les contribuables ont contesté ce prononcé, le 25 juin 2012, auprès de la Chambre administrative de la Cour de justice de la République et canton de Genève (ci-après: la Cour de justice). Ils ont conclu à la déduction de 53'654 fr. au titre de frais professionnels effectifs, tant en matière d'IFD que d'ICC pour la période 2009. Ils ont en particulier demandé l'audition en tant que témoins de la collaboratrice de l'intéressé et d'un représentant de l'employeur de celui-ci. B. Par arrêt du 27 août 2013, la Cour de justice a rejeté le recours. En procédant à une appréciation anticipée des preuves, elle a refusé l'audition des deux témoins. Elle a considéré que le contribuable n'avait produit aucune pièce permettant de retenir que l'utilisation de locaux professionnels et le recours à une collaboratrice à temps partiel n'étaient pas seulement utiles mais imposés par l'exercice de l'activité d'inspecteur d'assurances, et, dans cette hypothèse, que l'employeur de A.X._ ne prenait pas en charge les frais en découlant, étant rappelé qu'aux termes de l'art. 327a CO, l'employeur doit rembourser au travailleur tous les frais nécessaires pour l'exécution de son travail. La Cour de justice a donc retenu que le Tribunal administratif de première instance n'aurait pas dû admettre une partie des frais de locaux, de parking et de téléphone comme déductions, mais que cela ne modifiait toutefois pas l'issue du litige puisque l'exclusion du seul salaire de la collaboratrice du contribuable suffisait à ramener les frais effectifs allégués en-dessous des frais forfaitaires admis par l'Administration fiscale cantonale. C. Agissant par la voie du recours en matière de droit public, B.X._ et A.X._ demandent au Tribunal fédéral, sous suite de frais et dépens, d'annuler l'arrêt du 27 août 2013 en tant qu'il concerne l'IFD 2009 et l'ICC 2009 et de renvoyer la cause à l'Administration fiscale cantonale pour nouvelles décisions dans le sens des considérants. Ils se plaignent d'une violation de leur droit d'être entendus et de la violation des art. 26 al. 2 de la loi fédérale du 14 décembre 1990 sur l'impôt fédéral direct (LIFD; RS 642.11) et 9 al. 1 de la loi fédérale du 14 décembre 1990 sur l'harmonisation des impôts directs des cantons et des communes (LHID; RS 642.14). L'Administration fiscale cantonale et l'Administration fédérale des contributions concluent au rejet du recours. La Cour de justice a fait parvenir sa détermination au Tribunal fédéral tardivement. Dans des observations finales, les contribuables confirment leurs conclusions. 