Faits : Faits : A. AX._ et BX._ sont domiciliés à Z._. AX._ est avocat-notaire. Le Service cantonal des contributions du canton du Valais (ci-après: le Service des contributions) a procédé à un contrôle des comptes des exercices 1995 à 1998 de AX._. Un rapport d'expertise a été rendu le 2 octobre 2000. Il proposait des reprises d'un montant de 142'479 fr. pour l'exercice 1995, de 35'444 fr. pour l'exercice 1996, de 26'323 fr. pour l'exercice 1997 et de 22'910 fr. pour l'exercice 1998. Ces reprises concernaient des débiteurs comptabilisés de façon incorrecte, des frais généraux trop élevés sur lesquels une part privée a été calculée et un compte bancaire qui n'avait pas été déclaré. Les bordereaux définitifs du 11 octobre 2000 fixaient le revenu imposable pour l'impôt fédéral direct de la période fiscale 1997/1998 à 316'000 fr. et à 317'000 fr. pour les impôts cantonal et communal de la même période. Ces bordereaux n'ont pas été attaqués et sont entrés en force. Le Service cantonal des contributions du canton du Valais (ci-après: le Service des contributions) a procédé à un contrôle des comptes des exercices 1995 à 1998 de AX._. Un rapport d'expertise a été rendu le 2 octobre 2000. Il proposait des reprises d'un montant de 142'479 fr. pour l'exercice 1995, de 35'444 fr. pour l'exercice 1996, de 26'323 fr. pour l'exercice 1997 et de 22'910 fr. pour l'exercice 1998. Ces reprises concernaient des débiteurs comptabilisés de façon incorrecte, des frais généraux trop élevés sur lesquels une part privée a été calculée et un compte bancaire qui n'avait pas été déclaré. Les bordereaux définitifs du 11 octobre 2000 fixaient le revenu imposable pour l'impôt fédéral direct de la période fiscale 1997/1998 à 316'000 fr. et à 317'000 fr. pour les impôts cantonal et communal de la même période. Ces bordereaux n'ont pas été attaqués et sont entrés en force. B. Par courrier du 9 novembre 2000, le Service des contributions informait AX._ et BX._ de l'ouverture d'une procédure de tentative de soustraction d'impôt dans le cadre des périodes fiscales 1997 à 2000. Les amendes ont été prononcées par décision du 27 septembre 2002. En ce qui concerne l'impôt fédéral direct de la période fiscale 1997/1998, le revenu imposable était fixé à 316'000 fr. alors que les intéressés avaient été taxés initialement, de façon provisoire, sur un revenu de 249'000 fr. L'impôt soustrait était de 17'368 fr. pour les deux années de la période fiscale. L'amende s'élevait à 11'579 fr., soit aux 2/3 de l'impôt soustrait. Les amendes se montaient à 14'687 fr. pour l'impôt cantonal et à 13'358 fr. pour l'impôt communal, soit également aux 2/3 de l'impôt soustrait. Le 22 juillet 2005, le Service des contributions a rejeté la réclamation de AX._ en tant qu'elle concernait l'impôt fédéral direct de la période fiscale 1997/1998; la réclamation concernant les impôts cantonaux et communaux restant en suspens. Par décision du 19 octobre 2005, notifiée le 11 mai 2006, la Commission cantonale de recours en matière fiscale du canton du Valais (ci-après: la Commission cantonale de recours) a rejeté le recours de l'intéressé. Elle a en substance estimé que tant les conditions objectives que subjectives de la tentative de soustraction étaient remplies. Quant à la quotité de l'amende, elle avait été fixée, conformément au texte légal relevant, compte tenu du montant d'impôt soustrait et de la gravité de la faute de AX._. Par décision du 19 octobre 2005, notifiée le 11 mai 2006, la Commission cantonale de recours en matière fiscale du canton du Valais (ci-après: la Commission cantonale de recours) a rejeté le recours de l'intéressé. Elle a en substance estimé que tant les conditions objectives que subjectives de la tentative de soustraction étaient remplies. Quant à la quotité de l'amende, elle avait été fixée, conformément au texte légal relevant, compte tenu du montant d'impôt soustrait et de la gravité de la faute de AX._. C. Dans son recours de droit administratif déposé le 12 juin 2006, AX._ demande au Tribunal fédéral, sous suite de frais et dépens, d'annuler la décision du 19 octobre 2005 de la Commission cantonale de recours, de renvoyer le dossier à l'autorité cantonale afin qu'elle procède à l'audition du recourant et qu'elle prononce une nouvelle décision dans le sens des considérants. Il estime que les garanties de procédure découlant de l'art. 6 CEDH n'ont pas été respectées et qu'il aurait dû être entendu par la Commission cantonale de recours. La Commission cantonale de recours, le Service des contributions et l'Administration fédérale des contributions concluent au rejet du recours sous suite de frais. La Commission cantonale de recours et l'Administration fédérale des contributions évoquant la possible prescription absolue de la poursuite pénale dans leurs observations, le Tribunal fédéral a invité le recourant et le Service cantonal des contributions, par courrier du 2 mars 2007, à s'exprimer sur cette question. Les parties estiment que ladite prescription a été acquise au mois de novembre 2006. 