Faits: Faits: A. Par jugement du 23 avril 2004, la Cour d'assises du Tribunal cantonal neuchâtelois a condamné X._, pour actes d'ordre sexuel avec des enfants (art. 187 CP) et pour pornographie (art. 197 CP), à une peine de quatre ans et demi de réclusion, sous déduction de dix-neuf jours de détention préventive subie, cette peine étant complémentaire à la peine de six mois prononcée avec sursis le 5 juillet 2002 par le Tribunal de police du district du Val-de-Travers. En outre, la cour a révoqué le sursis à cette dernière peine et a ordonné un traitement thérapeutique ambulatoire pendant l'exécution de la peine privative de liberté. Enfin, elle a prononcé la confiscation et la destruction du matériel pornographique saisi en cours d'enquête. Par arrêt du 12 novembre 2004, la Cour de cassation pénale du Tribunal cantonal neuchâtelois a rejeté le pourvoi en cassation formé par X._. Par arrêt du 12 novembre 2004, la Cour de cassation pénale du Tribunal cantonal neuchâtelois a rejeté le pourvoi en cassation formé par X._. B. En résumé, l'arrêt cantonal repose sur les faits suivants: B.a Dès le mois de septembre 1997, X._ a vécu en ménage avec Y._ et les trois enfants de celle-ci, A._, née le 17 octobre 1993, B._, né le 28 décembre 1990, et C._, né le 7 décembre 1987. Entre le début de l'année 2001 et le mois d'août 2003, X._ a commis des actes sexuels sur les enfants de sa compagne. Il a caressé les parties intimes des enfants. Il leur a demandé et obtenu qu'ils lui introduisent divers objets dans l'anus, qu'ils le masturbent, le sodomisent, lui urinent dessus et lui prodiguent des fellations, éjaculant à ces occasions devant eux, même dans la bouche de l'un d'eux. Il a également fait subir aux enfants divers actes de cette nature. Entre l'année 2002 et le mois d'août 2003, X._ a montré aux enfants des photographies et des cassettes à caractère pornographique et a remis des revues pornographiques à l'un d'eux. B.b Dans le cadre de l'instruction, X._ a consulté différents médecins, notamment en raison de troubles auditifs occasionnés par une tumeur bénigne de la gaine nerveuse qui entoure le nerf auditif (un schwannome). Considérant qu'il y avait doute sur la responsabilité pénale de X._ et afin de pouvoir se déterminer sur l'opportunité d'une mesure de sûreté, le juge d'instruction a ordonné une expertise psychiatrique, qu'il a confiée au Dr F._, psychiatre et psychothérapeute FMH à Colombier. Dans son rapport du 1er décembre 2003, ce médecin a conclu que X._ ne souffrait, au moment de la commission des actes qui lui sont reprochés, d'aucune maladie mentale, faiblesse d'esprit ou autre altération de la conscience et qu'il n'était atteint d'aucun trouble dans sa santé mentale ou dans sa conscience, ni ne présentait de développement mental incomplet. Selon ce spécialiste, le trouble de la personnalité dont X._ souffrait, de type antisocial avec tendances pédophiles, ne l'empêchait pas de se déterminer correctement pour apprécier le caractère illicite des actes commis. B.b Dans le cadre de l'instruction, X._ a consulté différents médecins, notamment en raison de troubles auditifs occasionnés par une tumeur bénigne de la gaine nerveuse qui entoure le nerf auditif (un schwannome). Considérant qu'il y avait doute sur la responsabilité pénale de X._ et afin de pouvoir se déterminer sur l'opportunité d'une mesure de sûreté, le juge d'instruction a ordonné une expertise psychiatrique, qu'il a confiée au Dr F._, psychiatre et psychothérapeute FMH à Colombier. Dans son rapport du 1er décembre 2003, ce médecin a conclu que X._ ne souffrait, au moment de la commission des actes qui lui sont reprochés, d'aucune maladie mentale, faiblesse d'esprit ou autre altération de la conscience et qu'il n'était atteint d'aucun trouble dans sa santé mentale ou dans sa conscience, ni ne présentait de développement mental incomplet. Selon ce spécialiste, le trouble de la personnalité dont X._ souffrait, de type antisocial avec tendances pédophiles, ne l'empêchait pas de se déterminer correctement pour apprécier le caractère illicite des actes commis. C. Contre l'arrêt cantonal, X._ dépose un recours de droit public et un pourvoi en nullité au Tribunal fédéral. Dans le premier, il invoque une violation du droit d'être entendu et du droit à un procès équitable (art. 29 al. 1 et 2 Cst. et art. 6 CEDH). Dans le second, il soutient que l'art. 189 CP (contrainte sexuelle) a été retenu à tort. Dans les deux recours, il conclut à l'annulation de l'arrêt attaqué et sollicite l'assistance judiciaire. 