Faits: Faits: A. Les époux A._ et B.X._ sont propriétaires de la parcelle n° 20 de la commune de Z._, qu'ils ont acquise en 1983 et sur laquelle est érigée notamment une villa familiale. Le 18 juin 1987, la Banque Y._ a accepté de porter à 1'050'000 fr. le montant du prêt hypothécaire qu'elle avait accordé aux époux X._, tout en demandant des garanties sous forme de cédules hypothécaires. Par acte notarié du 15 juillet 1987 intitulé "complément de cédule hypothécaire", les époux X._ et la Banque Y._ ont convenu notamment de ce qui suit : " I La Banque Y._ est porteur du titre suivant dû conjointement et solidairement par A._ et B.X._ susnommés : Numéro xxxxx. Cédule hypothécaire au porteur, du capital de quatre cent mille francs, premier rang, intérêt maximum huit pour cent, inscrite le onze avril mil neuf cent soixante-deux, grevant la parcelle 20 de Z._. II La Banque Y._, représentée comme il est dit ci-dessus, consent une augmentation de prêt de SIX CENT CINQUANTE MILLE FRANCS à A._ et B.X._ qui s'en reconnaissent codébiteurs solidaires. Cette augmentation s'incorpore au prêt faisant l'objet d'une cédule hypothécaire numéro xxxxx. susrappelée qui est ainsi élevée au capital de UN MILLION CINQUANTE MILLE FRANCS." UN MILLION CINQUANTE MILLE FRANCS." B. Les 16 et 17 août 1993, les époux X._ et la Banque Y._ ont signé un acte de nantissement par lequel les premiers ont constitué en faveur de la seconde un droit de gage en garantie de toutes les prétentions que celle-ci pouvait ou pourrait faire valoir à leur encontre en vertu de leurs relations d'affaires. Cet acte, qui mentionnait comme valeur nantie la cédule hypothécaire au porteur n° xxxxx grevant en premier rang la parcelle n° 20 de la commune de Z._, contenait la clause suivante : "7. Réalisation privée Sans égard aux dispositions prévues par la loi fédérale sur la poursuite pour dettes et la faillite, la banque est habilitée mais non tenue de réaliser selon son gré, de dénoncer des créances mises en gage et de les encaisser et d'amortir ainsi toutes ses prétentions de quelque nature qu'elles soient en capital, intérêts, commissions et frais dès que la dette est exigible. C'est dans ce but que des sûretés sont remises à la banque par le présent contrat [...]. La banque est de surcroît autorisée, mis à part pour le paiement des intérêts courants, à faire valoir ses prétentions découlant du nantissement directement à l'égard du débiteur du titre par la voie de la poursuite en réalisation de gage." La cédule hypothécaire n° xxxxx précitée contenait notamment les clauses suivantes : "1. Moyennant un avertissement de six mois, le prêt pourra être dénoncé au remboursement total ou partiel en tout temps par les débiteurs ou par le créancier pour l'une des échéances contractuelles. [...] 3. Ce prêt sera productif d'intérêts dès le jour du versement des fonds au taux qui sera fixé d'entente entre les parties. Un taux d'intérêts maximum de huit pour cent est inscrit au Registre foncier." 3. Ce prêt sera productif d'intérêts dès le jour du versement des fonds au taux qui sera fixé d'entente entre les parties. Un taux d'intérêts maximum de huit pour cent est inscrit au Registre foncier." C. Par courrier recommandé du 3 novembre 2000, la Banque Y._ a dénoncé la cédule hypothécaire précitée au remboursement et a mis les époux X._ en demeure de lui payer la somme de 1'050'000 fr. plus intérêts à 8% l'an dès le 12 octobre 1997. Les époux X._ n'ont donné aucune suite à cette sommation. Le 15 mai 2001, la Banque Y._ a introduit une poursuite en réalisation de gage immobilier pour la somme de 1'050'000 fr. à l'encontre de chacun des époux X._. Ceux-ci ont fait opposition aux commandements de payer n° 1 et n° 2 qui leur ont été notifiés le 30 mai 2001 par l'Office des poursuites de Nyon. Le 15 mai 2001, la Banque Y._ a introduit une poursuite en réalisation de gage immobilier pour la somme de 1'050'000 fr. à l'encontre de chacun des époux X._. Ceux-ci ont fait opposition aux commandements de payer n° 1 et n° 2 qui leur ont été notifiés le 30 mai 2001 par l'Office des poursuites de Nyon. D. Le 22 juin 2001, la Banque Y._ a actionné les époux X._, solidairement entre eux, devant la Cour civile du Tribunal cantonal du canton de Vaud, en concluant au paiement de la somme de 1'050'000 fr. plus intérêts à 8% l'an dès le 12 octobre 1997, ainsi qu'à la mainlevée définitive des oppositions formées aux commandements de payer notifiés aux défendeurs dans les poursuites en réalisation de gage immobilier n° 1 et n° 2. Dans leur réponse du 26 novembre 2001, les défendeurs ont conclu au rejet des conclusions de la demande et ont opposé la compensation à hauteur d'un montant (non contesté) de 3'600 fr. Par jugement du 21 novembre 2003, la Cour civile a condamné les défendeurs, solidairement entre eux, à payer à la demanderesse la somme de 1'050'000 fr. avec intérêt à 5% l'an dès le 5 mai 2001, sous déduction de 3'600 fr. avec intérêt à 5% l'an dès le 28 novembre 2001. Elle a en outre prononcé la mainlevée définitive des oppositions à concurrence de la somme et de l'intérêt précités, et elle a mis les frais et dépens à la charge solidaire des défendeurs. Par jugement du 21 novembre 2003, la Cour civile a condamné les défendeurs, solidairement entre eux, à payer à la demanderesse la somme de 1'050'000 fr. avec intérêt à 5% l'an dès le 5 mai 2001, sous déduction de 3'600 fr. avec intérêt à 5% l'an dès le 28 novembre 2001. Elle a en outre prononcé la mainlevée définitive des oppositions à concurrence de la somme et de l'intérêt précités, et elle a mis les frais et dépens à la charge solidaire des défendeurs. E. La motivation de ce jugement, dans ce qu'elle a d'utile à retenir pour l'examen du recours, est en substance la suivante : E.a Les poursuites dirigées contre les défendeurs sont en réalisation de gage immobilier et se fondent sur la créance abstraite incorporée dans la cédule hypothécaire n° xxxxx du Registre foncier de Nyon. En principe, seul le titulaire de la créance et du droit de gage immobilier incorporés dans la cédule hypothécaire - à savoir le propriétaire de la cédule - peut agir en réalisation de gage immobilier. Toutefois, lorsqu'une cédule hypothécaire au porteur est remise en nantissement, l'acte de nantissement peut contenir une clause conférant au créancier gagiste (mobilier) la faculté de dénoncer la cédule hypothécaire et de faire valoir, sinon en vertu de son propre droit, du moins en son propre nom, la créance incorporée dans le titre remis en nantissement et d'exercer une poursuite en réalisation de gage immobilier (Favre/Liniger, Cédules hypothécaires et procédure de mainlevée, in SJ 1995 p. 101 ss, 105; SJ 2004 I 194). En l'espèce, l'acte de nantissement signé par les parties les 16 et 17 août 1993 contenait précisément une telle clause, si bien que la demanderesse, qui a valablement dénoncé la cédule hypothécaire au remboursement, peut agir en réalisation de gage immobilier contre les défendeurs, en réclamant le montant en capital de 1'050'000 fr. E.b La demanderesse réclame l'intérêt au taux de 8% l'an. Mais il s'agit là du taux maximum inscrit au registre foncier, alors que le taux applicable est celui déterminé d'entente entre les parties. En l'espèce, il n'a pas été prouvé ni même allégué que le preneur de crédit reconnaissait devoir les intérêts au taux maximum inscrit au registre foncier. L'intérêt sur la créance abstraite ne peut ainsi courir que dès le lendemain de l'échéance de la dénonciation de la cédule, soit dès le 5 mai 2001 et au taux légal de 5% l'an. Pour le surplus, les commandements de payer litigieux ne sont pas périmés, de sorte que la mainlevée définitive des oppositions peut être prononcée à concurrence du montant alloué en capital et intérêts, sous réserve de la compensation. Pour le surplus, les commandements de payer litigieux ne sont pas périmés, de sorte que la mainlevée définitive des oppositions peut être prononcée à concurrence du montant alloué en capital et intérêts, sous réserve de la compensation. F. Agissant par la voie du recours en réforme au Tribunal fédéral, les défendeurs concluent à la réforme de ce jugement en ce sens qu'ils doivent payer, solidairement entre eux, à la défenderesse la somme de 1'050'000 fr. avec intérêt à 4,5% l'an du 5 mai au 30 juin 2001, à 4,25% l'an du 1er juillet 2001 au 31 janvier 2002, à 4% l'an du 1er février au 31 octobre 2002, à 3,75 % l'an du 1er novembre 2002 au 28 février 2003, à 3,5% l'an du 1er mars au 30 juin 2003 et à 3,25% l'an ensuite, sous réserve de l'évolution future du taux hypothécaire de référence et sous déduction de 3'600 fr. avec intérêt à 5% l'an dès le 28 novembre 2001, et que les oppositions sont maintenues intégralement. Une réponse au recours n'a pas été demandée. 