Faits: A. La société X._ (ci-après: la société) a été affiliée en qualité d'employeur auprès de la caisse de compensation Hotela (ci-après: la caisse) à partir du 1er février 1993. B._ en a été administrateur avec signature individuelle dès le 26 mars 1996. La société a été déclarée en faillite le 9 mai 2001. Par lettre du 28 mai 2004, l'office des faillites Y._ a informé les créanciers admis à l'état de collocation, dont la caisse, que ce dernier avait été déposé le 4 février 2004 et que le dividende probable s'élevait à 100% en première classe et à environ 20% en deuxième classe. La créance en faveur de la caisse admise à l'état de collocation concernait l'année 2000 et s'élevait à 372'227 fr. 05. Par décision du 24 août 2004, la caisse a réclamé à B._ le versement d'un montant de 245'505 fr. 30 à titre de réparation du dommage résultant du non-paiement des cotisations sociales par la société pour la période du 1er janvier au 14 novembre 2000. Saisie d'une opposition formée par B._ contre sa décision, la caisse l'a rejetée le 28 février 2005, tout en réduisant ses prétentions à 167'628 fr. 90. B. B._ a recouru contre cette décision devant le Tribunal administratif du canton de Neuchâtel. Il a conclu à l'annulation de la décision sur opposition du 28 février 2005 et a soulevé l'exception de prescription. Par jugement du 28 septembre 2007, le tribunal cantonal a rejeté le recours. C. B._ interjette un recours en matière de droit public contre ce jugement, en concluant principalement à l'annulation de celui-ci, sous suite de frais et dépens. Il soulève à nouveau l'exception de prescription. La caisse conclut au rejet du recours, tandis que l'Office fédéral des assurances sociales a renoncé à se déterminer. 