Faits: Faits: A. A.a X._ SA, entreprise générale de revêtements de sols, parquets, plastiques et moquettes, est inscrite au registre du commerce de Genève depuis le 5 octobre 1978. Elle est membre de l'Association genevoise des entreprises de revêtements d'intérieurs (AGERI) et signataire de la convention collective genevoise du second oeuvre. A.b Le 12 novembre 2002, la société suisse des entrepreneurs, d'une part, et les syndicats SIB (depuis le 1er janvier 2005: UNIA) et SYNA, d'autre part, ont conclu une convention collective de travail pour la retraite anticipée dans le secteur principal de la construction (ci-après : CCT RA). Cette convention, dont l'entrée en vigueur a été fixée au 1er juillet 2003, a pour but de permettre aux travailleurs du secteur principal de la construction de prendre une retraite anticipée dès l'âge de 60 ans révolus. Afin d'assurer l'application de cette convention, les parties contractantes ont créé, le 19 mars 2003, la Fondation pour la retraite anticipée dans le secteur principal de la construction (ci-après : Fondation FAR). Cette fondation est une institution de prévoyance non enregistrée. Par arrêté du 5 juin 2003, le Conseil fédéral a étendu le champ d'application de la CCT RA à l'ensemble du territoire suisse, à l'exception du canton du Valais. Le conseil de fondation de la Fondation FAR a édicté, le 4 juillet 2003, sur la base de la CCT RA, un règlement relatif aux prestations et aux cotisations de la fondation pour la retraite anticipée dans le secteur principal de la construction (règlement RA). A.c Un contrôle d'assujettissement de X._ SA à la convention nationale du secteur principal de la construction (CN) a été effectué le 16 septembre 2004 à la demande de la Commission professionnelle paritaire du canton de Genève (CPGO). Au terme d'un rapport de contrôle établi le 15 octobre 2004, l'entreprise X._ SA a été qualifiée d'entreprise mixte authentique, les secteurs d'activités définis étant séparés avec une grande précision, les salaires et les frais étant affectés à chaque centre de charge, et le matériel et les véhicules étant également attribués en propre à chacune des activités. A.d Se fondant sur les conclusions du rapport de contrôle, la CPGO a constaté, dans une « décision du 5 novembre 2004 », que X._ SA était partiellement assujettie, pour son secteur chapes, à la CN et qu'elle devait garantir à tous les travailleurs soumis au champ d'application de la CN 2005 du point de vue du personnel les conditions de travail conventionnelles et les informer de la décision en question. Elle a par ailleurs précisé qu'elle communiquait à la Fondation FAR copie de sa décision, celle-ci devant décider de l'affiliation de X._ SA à son institution. A.e Dans une lettre du 21 décembre 2004 intitulée « décision du 10 décembre 2004 », la Fondation FAR a dit que l'entreprise X._ SA était partiellement assujettie, pour le secteur des chapes, à la CCT RA depuis le 1er juillet 2003 et qu'elle était tenue de verser à la Fondation FAR les cotisations des travailleurs de 1 % et celles des employeurs de 4,66 %. X._ SA ayant contesté cette décision, la Fondation FAR a confirmé sa position dans une lettre du 17 août 2005 intitulée « décision du 8 juin 2005 et du 6 juillet 2005 (réexamen) ». X._ SA ayant contesté cette décision, la Fondation FAR a confirmé sa position dans une lettre du 17 août 2005 intitulée « décision du 8 juin 2005 et du 6 juillet 2005 (réexamen) ». B. B.a L'entreprise X._ SA a saisi le Tribunal cantonal des assurances sociales du canton de Genève d'un « recours » contre cette décision de réexamen, en concluant à son annulation. Elle a en outre demandé au Tribunal des assurances de constater qu'elle n'était pas assujettie à la CCT RA. B.b Invitée à se déterminer sur le recours de X._ SA, la Fondation FAR a adressé au Tribunal cantonal des assurances un mémoire de réponse ainsi qu'une demande reconventionnelle. Elle a conclu à l'irrecevabilité du mémoire de X._ SA en tant que recours mais à sa recevabilité en tant qu'action en constatation de droit. Sur le fond, elle a pris les conclusions suivantes: « Sur demande principale - Débouter X._ SA de toutes ses conclusions; - Condamner X._ SA à verser à la Stiftung für den flexiblen Altersrücktritt im Bauhauptgewerbe (Stiftung FAR) une équitable indemnité à titre de dépens; Sur demande reconventionnelle - Condamner X._ SA à verser à la Stiftung für den flexiblen Altersrücktritt im Bauhauptgewerbe (Stiftung FAR) les montants suivants: - Fr. 16.250 avec intérêts à 5 % l'an dès le 31 mars 2005; - Fr. 125.437,70 avec intérêts à 5 % l'an dès le 22 avril 2005; Fr. 16.250 avec intérêts à 5 % l'an dès le 30 juin 2005; Fr. 16.250 avec intérêts à 5 % l'an dès le 30 septembre 2005; - Condamner X._ SA à verser à la Stiftung für den flexiblen Altersrücktritt im Bauhauptgewerbe (Stiftung FAR) une équitable indemnité à titre de dépens; Subsidiairement Acheminer la Stiftung für den flexiblen Altersrücktritt im Bauhauptgewerbe (Stiftung FAR) à prouver, par toutes voies de droit, les faits allégués dans les présentes écritures ». B.c Par jugement du 24 janvier 2006, le Tribunal cantonal des assurances a déclaré le « recours » interjeté par X._ SA recevable en tant qu'il valait comme action en constatation de droit et l'a rejeté. Il a également déclaré recevable la demande reconventionnelle déposée par la Fondation FAR et l'a rejetée en l'état (chiffre 4 du dispositif). Il a en outre prononcé la compensation des dépens (chiffre 5 du dispositif). B.c Par jugement du 24 janvier 2006, le Tribunal cantonal des assurances a déclaré le « recours » interjeté par X._ SA recevable en tant qu'il valait comme action en constatation de droit et l'a rejeté. Il a également déclaré recevable la demande reconventionnelle déposée par la Fondation FAR et l'a rejetée en l'état (chiffre 4 du dispositif). Il a en outre prononcé la compensation des dépens (chiffre 5 du dispositif). C. La Fondation FAR a interjeté un recours de droit administratif contre ce jugement. Elle a conclu, sous suite de dépens, à l'annulation des chiffres 4 et 5 du dispositif et le renvoi de la cause à la juridiction cantonale pour qu'elle statue sur sa demande reconventionnelle et sur les dépens de la procédure cantonale. De son côté, X._ SA a conclu, sous suite de dépens, à la confirmation du jugement entrepris. Quant à l'Office fédéral des assurances sociales, il a préavisé pour l'admission du recours. 