Faits : Faits : A. A._, B._ et C._ et D._ - ces deux dernières en leur qualité d'héritières de feue E._ - sont propriétaires, en tant qu'hoirs de feu X._ (désignés ci-après comme les hoirs X._, de la parcelle n° xxx de la commune de Plan-les-Ouates, d'une superficie de 8'324 m2. Cette parcelle, située en zone agricole, est louée à une entreprise de travaux publics, selon bail renouvelé par écrit le 17 septembre 1991, portant sur «une ferme en son état actuel, comprenant un logement de 8 pièces destiné au personnel de l'entreprise, une grange et locaux annexés à l'usage d'entrepôts, le terrain attenant à la ferme d'environ 8'000 m2 à destination de petites cultures de pépinière et de dépôt, selon plan annexé». Cette parcelle, située en zone agricole, est louée à une entreprise de travaux publics, selon bail renouvelé par écrit le 17 septembre 1991, portant sur «une ferme en son état actuel, comprenant un logement de 8 pièces destiné au personnel de l'entreprise, une grange et locaux annexés à l'usage d'entrepôts, le terrain attenant à la ferme d'environ 8'000 m2 à destination de petites cultures de pépinière et de dépôt, selon plan annexé». B. Par requête du 19 janvier 2005, les hoirs X._ ont demandé à la Commission foncière agricole du canton de Genève (ci-après: la Commission) de prononcer le non-assujettissement de la parcelle précitée à la loi fédérale sur le droit foncier rural (LDFR; RS 211.412.11). Ils exposaient qu'ils souhaitaient vendre ce terrain, lequel n'était pas affecté à l'agriculture, mais dévolu depuis plusieurs années à des activités d'entreposage par une société de travaux publics. Par décision du 22 février 2005, la Commission a rejeté la requête, pour le motif que la parcelle en cause se trouvait en zone agricole et demeurait appropriée à un usage agricole, l'activité d'entreposage par une société de travaux publics n'ayant rien d'irréversible. Par décision du 22 février 2005, la Commission a rejeté la requête, pour le motif que la parcelle en cause se trouvait en zone agricole et demeurait appropriée à un usage agricole, l'activité d'entreposage par une société de travaux publics n'ayant rien d'irréversible. C. Par arrêt du 7 mars 2006, le Tribunal administratif du canton de Genève a rejeté le recours formé par les hoirs X._ contre cette décision. La motivation de cet arrêt, dans ce qu'elle a d'utile à retenir pour l'examen du recours, est en substance la suivante: C.a Il résulte des explications données par B._ lors du transport sur place auquel le Tribunal administratif a procédé le 15 septembre 2005 qu'avant le premier contrat de bail avec l'entreprise de travaux publics, la parcelle était occupée par un paysan; elle n'était pas exploitée en culture mais laissée à l'état de verger; à l'époque, le terrain était en pente naturelle depuis la ferme. -:- Lors de son transport sur place, le Tribunal administratif a constaté qu'aujourd'hui, un remblai comportant un mur avait été installé, que le sol du verger avait été goudronné par endroits notamment pour permettre à des véhicules de se garer et qu'il y avait de nombreux dépôts de gravats inertes. Des matériaux de chantier étaient entreposés sur le sol. La partie nord-est de la parcelle était utilisée comme potager par les employés de l'entreprise. Le reste était en friche. Quant au bâtiment, il n'était pas habité ni en état de l'être. C.b L'art. 10 let. f de la loi cantonale d'application de la LDFR (LALDFR; RSG M 1 10) prévoit que la Commission est compétente pour déterminer si un immeuble est exclu du champ d'application de la LDFR en application de l'art. 3 LALDFR, selon lequel les immeubles situés en zone agricole qui ne sont pas appropriés à un usage agricole ou horticole sont exclus du champ d'application de la loi par décision de la Commission. Aux termes de l'art. 10 al. 1 du Règlement d'application de la LALDFR (ReLALDFR; RSG M 1 10.01), un propriétaire d'un immeuble agricole peut déposer une requête auprès de la Commission, afin que celle-ci constate que son immeuble est soumis ou n'est pas soumis à la LDFR. C.c En l'espèce, il a pu être constaté que la parcelle en cause n'est actuellement plus utilisée pour l'agriculture, alors même que le contrat de bail du 17 septembre 1991 mentionne expressément un usage agricole, outre une affectation commune de dépôt. Force est de constater que le bailleur a laissé s'établir une situation de fait ne correspondant pas à la destination de son terrain, en tolérant le développement d'une activité de dépôt non irréversible, incompatible avec la législation applicable en matière d'aménagement du territoire. Cela ne suffit pas à admettre que la parcelle n'est plus appropriée à un usage agricole, de sorte que le recours doit être rejeté. C.c En l'espèce, il a pu être constaté que la parcelle en cause n'est actuellement plus utilisée pour l'agriculture, alors même que le contrat de bail du 17 septembre 1991 mentionne expressément un usage agricole, outre une affectation commune de dépôt. Force est de constater que le bailleur a laissé s'établir une situation de fait ne correspondant pas à la destination de son terrain, en tolérant le développement d'une activité de dépôt non irréversible, incompatible avec la législation applicable en matière d'aménagement du territoire. Cela ne suffit pas à admettre que la parcelle n'est plus appropriée à un usage agricole, de sorte que le recours doit être rejeté. D. Agissant par la voie du recours de droit administratif au Tribunal fédéral, les hoirs X._ concluent avec suite de dépens à l'annulation de cet arrêt et au renvoi de la cause à l'autorité cantonale pour nouvelle décision dans le sens des considérants. Ils soutiennent en bref qu'avant d'examiner les conditions de fond de l'assujettissement à la LDFR, l'autorité cantonale aurait dû élucider la question, prioritaire selon l'art. 4a de l'ordonnance du 4 octobre 1993 sur le droit foncier rural (ODFR; RS 211.412.110), de la licéité de l'affectation du bâtiment se trouvant sur la parcelle, si bien que le dossier devrait lui être renvoyé pour nouvelle décision après respect de la procédure prescrite par l'art. 4a ODFR. Il n'a pas été ordonné d'échange d'écritures. 