A.- B._ ist Eigentümer des in der Gemeinde X._ gelegenen Hofes I._. Auf den 1. Januar 1993 übergab er den landwirtschaftlichen Betrieb seinem Sohn zur Pacht. Die Ausgleichskasse Luzern entliess ihn daher auf Ende 1992 aus der Beitragspflicht als selbstständig erwerbender Landwirt. Am 18. Februar 1999 teilte die kantonale Steuerverwaltung der Kasse mit, B._ habe 1991/92 (Bemessungszeitraum für die Steuerperiode 1993/94) Einkünfte aus selbstständiger Erwerbstätigkeit in der Höhe von Fr. 633'247.- (1991) und Fr. 451'317.- (1992) erzielt. Die gemeldeten Einkommen setzten sich wie folgt zusammen: "Erträge aus der Landwirtschaftsliegenschaft (Geschäft)" je Fr. 17'692.- sowie "Kiesausbeutung" Fr. 615'555.- (1991) und Fr. 433'625.- (1992). Mit Schreiben vom 26. Februar 1999 teilte die Ausgleichskasse B._ mit, er unterstehe ab 1. Januar 1994 wieder der Beitragspflicht als Selbstständigerwerbender. Mit zwei Verfügungen vom selben Tag setzte sie die persönlichen Beiträge (inkl. Verwaltungskostenbeitrag) für 1994/95 auf je Fr. 50'709. 60 fest und erhob auf diesen Beträgen sowie auf den gleichzeitig erlassenen Akontozahlungsaufforderungen für 1996/97 und 1998/99 Verzugszinsen von insgesamt Fr. 31'160.- für den Zeitraum 1. Januar 1995 bis 31. Januar 1999. B.- B._ liess beim Verwaltungsgericht des Kantons Luzern Beschwerde einreichen und beantragen, die Verfügungen vom 26. Februar 1999 seien aufzuheben ebenso die geforderten Akontozahlungen für die Beitragsperioden 1996/97 und 1998/99. Das Begehren wurde damit begründet, der seit längerer Zeit verpachtete Hof I._ stelle Privatvermögen dar. Der Ertrag aus der Liegenschaft unterliege daher nicht der Beitragspflicht. Nach Vernehmlassung der Ausgleichskasse führte das kantonale Verwaltungsgericht einen zweiten Schriftenwechsel durch und zog die Gemeinde-Steuerakten bei. Mit Entscheid vom 25. Januar 2000 hiess es die Beschwerde in dem Sinne teilweise gut, dass es in Abänderung der betreffenden Verfügung vom 26. Februar 1999 "die Verzugszinsen auf den Beiträgen 1994 und 1995 für die Dauer vom 1. Januar 1995 bis 31. Januar 1999 auf Fr. 21'805. 15" festsetzte. Im Übrigen wies es das Rechtsmittel ab, soweit darauf einzutreten war. C.- B._ lässt Verwaltungsgerichtsbeschwerde führen mit dem hauptsächlichen Rechtsbegehren, es seien der kantonale Entscheid, die Beitrags- und Verzugszinsverfügungen vom 26. Februar 1999 sowie die geforderten Beitrags-Akontozahlungen für 1996 bis 1999 aufzuheben. Das kantonale Verwaltungsgericht beantragt ebenso wie die Ausgleichskasse die Abweisung der Verwaltungsgerichtsbeschwerde. Das Bundesamt für Sozialversicherung hat keine Vernehmlassung eingereicht. 