A.- Le 15 septembre 2000, G._, née en 1939, au bénéfice d'une rente de l'assurance-invalidité à partir du 1er avril 2000, a demandé l'octroi de prestations complémentaires. Par trois décisions du 18 décembre 2000, la Caisse cantonale vaudoise de compensation AVS-AI-APG (ci-après : la caisse) a fixé le montant de la prestation complémentaire mensuelle revenant à l'assurée à 418 fr. pour les mois d'avril à septembre 2000, à 354 fr. pour le mois d'octobre 2000 et à 651 fr. pour les mois de novembre et décembre 2000. Le 28 décembre 2000, la caisse a rendu une nouvelle décision par laquelle elle a accordé à la prénommée une prestation complémentaire mensuelle de 686 fr. à partir du 1er janvier 2001. B.- G._ a recouru contre ces décisions devant le Tribunal des assurances du canton de Vaud, en concluant à ce que sa prestation complémentaire fût calculée sans tenir compte, dans la détermination du revenu, de certains montants alloués par la société d'assurances Winterthur-Vie à titre d'indemnités journalières et de rente en cas d'incapacité de travail qui ont été directement versés à la caisse communale de Lausanne. Par ailleurs, sa fortune, sous forme d'un compte bancaire auprès de la Banque X._, devait être évaluée à sa valeur moyenne au cours de l'année civile. En cours de procédure, la caisse a rendu, le 29 janvier 2001, une décision fixant à 749 fr. la prestation complémentaire mensuelle à partir du 1er février 2001. Elle a en outre produit cinq plans de calcul concernant la période du 1er avril 2000 à celle prenant naissance le 1er février 2001, ayant pour conséquence une péjoration du droit aux prestations complémentaires de l'assurée dès le 1er novembre 2000 (détermination du 3 mai 2001). Il en ressortait que la prestation complémentaire pour les mois d'avril à octobre 2000 était identique à celle résultant de la décision du 18 décembre 2000. En revanche, la prestation complémentaire pour les mois de novembre et décembre 2000 devait s'élever à 642 fr. par mois, celle du mois de janvier 2001 à 655 fr. par mois, et celle pour la période prenant naissance le 1er février 2001 à 718 fr. par mois. La détermination de la caisse a été communiquée à l'assurée. Après avoir entendu les parties le 25 juin 2001, le Tribunal des assurances du canton de Vaud a, par jugement du même jour, rejeté le recours et réformé d'office les décisions des 18 et 28 décembre 2000 de la caisse, en fixant, pour les mois de novembre 2000 à la période prenant naissance le 1er février 2001, les montants de la prestation complémentaire selon la détermination de la caisse du 3 mai 2001. C.- G._ interjette recours de droit administratif, qu'elle a déclaré maintenir par courrier du 26 décem- bre 2001, contre ce jugement, en concluant implicitement à son annulation. La caisse conclut au rejet du recours, tandis que l'Office fédéral des assurances sociales a renoncé à se déterminer. 