A.- H._, née en 1966, divorcée, est au bénéfice d'une rente de l'assurance-invalidité depuis le 1er septembre 1992, ainsi que d'une prestation complémentaire. Par décision du 11 juin 1999, la Caisse cantonale vaudoise de compensation AVS, par son agence d'O. _, a fixé le montant mensuel de cette dernière prestation à 967 fr. dès le 1er avril 1999. Au titre du revenu, elle a tenu compte de la rente de l'assurance-invalidité (14 766 fr.). Au chapitre des déductions, elle a pris en considération la couverture des besoins vitaux (16 460 fr.) et le loyer annuel (9900 fr.), soit un montant total de 26 360 fr. H._ a déménagé d'O. _ à L._ en compagnie de son ami B._. Ayant appris que les prénommés faisaient ménage commun, la caisse, par son agence de L._, a procédé à un nouveau calcul de la prestation complémentaire servie à H._. Par décision du 29 septembre 1999, elle a fixé le montant mensuel de cette prestation à 230 fr. dès le 1er septembre précédent. Au titre des revenus, elle a pris en compte, outre la rente d'invalidité (14 736 fr.), un salaire en nature pour la rémunération du travail ménager fourni par la requérante en faveur de B._. Le montant du salaire retenu à ce titre était de 5813 fr. Au chapitre des déductions, figuraient la couverture des besoins vitaux (16 460 fr.) et le loyer annuel (6840 fr.). B.- H._ a recouru contre cette décision devant le Tribunal des assurances du canton de Vaud, en concluant implicitement à l'octroi d'une prestation complémentaire d'un montant plus élevé. A l'appui de son recours, elle faisait valoir que son ami n'était pas en mesure d'assumer une rémunération en échange de la tenue du ménage commun. L'Office fédéral des assurances sociales (OFAS) a été invité par le juge chargé de l'instruction de la cause à se déterminer au sujet de la prise en compte, dans la détermination du revenu donnant droit à une prestation complémentaire, d'un revenu hypothétique provenant d'une activité lucrative au titre de la "rémunération du ménage", lorsque la requérante, vivant en concubinage, s'occupe exclusivement du ménage commun. Le juge relevait à cet égard que, selon un arrêt récent du Tribunal fédéral des assurances (ATF 125 V 205), la femme qui vit maritalement avec un homme, sans être mariée avec celui-ci, et qui, en échange de la tenue du ménage commun, à laquelle elle se consacre exclusivement, reçoit de son compagnon des prestations en nature (sous forme de nourriture et de logement), et éventuellement de l'argent de poche, doit, en ce qui concerne son statut de cotisante, être considérée comme une personne n'exerçant pas d'activité lucrative, contrairement à la pratique consacrée jusqu'alors par la jurisprudence. Dans sa détermination du 29 février 2000, l'OFAS a proposé implicitement le rejet du recours, motif pris que le changement de jurisprudence précité n'avait pas d'incidence en matière de prestations complémentaires à l'AVS/AI. Par jugement du 4 avril 2000, la juridiction cantonale a annulé la décision entreprise et renvoyé la cause à la caisse, afin qu'elle effectue un nouveau calcul de la prestation complémentaire due à partir du 1er septembre 1999, en s'abstenant de tenir compte des prestations en nature ou en espèces reçues par la requérante en échange de la tenue du ménage commun. C.- L'OFAS interjette recours de droit administratif contre ce jugement, dont il requiert l'annulation, en concluant au rétablissement de la décision de la caisse du 29 septembre 1999. H._ n'a pas répondu au recours. De son côté, la caisse propose implicitement l'admission de celuici. 