Fatti : A.- L'11 novembre 1997 l'Istituto nazionale della previdenza sociale (INPS) di U._ trasmetteva alla Cassa svizzera di compensazione una domanda di trasferimento dei contributi versati all'assicurazione AVS svizzera da V._, nato il 12 novembre 1934, durante i periodi in cui aveva lavorato nel nostro Paese. In un secondo tempo e, meglio, il 29 gennaio 1998, l'interessato rimetteva alla Cassa l'elenco dei datori di lavoro presso i quali aveva lavorato tra il 1954 e il 1978. Il 29 luglio 1999 l'amministrazione ha emanato la decisione di trasferimento dei contributi di sua competenza elencando dettagliatamente anno per anno i relativi importi e rilevando che fino al 31 dicembre 1968 le iscrizioni negli estratti conto individuali non indicavano i redditi effettivi dai quali erano stati dedotti i contributi di legge, ma l'importo dei contributi versati. La somma del trasferimento era di fr. 16 205. 60. B.- V._ presentava gravame alla Commissione federale di ricorso in materia d'AVS/AI per le persone residenti all'estero, lamentando diverse lacune relative agli anni 1953-54 in cui aveva svolto la propria attività presso un certo S._ (mesi mancanti: 9), al periodo 1959-60 in cui aveva lavorato presso l'Hôtel C._ (mesi mancanti: 3,5), all'anno 1962 in cui era stato impiegato presso l'Hôtel B._ (mesi mancanti: 0,5), e agli anni 1962-64 in cui era stato alle dipendenze dell'Hôtel T._ (mesi mancanti: 8). Il primo giudice, dopo aver preso visione degli accertamenti effettuati pendente lite dall'amministrazione presso gli uffici di controllo abitanti di Z._, S._ e E._, con pronunzia del 23 giugno 2000 ha respinto il gravame, osservando che non esistevano seri motivi per scostarsi dalle ricostruzioni contabili allestite dall'amministrazione e che eventuali mancate contribuzioni da parte di alcuni datori di lavoro (S._, Hôtel C._ e Hôtel T._), non potevano comunque più essere reclamate poiché prescritte. C.- V._ interpone ricorso di diritto amministrativo al Tribunale federale delle assicurazioni, rilevando d'aver già esposto dettagliatamente nella sua lettera alla Cassa del 29 gennaio 1998 le proprie giustificazioni e chiedendo il riconoscimento delle 21 mensilità contributive mancanti. La Cassa svizzera di compensazione propone di respingere il ricorso, mentre l'Ufficio federale delle assicurazioni sociali ha rinunciato a determinarsi. 