A.- Der 1954 geborene P._ ersuchte im Juli 1998 die Invalidenversicherung wegen Rückenbeschwerden (chronisches Lumbovertebralsyndrom bei Status nach Diskushernienoperation LW 4/5 links vom 8. Januar 1998) um Umschulung. Nach Abklärungen teilte ihm die IV-Stelle Basel-Stadt mit Vorbescheid vom 26. Oktober 2000 mit, es bestehe kein Anspruch auf eine Invalidenrente. Mit einer ganztags zumutbaren körperlich leichten wechselbelastenden Arbeit könne er ein rentenausschliessendes Einkommen erzielen. Am 8. Februar 2001, nach einer rheumatologischen Untersuchung durch Dr. med. B._ vom 12. Dezember 2000, erliess die IVStelle eine im Sinne des Vorbescheids lautende Verfügung. B.- Die hiegegen erhobene Beschwerde, mit welcher P._ die Abklärung seiner Einsatzmöglichkeiten in der geschützten Werkstätte (WWB) sowie die Zusprechung zumindest einer halben resp. einer ganzen Invalidenrente gemäss Replik und von Arbeitsvermittlung beantragen liess, wies die Kantonale Rekurskommission für die Ausgleichskassen und die IV-Stellen, Basel-Stadt (ab 1. April 2002 neu Sozialversicherungsgericht Basel-Stadt) mit Entscheid vom 23. November 2001 ab, soweit sie darauf eintrat. C.- P._ lässt Verwaltungsgerichtsbeschwerde führen mit dem Rechtsbegehren, es seien der kantonale Entscheid aufzuheben und ihm berufliche Eingliederungsmassnahmen (Abklärung in einer geschützten IV-Werkstätte), eventuell zumindest eine halbe Invalidenrente sowie Berufsberatung und Arbeitsvermittlung zuzusprechen. Während die IV-Stelle die Abweisung der Verwaltungsgerichtsbeschwerde beantragt, soweit darauf einzutreten ist, verzichtet das Bundesamt für Sozialversicherung auf eine Vernehmlassung. 