Sachverhalt: Sachverhalt: A. Der 1961 geborene B._ arbeitete seit dem 1. Februar 1979 als Betriebsbeamter im Zentrum Y._. Wegen im Verlaufe des Jahres 1999 auftretender Schmerzen musste ihm wiederholt eine neue Tätigkeit zugewiesen werden. Am 7. April 2000 meldete er sich bei der Invalidenversicherung zum Leistungsbezug an. Er verlangte dabei die Umschulung auf eine neue Tätigkeit. Die IV-Stelle des Kantons Solothurn klärte die gesundheitlichen und erwerblichen Verhältnisse ab. Sie liess insbesondere durch die X._ die Eingliederungsmöglichkeiten abklären (Bericht vom 19. Juli 2001). Als mögliche Arbeitsgebiete werden Überwachungs- und Kontrollaufgaben sowie Hausdienste oder Lagertätigkeiten ohne körperlich schwere Arbeiten genannt. Die Eingliederungsstätte vertrat die Meinung, dass der Versicherte an einem geeigneten Arbeitsplatz in der offenen Wirtschaft den Anforderungen genügen könne. Ohne weitere Schritte der IV-Stelle abzuwarten, kündigte B._ am 22. August 2001 seine Anstellung beim Zentrum Y._. Der Berufsberater wies in einem Schreiben vom 29. August 2001 auf die Gefahren dieses Schrittes hin und empfahl dringend, alle Anstrengungen zu unternehmen, um die Kündigung rückgängig zu machen. In Beantwortung dieses Schreibens wies der Versicherte am 31. August 2001 darauf hin, dass er sich selbstständig machen wolle. Die Verträge mit seinem Handelspartner seien abgeschlossen und unterzeichnet. Der Vertrag sei auf vier Jahre festgelegt und sei gegenseitig nicht kündbar. Die IV-Stelle hielt am 4. September 2001 fest, dass sie davon ausgehe, dass sich bei diesen Verhältnissen berufliche Massnahmen erübrigten. Sollte diese Annahme nicht zutreffen, so wurde B._ gebeten, umgehend Bescheid zu geben. Nachdem keine Antwort eingegangen war, erliess die IV-Stelle am 16. November 2001 einen Vorbescheid des Inhalts, dass sie davon ausgehe, weitere Massnahmen der beruflichen Eingliederung erübrigten sich. Nach der angemessenen (Selbst-)Eingliederung (Aufnahme einer selbstständigen Erwerbstätigkeit) drängten sich zur Zeit keine weiteren Massnahmen auf. Das Leistungsbegehren solle daher bezüglich berufliche Eingliederungsmassnahmen und Ausrichtung einer Invalidenrente als erledigt abgeschrieben werden. Mit Einsprache vom 22. November 2001/14. Dezember 2001 liess B._ geltend machen, zufolge seiner eingeschränkten Tätigkeit im Bereich von leichten Arbeiten die Rentenfrage zu prüfen sei. Es sei davon auszugehen, dass ihm mindestens eine halbe Invalidenrente zustehe. Mit Verfügung vom 31. Januar 2002 hielt die IV-Stelle an ihrem Vorbescheid fest und schrieb die Leistungsbegehren als erledigt ab. A. Der 1961 geborene B._ arbeitete seit dem 1. Februar 1979 als Betriebsbeamter im Zentrum Y._. Wegen im Verlaufe des Jahres 1999 auftretender Schmerzen musste ihm wiederholt eine neue Tätigkeit zugewiesen werden. Am 7. April 2000 meldete er sich bei der Invalidenversicherung zum Leistungsbezug an. Er verlangte dabei die Umschulung auf eine neue Tätigkeit. Die IV-Stelle des Kantons Solothurn klärte die gesundheitlichen und erwerblichen Verhältnisse ab. Sie liess insbesondere durch die X._ die Eingliederungsmöglichkeiten abklären (Bericht vom 19. Juli 2001). Als mögliche Arbeitsgebiete werden Überwachungs- und Kontrollaufgaben sowie Hausdienste oder Lagertätigkeiten ohne körperlich schwere Arbeiten genannt. Die Eingliederungsstätte vertrat die Meinung, dass der Versicherte an einem geeigneten Arbeitsplatz in der offenen Wirtschaft den Anforderungen genügen könne. Ohne weitere Schritte der IV-Stelle abzuwarten, kündigte B._ am 22. August 2001 seine Anstellung beim Zentrum Y._. Der Berufsberater wies in einem Schreiben vom 29. August 2001 auf die Gefahren dieses Schrittes hin und empfahl dringend, alle Anstrengungen zu unternehmen, um die Kündigung rückgängig zu machen. In Beantwortung dieses Schreibens wies der Versicherte am 31. August 2001 darauf hin, dass er sich selbstständig machen wolle. Die Verträge mit seinem Handelspartner seien abgeschlossen und unterzeichnet. Der Vertrag sei auf vier Jahre festgelegt und sei gegenseitig nicht kündbar. Die IV-Stelle hielt am 4. September 2001 fest, dass sie davon ausgehe, dass sich bei diesen Verhältnissen berufliche Massnahmen erübrigten. Sollte diese Annahme nicht zutreffen, so wurde B._ gebeten, umgehend Bescheid zu geben. Nachdem keine Antwort eingegangen war, erliess die IV-Stelle am 16. November 2001 einen Vorbescheid des Inhalts, dass sie davon ausgehe, weitere Massnahmen der beruflichen Eingliederung erübrigten sich. Nach der angemessenen (Selbst-)Eingliederung (Aufnahme einer selbstständigen Erwerbstätigkeit) drängten sich zur Zeit keine weiteren Massnahmen auf. Das Leistungsbegehren solle daher bezüglich berufliche Eingliederungsmassnahmen und Ausrichtung einer Invalidenrente als erledigt abgeschrieben werden. Mit Einsprache vom 22. November 2001/14. Dezember 2001 liess B._ geltend machen, zufolge seiner eingeschränkten Tätigkeit im Bereich von leichten Arbeiten die Rentenfrage zu prüfen sei. Es sei davon auszugehen, dass ihm mindestens eine halbe Invalidenrente zustehe. Mit Verfügung vom 31. Januar 2002 hielt die IV-Stelle an ihrem Vorbescheid fest und schrieb die Leistungsbegehren als erledigt ab. B. Das Versicherungsgericht des Kantons Solothurn wies eine dagegen erhobene Beschwerde, mit welcher Aufhebung der Verwaltungsverfügung und Zusprechung einer ganzen IV-Rente ab November 2000, eventuell Rückweisung zur Einholung eines interdisziplinären Gutachtens, verlangt wurden, mit Entscheid vom 14. November 2003 ab. B. Das Versicherungsgericht des Kantons Solothurn wies eine dagegen erhobene Beschwerde, mit welcher Aufhebung der Verwaltungsverfügung und Zusprechung einer ganzen IV-Rente ab November 2000, eventuell Rückweisung zur Einholung eines interdisziplinären Gutachtens, verlangt wurden, mit Entscheid vom 14. November 2003 ab. C. Mit Verwaltungsgerichtsbeschwerde lässt B._ die Aufhebung der Verwaltungsverfügung und des kantonalen Entscheides sowie die Zusprechung einer ganzen IV-Rente ab 1. November 2000, eventuell Rückweisung an die Vorinstanz zur Einholung eines interdisziplinären Gutachtens und zur Abklärung des Rentenanspruchs, beantragen. Sodann wird um Gewährung der unentgeltlichen Rechtspflege und Verbeiständung ersucht. Während die IV-Stelle auf Abweisung der Verwaltungsgerichtsbeschwerde schliesst, verzichtet das Bundesamt für Sozialversicherung auf Vernehmlassung. 