Sachverhalt: A. Der 1967 geborene H._ meldete sich am 5. August 2005 bei der IV-Stelle des Kantons Graubünden zum Bezug von Leistungen der Invalidenversicherung. Die IV-Stelle liess zur Abklärung der medizinischen Verhältnisse unter anderem durch Dr. med. G._, Facharzt für Kinder- und Jugendpsychiatrie, ein Gutachten erstellen (Expertise vom 4. Mai 2006). Nach durchgeführtem Vorbescheidverfahren sprach die Verwaltung rückwirkend ab dem 1. August 2004 eine Viertelsrente und ab 1. September 2004 eine halbe Rente der Invalidenversicherung zu (Verfügungen vom 17. Januar 2008). B. Die von H._ dagegen erhobene Beschwerde wies das Verwaltungsgericht des Kantons Graubünden mit Entscheid vom 8. April 2008 ab, soweit es darauf eintrat. C. H._ erhebt Beschwerde in öffentlich-rechtlichen Angelegenheiten und beantragt, das Wartejahr sei nicht ab 22. Juni 2003, sondern ab 10. November 2003 zu eröffnen; sodann sei der Invaliditätsgrad von 50% auf 100% anzuheben. Die IV-Stelle beantragt die Abweisung der Beschwerde und das Bundesamt für Sozialversicherungen verzichtet auf eine Stellungnahme. 