Faits : Faits : A. Par jugement du 22 décembre 2005, le Tribunal correctionnel de l'arrondissement de La Côte a notamment condamné H._, pour agression, omission de prêter secours et contravention à la LStup, à quatre mois d'emprisonnement avec sursis pendant deux ans. Il a également révoqué le sursis accordé le 29 décembre 2003 par le Juge d'instruction de La Côte et ordonné l'exécution de la peine de deux mois d'emprisonnement. Cette condamnation repose, en bref, sur les faits suivants. A.a Le 22 février 2004, dans les toilettes d'une discothèque de Gland, une altercation verbale a éclaté entre A._ et B._. Plus tard, sur la piste de danse, le premier a assené un coup de poing au visage du second, qui a répliqué. Les protagonistes ont été séparés par les employés de l'établissement et refoulés. A l'extérieur, devant une assistance acquise à leur cause, A._ et C._ ont roué de coups de pied et de poing B._ pendant qu'un dénommé D._ le maintenait. A.b A un moment donné, B._ a réussi à s'enfuir et à se réfugier dans un bois, poursuivi par A._, C._ et diverses autres personnes, dont H._ et E._ qui n'étaient pas concernés par les événements. Débusqué, B._ a encore pu courir et se rapprocher de la route, avant de tomber à terre suite à un croche-pied. Il a alors été frappé, sur tout le corps, par A._ et C._, notamment à coups de pied dans le visage. H._ lui a asséné un coup de pied dans une jambe. Gisant sans connaissance, il a finalement été abandonné par ses assaillants à l'arrivée d'une automobiliste. B._ a souffert de nombreuses contusions, d'un traumatisme crânien cérébral et d'une entorse cervicale. A ce jour, il n'a toutefois plus de séquelles. Il a chiffré ses prétentions à 4'500 francs, correspondant à un mois et demi d'incapacité de travail. Il a retiré sa plainte, après que les agresseurs lui aient versé, le jour de l'audience, 3'100 francs qu'ils ont réussi à rassembler durant la pause de midi. A.c Entre le 30 décembre 2003 et le 22 février 2004, H._ a consommé de la marijuana à raison de deux joints par semaine. A.c Entre le 30 décembre 2003 et le 22 février 2004, H._ a consommé de la marijuana à raison de deux joints par semaine. B. Par arrêt du 12 juin 2006, la Cour de cassation pénale du Tribunal cantonal vaudois a réformé le jugement de première instance, en ce sens qu'elle a condamné H._ à une peine de dix mois d'emprisonnement. B. Par arrêt du 12 juin 2006, la Cour de cassation pénale du Tribunal cantonal vaudois a réformé le jugement de première instance, en ce sens qu'elle a condamné H._ à une peine de dix mois d'emprisonnement. C. Ce dernier dépose un pourvoi en nullité pour violation des art. 63 et 41 CP. Il conclut à l'annulation de l'arrêt cantonal et sollicite l'assistance judiciaire. 