Парсинг сайта. В какую сторону копать?
Направьте меня в нужную сторону, плиз ))
Удали прямо сейчас beautifulsoup и возьми scrapy.
Полностью  согласен с nirvimel  - дикий говнокод. На твоем месте я бы не стал заморачиваться и вникать во все эти запросы - уйдет очень много времени, а тупо бы взял selenium или бы нашел другой сайт, который выдает те же самые данные.