Xextract - Extract structured data from HTML and XML like a boss.

Для неавторизованных верстка чуток поменялась, но всеже годно.

Похоже что эта либа войдет в мой must have список :)

                    result = Prefix(css='#profile', children=[
                        String(name='name', css='#name', quant=1),
                        String(name='title', css='.headline.title', quant=1),
                        Group(name='jobs', css='#experience .positions .position', quant='*', children=[
                            String(name='title', css='h4', quant=1),
                            String(name='company', css='h5.item-subtitle', quant=1, attr='_all_text'),
                            Url(name='company_url', css='h5.item-subtitle a', quant='?'),
                            String(name='description', css='.description', quant='?')
                        ])
                    ]).parse(response.text, url=response.url)