Python 爬虫爬取页面pagetext不完整 是静态页面

Question

#https://chem.nlm.nih.gov/chemidplus/sid/0001327533
对上面网页进行爬取的时候爬取的page-text不完整，无法获取化合物毒性相关信息

Answer 1

该页面信息通过用户选择选项，js动态渲染加载数据的，比如在选项框中输入name,在XHR中就可以看到name的动态加载链接，对其进行请求可获取相关信息的json数据信息。