使用什么方法抓取淘宝、天猫、京东和当当网的店铺和商品信息？

Question

由于这些电商网站有一部分产品信息是通过JS脚本动态填充进去的，能直接在网页源码里面获取到的产品信息相当有限，请问各位大神使用什么技术可以抓取到店铺和商品的完整信息？

Answer 1

http://blog.csdn.net/xuyaogyo/article/details/40918483