大众点评用户浏览/消费记录爬虫

Question

我想写一篇市场调查相关的论文，在阅读Chunhua Wu, Hai Che, Tat Y. Chan和Xianghua Lu的论文，The Economic Value of Online Reviews的时候，发现他们利用了用户三十天内的浏览记录以及用户的优惠券使用记录作为数据来分析了用户的消费行为。这也是我自己研究想要做的方向，但是在试图获取数据的时候我发现，我能看到的有关大众点评的爬虫几乎都只涉及在商家店面下，而没有涉及到用户浏览记录/消费记录的抓取。我的代码能力比较一般，所以在寻找现有的爬虫方式，或者平台去雇佣专业人士来进行这部分的数据收集。不知道大家有没有建议呢？非常感谢！

或者可以推荐一些这种用户消费/浏览的开放数据库来给学术分析使用的网址吗？或者单纯的市场相关的开放数据库？都非常感谢！

Answer 1

引用 皆我百晓生 小程序回应内容作答：
对于获取用户浏览/消费记录的爬虫，由于涉及到用户隐私和数据安全的问题，大众点评等平台通常限制了此类数据的获取。因此，要获取这些数据可能会面临一些难度。下面提供一些方法供您参考：

1. 网络爬虫：可以编写自己的爬虫程序来获取大众点评的用户浏览/消费记录。您可以从大众点评网站的源代码中寻找相关的API或数据接口，并通过发送HTTP请求来获取数据。不过，请确保您遵守大众点评的使用政策，并尊重用户隐私。

2. 数据采购平台：您可以寻找一些数据采购平台，例如第三方市场研究公司或数据提供商，来购买大众点评用户的浏览/消费记录数据。这些平台通常提供各种类型的市场分析数据和用户行为数据。请确保您与数据提供商签订合法合规的数据使用协议。

3. 学术研究数据库：一些大学、研究机构或学术出版社提供一些开放的市场相关数据库供学术研究使用。您可以在Google Scholar、Kaggle或其他学术资源网站上寻找这些数据库。 您可以搜索与您论文主题相关的市场相关数据库，并查看是否有与用户消费/浏览行为相关的数据可供使用。

请注意，无论您采用哪种方式，都需遵循数据使用政策和法规，并确保对数据进行适当的处理和分析，以确保数据的安全和隐私保护。另外，市场调查领域也有其他一些常用的数据收集和分析方法，可以考虑结合其他可行的方法来进行您的研究。