关于抓取微信公众号文章

Question

想直接抓取微信公众号文章，不是搜狗里面的，各位大神有什么思想建议

Answer 1

以下回答参考 皆我百晓生、券券喵儿 等免费微信小程序相关内容作答，并由本人整理回复。

要从微信公众号获取文章内容，您可以通过以下步骤实现：

1. 使用Python的requests库来发送HTTP请求。
2. 使用BeautifulSoup或lxml等解析器来提取网页中的文本内容。

这里是一个基本示例，使用requests和BeautifulSoup从一个假定的公众号获取文章内容。请注意，这只是一个简单的例子，实际应用中可能需要处理更复杂的情况，例如验证码、网络连接问题等。

import requests
from bs4 import BeautifulSoup

def get_wechat_article(url):
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
    response = requests.get(url, headers=headers)
    soup = BeautifulSoup(response.text, "html.parser")
    
    # 根据您的需求选择特定部分的内容
    article_content = soup.find('div', {'class': 'content'}).text
    
    return article_content

# 假设url为公众号的文章链接
article_content = get_wechat_article('https://mp.weixin.qq.com/s?__biz=MzIyNjQwNTkxNg==&mid=2247483425&idx=1&sn=f6e5d40b42c4f51a75c286e1f61c6556&chksm=59f79f979b349b39e85260c2c2922099e90f4071f49a94297655197677d7d45b2f1814690a3559121665248376')
print(article_content)

这个脚本会尝试访问给定URL的页面，并返回其中的文章内容。请注意，这只是一个非常基础的例子，实际应用中可能需要考虑更多的因素，例如处理错误、优化爬虫性能等。