网站如何采集微信公众号

A. 如何利用爬虫爬微信公众号的内容

过程很繁琐，步骤如下：

1、写按键精灵脚本，在手机上自动点击公号文章列表页，也就是“查看历史消息”；

2、使用fiddler代理劫持手机端的访问，将网址转发到本地用php写的网页；

3、在php网页上将接收到的网址备份到数据库；

4、用python从数据库取出网址，然后进行正常的爬取。

如果只是想爬取文章内容，似乎并没有访问频率限制，但如果想抓取阅读数、点赞数，超过一定频率后，返回就会变为空值，我设定的时间间隔为10秒，可以正常抓取，这种频率下，一个小时只能抓取360条，已经没什么实际意义了。

微信公众号数据储存

1、腾讯不对你在本服务中相关数据的删除或储存失败负责。

2、腾讯有权根据实际情况自行决定单个用户在本服务中数据的最长储存期限，并在服务器上为其分配数据最大存储空间等。你可根据自己的需要自行备份本服务中的相关数据。

3、如果你停止使用本服务或服务被终止或取消，腾讯可以从服务器上永久地删除你的数据。服务停止、终止或取消后，腾讯没有义务向你返还任何数据。

B. 有什么办法可以通过搜索采集公众号的内容

我们平常在编辑微信公众号的时光，一般都先待收集一些文章来参阅，那们何如筹募微信大众号的文章?

小程序检索流量入口大，造福用户浏览。微信公众号的成文，半自动走形如下图的小程序界面，文章电动综采谐调民众号代发的文章，浏览量、点赞、品评通栏是手拉手群众号的篇章，自动分拣，得以更好的出示谈得来往期早就昭示的微信文章，福利归并显得。对于自媒体和流量主而言，时常宣布上品的文章更容易留住客户，可以展开广告，福利二次挣钱。

C. 关于微信公众号的数据的采集（文章、阅读/点赞、评论）

<p> 近期，公司有相关公众号爬取的需求，摸索了一段时间，一开始使用搜狗微信去取数据，但随着后续悄尺搜狗的验证码机制越发恶心，用户体验极差，并且也无法取到历史数据，只能取到近10条群发，这也预示着通过搜狗微信爬取数据的方案对于我来说只能是一霎花火。</p>
<p> 下面这套方案是基于微信客户端进行数据的爬取的，实际上我很久之前就一直在使用了，只是一直没有时间写，现在抽空把整套方案梳理一遍，后续也会push到github上面去。</p>
<p> 或许你有更好的方法，欢迎在评论里留言，一起交流学习。</p>

一、前提
1.一个微信号一天只能最多获取8000篇文章的阅读/点赞信息；
2.微信公众宏运洞号发文频率（一条群发消息包含8篇以内文章）；
服务号1个月（按自然月）内可发送4条群发消息；
订阅号（认证用户、非认证用户）1天内可蔽枯群发1条消息；

二、获取公众号文章信息所需参数
步骤如下：
1.获取微信号与公众号对应信息（抓包获取，且除文章内容外每一步骤均需要以下参数）

2.获取公众号文章列表

3.获取文章内容（永久链接）
4.获取点赞数/阅读数

5.获取评论内容

三、实施
待更...