将公众号文章爬到hexo博客

小鸡
阅读942 喜欢3 更新2018-11-22

由于以前公众号发了挺多分享资源的文章，索性写个python爬虫来爬取

特点：

1.保留公众号排版样式（就是把div样式全拷下来了）
2.写成md格式，并且加了hexo渲染需要的头部
3.解除了微信图片防盗链的限制！！！

不过一次只能抓一篇文章（不过我是因为之前公众号有一篇文章发了链接合集，所以直接全都下载了）

脚本放在GitHub练习库里

将公众号文章爬到hexo博客

下面是抓取单篇的python


# 下载我的博客内容
from bs4 import BeautifulSoup
import requests,sys
import datetime

if __name__==__main__:
	reurl = input("粘贴要抓取的文章链接:")
	req=requests.get(url=reurl)
	bf=BeautifulSoup(req.text,"html.parser")
	texts=bf.find_all(div,class_=rich_media_content)
	title=bf.find_all(h2,class_=rich_media_title)
	title=str(title[0].text)
	title=title[63:-82]
	title.replace(
,)

	path=title+.md
	print(path)
	texts=(str(texts[0]).replace(data-src,src))
	texts.replace(data-copyright="0",)
	texts.replace(data-w,test1)
	write_flag=True
	with open(path,a,encoding=utf-8) as f:
		f.write(---
title: +title+
)
		f.write(copyright: +true+
)
		f.write(permalink: +1+
)
		f.write(date: +str(datetime.date.today())+
)
		f.write(updated: +str(datetime.date.today())+
)
		f.write(tags: +资源+
)
		f.write(categories: +资源+
---

)
		f.writelines(str(texts))

下面是一些我的建站笔记汇总，平常做的小手工，希望对大家有帮助

hexo博客搭建以及next美化教程 原生js实现网页图片点击展示效果 用回valine评论系统,valine评论框样式美化 给hexo静态博客添加动态相册功能 hexo建站笔记之首页文章轮播图 模仿知乎的链接卡片 开始使用腾讯云图床 将公众号文章爬到hexo博客 使用腾讯云cdn加速博客 hexo建站笔记之彩色标签云 手动修改博客css样式，打造属于自己的博客样式