获取CSDN文章内容并转换为markdown文本的python
作者:tansty 时间:2021-04-05 08:32:15
自己写的小工具,可以直接获取csdn文章并转换为markdown格式
效果图
核心代码
from PySide2.QtWidgets import QApplication,QMainWindow,QPushButton,QPlainTextEdit,QMessageBox
import re
import parsel
import tomd
import requests
class CSDN():
def __init__(self):
self.windows = QMainWindow()
self.windows.resize(450, 300)
self.windows.setWindowTitle("轻松获取csdn文章--by tansty")
self.setup_ui()
self.set_connect()
def set_connect(self):
#设置建立联系
self.button.clicked.connect(self.spider_csdn)
def setup_ui(self):
#设置ui界面的建立
self.button = QPushButton(self.windows)
self.button.resize(100, 100)
self.button.move(150, 150)
self.button.setText("获取文章")
self.text = QPlainTextEdit(self.windows)
self.text.setPlaceholderText("请输入需要获取文章的链接")
self.text.resize(450, 100)
def spider_csdn(self):
# 目标文章的链接
title_url=self.text.toPlainText()
MessageBox = QMessageBox(self.windows)
if not title_url:
MessageBox.critical(self.windows, "错误", "请输入网址")
return
head={"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36 Edg/84.0.522.52"
}
html=requests.get(url=title_url,headers=head).text
page=parsel.Selector(html)
#创建解释器
title=page.css(".title-article::text").get()
res = re.compile("[^\u4e00-\u9fa5^a-z^A-Z^0-9]")
restr = ''
res.sub(restr, title)
content=page.css("article").get()
content=re.sub("<a.*?a>","",content)
content = re.sub("<br>", "", content)
texts=tomd.Tomd(content).markdown
#转换为markdown 文件
with open(title+".md",mode="w",encoding="utf-8") as f:
f.write("#"+title)
f.write(texts)
MessageBox.information(self.windows,"正确","获取文章完成")
if __name__ == '__main__':
app = QApplication()
csdn=CSDN()
csdn.windows.show()
app.exec_()
文件打包下载 链接: https://pan.baidu.com/s/1R6RcrDagwf1vWzmRCBja4w 提取码: ug6n
来源:https://www.52pojie.cn/thread-1260344-1-1.html
标签:CSDN,文章内容
0
投稿
猜你喜欢
用javascript 转换外部链接样式
2007-09-17 10:48:00
什么是UE,UED?
2008-07-24 13:26:00
SQL学习笔记八 索引,表连接,子查询,ROW_NUMBER
2011-09-30 11:18:24
老生常谈CSS网页布局的意义与副作用
2008-09-12 12:31:00
更改localhost为其他名字的方法
2023-11-23 08:07:52
php静态化页面 htaccess写法详解(htaccess怎么写?)
2023-11-14 22:33:03
asp如何利用当前时间生成随机函数?
2010-01-01 15:44:00
Python自定义一个类实现字典dict功能的方法
2023-07-20 22:45:59
解析Anaconda创建python虚拟环境的问题
2023-08-01 03:58:13
兼容FF的图片切换代码
2009-09-26 20:15:00
openai createChatCompletion函数使用实例
2023-06-14 16:45:38
Firefox 的 Jetpack 扩展案例分析:Gmail 邮件提醒
2009-10-15 12:41:00
php使用socket简单实现通信功能
2023-05-31 13:01:23
MySQL错误中文参照列表
2010-09-30 14:41:00
python数组中的 k-diff 数对例题解析
2022-03-30 18:21:47
SQLServer 全文检索(full-text)语法
2011-12-01 10:38:22
如何把图片上传到数据库中并显示出来?
2009-11-06 13:50:00
Access2003:不支持这种ActiveX控件
2010-12-09 19:59:00
Dreamweaver MX新功能试用:连续空格
2008-01-06 21:03:00
python设计模式之装饰器模式
2023-04-28 07:55:40