- 项目基于微博现有接口+TypeScript 构建,为微博网友提供一个方便的, 以供自己阅读/数据备份/自身结集整理的方式
不考虑商业用途
接受功能建议, 但一般不考虑定制开发
最新版本: 1.7.0
软件界面:
运行截图
输出的文件:
输出的 html 电子书:
输出的 pdf 电子书:
严肃保护以@Aioros 先生为代表的珍稀野生读物博主
-
登录微博. 由于微博网页本身问题, 输入账号/密码/验证码时略有卡顿, 请耐心等待
-
进入系统设置, 将个人主页地址粘贴进输入栏. 点击
同步个人信息
按钮, 可看到预估的备份时长, 点击开始备份
, 执行备份操作. -
备份完成后会自动打开电子书输出目录,
稳部落输出的电子书
目录下, 即为电子书, 其中,html
目录下为 html 格式书籍,index.html
为目录页.pdf
下为 pdf 输出位置
- 备份页数: 从第 m 页备份到第 n 页
- 除首次备份外, 正常使用只要备份前 10 页微博即可, 可以加快备份速度
- 微博排序
- 按微博发布时间进行排序. 精确度为
天
. 建议使用由旧到新
模式, 符合阅读习惯
- 按微博发布时间进行排序. 精确度为
- 图片配置
- 电子书内是否包含图片. 建议选择
有图
模式
- 电子书内是否包含图片. 建议选择
- 自动分卷
- 解决电子书体积过大问题. 如果单本电子书内微博总数超出配置值, 将会分为多卷输出
- 时间范围
- 只输出指定时间范围内的微博记录.
- 分页依据
- html 版电子书内, 按什么标准合并微博. 推荐
按月
合并微博. 话痨博主可以按天
, 不喜欢说话的博主可以按年
- html 版电子书内, 按什么标准合并微博. 推荐
问: 软件安全吗, 为什么一定要登陆后才能使用? 答: 作者可以保证从项目 Github 主页上下载的软件安全可靠. 项目源代码开放, 实在不放心可以基于源代码自行编译. 由于是微博备份项目,只有登录自己的微博账号后才能看到发布的所有微博, 所以必须要登陆.
问: 为什么备份这么慢? 为什么每次都要等 20s 之后才抓取下一条微博? 答: 新浪对爬虫进行了严格限制, 20s 抓一次是我试验多次之后, 可以安全备份微博数据的最短间隔. 作为为非开发人员提供的备份工具, 稳定第一 🎵
- 变量命名规范
- 类型统一使用 namespace 方式声明, 导入时使用
Type + xxx
形式进行导入 - Model 导入时统一使用
M + xxx
形式进行导入 - View 导入时统一使用
View + xxx
形式进行导入 - Util 工具函数导入时统一使用
xxx + Util
形式进行导入 - async 函数前统一添加
async
前缀, 以和正常函数进行区分
- 类型统一使用 namespace 方式声明, 导入时使用
- 文件命名规范
- 统一使用下划线方式命名
- 必须使用 node12
- Electron 版本必须和环境中的 node 版本一致, 才能正常编译 sqlite
- 目前使用的是 Electron@6.0.12, 自带 node 为 12.4.0, 因此要求环境 node 也需要为 12.x.x
- Electron 版本必须和环境中的 node 版本一致, 才能正常编译 sqlite
- 建议只开发命令版
- 使用
npm run ace
启动
- 使用
- GUI 版需要为 Electron 编译 sqlite3, 非常麻烦, 不建议尝试
- 流程
- Windows 用户
- 安装VS 2019 社区版, 社区版免费下载. Windows 下为 Electron 编译 sqlite3 需要 VS 提供的构建工具
- 启动 VS, 选择
工具
-获取工具和功能
- 勾选
使用C++的桌面开发
-MSVC v140 - VS 2015 C++生成工具(v14.00)
, 安装即可 - 好了一个小时过去了
- 执行
npm run rebuild-sqlite3
, 编译完成 sqlite3 之后, 就可以启动 GUI 界面了 - 特别说明: 这套流程只适合纯净环境, 如果是
Electron@4
升级到Electron@6
, 再编译会编译不过去(会有 v4 的编译残留), 将整个node_modules
目录删除后重新install
即可
- Mac 用户
- 正常
npm install
即可, 注意安装puppeteer
和electron
本身非常耗时, 需要使用淘宝源进行下载--registry=https://registry.npm.taobao.org/
- 正常
- Windows 用户
- 注意:
- 打包时会向 dist 目录中复制一份 node_modules 目录, 导致 npm run 时优先从 dist 中获取 node_module 信息, 导致无法启动
- 因此, 打包结束后需要将 dist 里的 node_modules 目录删掉, 以免影响后续开发工作
- 打包时会向 dist 目录中复制一份 node_modules 目录, 导致 npm run 时优先从 dist 中获取 node_module 信息, 导致无法启动
- 流程
- 电子书封面分辨率为: 100 * 130(宽*高)
关键字 | 功能 |
---|---|
feat | 添加新功能 |
format | 调整代码格式 |
fix | 修复错误 |
doc | 修订文档/注释 |
- TypeScript 提供类型支持, 在编写代码时可以自动提示变量下的属性
- Electron 提供图形界面, 利用 webview 标签直接登陆微博
- 利用微博接口抓取数据
- ace/command 提供命令行支持
- sqlite3 提供数据库支持
- 将电子书制作分为以下三步
- 初始化环境 => 对应于
npm run ace Init:Env
命令 - 抓取指定内容 => 对应于
npm run ace Fetch:XXX
系列命令, 目前支持Column
/Author
/Activity
/Collection
/Topic
- 从数据库中获得数据, 生成指定内容电子书 => 对应于
npm run ace Generate:XXX
系列命令, 目前支持Column
/Author
/Activity
/Collection
/Topic
- 因此, 实际任务流程就是根据用户输入 url, 生成对应命令配置, 不断执行命令即可
- 初始化环境 => 对应于
- 项目开发流程
npm run watch
启动监控, 将ts
自动编译为js
文件npm run startgui
, 启动前端界面(vue 项目, 基于 Element-UI 简单构建)- 执行
npm run start
, 以调试模式启动 Electron- 前端点击
开始任务
按钮后, 将任务配置写入task_config_list.json
, 再由 Electron 收集登陆后产生的微博 cookie, 存入config.json
文件中, 随后启动Dispatch:Command
命令, 开始执行任务
- 前端点击
- 项目发布
- 执行
npm run dist
- 执行
- 注意事项
- Electron 需要编译 sqlite3 后才能启动, 不容易搞, 建议直接使用
npm run ace
命令行方式进行调试 - 命令使用说明详见代码
- Electron 需要编译 sqlite3 后才能启动, 不容易搞, 建议直接使用
欢迎通过issue提建议