oovm / zhihulink Goto Github PK

登陆 ZhihuLinkLogin

使用模拟登陆或者手动的方式获得 cookies

接下来使用 cookies 构造 http 请求获取网页内容

前端 ZhihuLinkGet

请求到的原始内容存放在本地 ApplicationData/ZhihuLink

但是希望用户不要手操本地内容, 一切主要操作放在 FrontEnd.

数据处理 ZhihuLinkData

原始数据太过繁杂, 所以需要清洗数据, 同时清空缓存.

然后转存为信息密度更高的结构.

数据分析 ZhihuLinkAnalysis

从已经清洗完的数据中进行数据的分析和可视化

其他工具

其他工具依托于请求到的原始数据或者清洗过的数据.

• ZhihuTopicFollower
• ZhihuTopicEssence
• ZhihuTopicAnswerer

• figure out how to install & update the plugin for beginners

• Download all the answers of the user

Steps

• ZhihuLinkUserAnswer
• ZhihuLinkUserArticle
• H2MDAnswer
• H2MDArticle

重要决议

• 讨论并决定用户有哪些属性

• Ways to make the installation package
• Automatic packing the installation package

转换的文件中出现 XMLObject

这是由于转换规则冲突或缺失导致的

XMLObject[ ] 从左边括号到右边括号整个粘贴上来即可

我更新规则后会告知使用哪个新版本

敏感字符串的话用 "XXXXXXXXXXXXXXXXXXXXXX" 代替即可

议题: 如何保存本地请求

昨天的内测表明现在的操作很糟糕, 太过复杂, 绝大多数用户难以忍受这么多的步骤.

同时 #2 遇到了巨大的难题, 手动的添加 cookies 仍然是唯一的解决方案.

• 需要一个cookies管理方案

• Transform the answer from html to markdown

Steps:

• HTML-Formatted
• Parsing the HTML
• Finishing transform to Markdown

Modules

• ZhihuLinkFollowee
• ZhihuLinkFollower
• ZhihuLinkFollowingQuestion
• ZhihuLinkFollowingTopic
• ZhihuLinkFollowingColumn
• ZhihuLinkFollowingFavlist

• Login use username and password
• Automatic re-login if cookies expired

These features SHOULD NOT be introduced until v3.0

数据分两种形式进行存储：

1. 封装形式——此为用户使用的形式，可以包括ZhihuCookieData,ZhihuUserData,ZhihuPostData,ZhihuBlogData等等
2. 纯数据形式——此为数据存储的形式，主要是以单文件形式存在的Cookie和数据库形式存在的各种其他数据。

理想状态下，Cookie在硬盘中应该采用如下形式：

<|userid-><|"Cookies"->{<|cookie1|>,<|cookie2|>,...},"BasicInfo"-><|"Username"->***,...|>|>,...|>

第一部分是真实Cookie的全部信息，第二部分则存储了需要用来构建ZhihuCookieData所需要的一些额外信息。这样可以在构建一个ZhihuCookieData对象的时候不需要联网啥的，那样太慢了。若是没有"BasicInfo"，用户在选择cookie的时候将会有困难。

其他的数据就是Database一份内存一份，Database该怎么存怎么存，取出来的时候直接封装成对应的***Data形式的东西就行，所有的数据分析都应该基于***Data的形式。