资讯类网站爬虫 特性 实现资讯类网站统一内容结构化爬取框架，通过简单配置实现大多数资讯类网站内容爬取 科技行业等数十个资讯网站采集爬虫积累，涵盖源包括（不断增长ing）：
挑战 资讯类站点关键属性统一结构化方法
栏目
翻页
资讯基本要素：title、author、content、publish_time、source等
反爬
css in js：动态生成css
多数海外网站使用该类型框架编写前端。采集系统目前难以实施统一的资讯属性结构化。
登录验证：微信扫码、手机验证等
参考项目 GeneralNewsExtract
Newspaper3k