gfast是基于GF(Go Frame)的后台管理系统 ,完善的权限用户管理,致力于快速高效开发cms系统、督办系统、后续将加入流程审批、工作流引擎、项目管理、数据大屏等功能。
最近更新: 24天前微商城-api,基于kelvins-io/kelvins,gRPC构建的微服务商城,包含用户,商品,购物车,订单,支付共计22+个微服务并通过micro-mall-api聚合
最近更新: 接近2年前sciencenet项目的补充,主要是因为以学科分级接口去爬取博主信息时,所得博主人数并不完整。主要问题在于,博主提供的研究领域信息不完整或者不正确,所以科学网无法进行归档整理。 所以这个补充程序,从博主姓名字母排序列表接口接入,从而对之前程序进行补充,主要针对博主信息(工作单位、职称、研究领域、博文数量、活跃度、博客访问量)的杂乱进行了处理和入库,除被封博的博主外,允许部分信息缺失,并对缺失值设置默认值。
抓取科学网博主信息爬虫,提取信息包括一级学科、二级学科、三级学科、博主姓名、博客uid、博主所在单位、博主头衔、博客访问量、博文总数、博客活跃度等。 使用scrapy框架开发,mongodb做存储。
最近更新: 7年多前selenium + PIL破解bilibili的滑动极验, 详细注释; 注意点是, 点击获取有缺口的验证码图片后, 会在图片上方有一行提示信息, 要等待5至6秒, 等提示信息消失后再行截图, 否则, 提示信息会干扰像素比较;
最近更新: 7年多前