ListPage 正在参加 2020 年度 OSC 中国开源项目评选,请投票支持!
ListPage 在 2020 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
投票让它出道
已投票
ListPage 获得 2020 年度 OSC 中国开源项目评选「最佳人气项目」 !
ListPage 获得 2020 年度 OSC 中国开源项目评选「最佳人气项目」「最积极运营项目」 !
ListPage 获得 2020 年度 OSC 中国开源项目评选「最积极运营项目」 !

软件简介

ListPage 是专门用于爬取或操作列表式网页的页面类,基于 DrissionPage。页面类抽象了列表式页面基本特征,封装了常用方法。 只需少量设置即可进行爬取或页面操作,实现可复用、可扩展。广泛适用于各种网站的列表页面。

特性

  • 配置简单,上手容易
  • 封装常用列表页属性及方法,实现可复用
  • 不同类型页面使用相同的操作方式,使用方便
  • 可根据特殊情况扩展,实用性强
  • 支持 requests 和 selenium 方式,并支持无缝切换
展开阅读全文

代码

的 Gitee 指数为
超过 的项目

评论 (0)

加载中
更多评论
暂无内容
2014/12/02 09:27

activiti 细节总结

activiti 细节总结: 1,listpage方法: 1),API:listPage(int, int) - Method in interface org.activiti.engine.query.Query Executes the query and get a list of entities as the result. 2),listPage(int firstResult,int maxResults),类似与MySQL的分页功能,前面是从第几条开始,后面是一共几条,注意点是结果是以DEPLOYMENT_ID_排序的,就是按照发布时间排序; 2,查询USER1 可以使用的流程: processDefinitions...

0
5
发表于开发技能专区
2018/02/06 10:31

List分批插入数据库

//如果List太大,插入数据库的时候报错,PLS-00183: too many bind variables,所以要分批处理 Integer size = stockQuotationList.size(); if(null!=stockQuotationList&&size>0){ int pointsDataLimit = 1000;//限制条数 //判断是否有必要分批 if(pointsDataLimit<size){ int part = size/pointsDataLimit;//分批数 for (int i = 0; i <= part; i++) { //1000条 List<StockQuotation> listPage = stockQuotationList.subList...

0
0
发表了博客
2013/11/04 11:48

快速好用的php分页类

发布:thebaby 来源:net 【大 中 小】 一个快速好用的php分页类,有需要的朋友,可以参考下。 php分页类。 <?php /* * 快速php分页类 * **/ class Page{ private $totalpage; private $stride; private $currentpage; //设置总页数 function setTotalpage($objpage=1){ $this->totalpage=$objpage; } //设置当前页 function setCurrentpage($objpage=1){ $this->currentpage=$objpage; } //设置跨度 function setStride($objS...

0
0
发表了博客
2011/03/09 10:19

写网络爬虫程序 注意点1:网页Type枚举

爬虫程序中重要的网页Type枚举 google 开辟了搜索引擎的时代,而 google spider 却是google 强大背后的一条 庞大的虫子。 spider 即是 网络爬虫,网络上也有很多叫 crawler 。 爬虫最原始工作有三步: 获取网站种子页面 解析网页 遍历urls 通过发送请求下载网页 今天我们不谈它的工作原理,或者更高的处理机制。今天就谈下网络爬虫 spider 对网页解析处理中的重要一点:定义网页Type的枚举类型。 我以前为了兴趣,抓了50几个军事...

0
1
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
暂无内容
0 评论
5 收藏
分享
OSCHINA
登录后可查看更多优质内容
返回顶部
顶部