（1）由于我这个爬虫的抓取有分页，而且它的分页通过js跳转的，抽取出来感觉有点麻烦，我想直接得到所有的信息，发现可以通过输入url地址请求得到所有的信息（这是网站的一个小问题，它没有设置每页数据记录条数的范围），但是需要登录才可以进行url地址的访问，就要使用cookie模拟登录。
（2）下面分析有关登录信息的cookie，我使用的是chrome，点击如图位置，会看到此网站的cookie，（如果已经访问了一段时间了，可以清除所有cookie然后重新登录再访问，否则可能会有很多的cookie，分析起来不方便），由于只有5个cookie，直接加上就可以访问了
WebMagic是java上面经常的需要的一款爬虫类型的工具了，现在就可以试试最新的0.7.3版本，功能以及使用上面都是完全的免费的，欢迎大家试试！
本次更新增加了Downloader模块的一些功能。诸世王者无限送充值
#609修复HttpRequestBody没有默认构造函数导致无法反序列化的bug。
#631HttpRequestBody的静态构造函数不再抛出UnsupportedEncodingException受检异常。
#571Page对象增加bytes属性，用于获取二进制数据。下载纯二进制页面时，请设置request.setBinarayContent(true)，这样对于二进制内容不会尝试转换为String，减小开销。
#629在HttpUriRequestConverter中会自动对一些导致URI异常的字符进行转移或过滤。
#610自动识别编码时，可以识别Content-Type中charset为大写的情况。
#627支持为Request单独设置页面编码，兼容同一站点多种编码方式的情况。
#613Page对象增加charset属性，其值为request/site中设置的charset，或者为自动检测的charset(未定义时)。
#606升级jsonpath到2.4.0
#608升级jsoup到1.10.3
WebMagic是一个简单灵活的Java爬虫框架。基于WebMagic，你可以快速开发出一个高效、易维护的爬虫。webmagic采用完全模块化的设计，功能覆盖整个爬虫的生命周期(链接提取、页面下载、内容抽取、持久化)，支持多线程抓取，分布式抓取，并支持自动重试、自定义UA/cookie等功能。
展开内容
10.0/31.7M
托卡生活学校游戏是托卡系列一款十分有趣的休闲模拟手游，游戏中玩家可以在游戏中了解学校的知识，让宝宝可以提前接触学校的概念，游戏提供了五个区域和34个人物角色，您...
9.1/824.3M
伞来了app是一款即时多媒体交易软件，在这里你可以了解并且记录到自己美好的生活，你只需要拿起手机飞享照片视频即可。软件介绍伞来了是著名机构投资研发和运营的即时多...
9.2/688.9M
软件是一款移动支付服务软件，在上面有着很多的支付信息，随时随地查看众多支付功能，超多不同的银行卡可以查看，帮助用户快速回收，让使用支付更加轻松！辣付宝app介绍...
8.5/1,619.3M
上帝物理盒子是一款像素沙盒手游，在游戏中玩家可以成为真正意义上的上帝，你只需要发挥出你的创意，建造出一个不同一般的世界，感兴趣的小伙伴快来uzzf东坡下载吧！上...
9.5/1,250.6M
根据你的脸自动生成表情包，funmoji智慧表情照着你的模样做表情，你的情绪都可以很好的展现，在聊天的时候进行互动，制作你专属的表情包!功能介绍百余种表情依照你...
8.0/741.6M
潜水小厨寿司物语是融合水下探险与餐厅经营的休闲游戏，玩家化身潜水员探索从浅海到深海的多样海底世界，捕捉珍稀鱼类并制作寿司招待顾客。游戏搭载动态Roguelike...
9.0/649.5M
喵喵撸猫app是一款非常好用的可以随时随地看撸猫和猫咪照片视频的软件，里面有很多猫咪都很可爱。喜欢猫猫吗？喜欢撸猫吗？想要看各种各样的好看猫猫吗？想要养猫但是条...
8.6/1,679.8M
火神雷霆战机是一款经典雷电街机射击游戏。玩家将操作飞机开启自己的射击闯关之路。多种游戏模式，海量的飞机可以选择，炫酷的技能，把敌人都消灭掉。展现出你最强的火力吧...
8.3/1,454.2M
冰河大陆生存进化是一款模拟生存冒险手游，在这个冰河时代里，你需要格外注意资源是否充足，克服一切危险，收集足够你穿越冰河大陆的资源，感兴趣的小伙伴快来东坡下载吧！...
7.9/1,373.8M
超级工团长app是国内第一家为交通器材打造的购物服务平台软件，用户能够在上面了解到非常全面的器材购物商城，每一种商品都在上面介绍的非常详细，用户可以根据需求进行...
9.7/1,139.4M
苹果手机上面的主流的壁纸软件你可以直接的选择--我的壁纸和主题，支持苹果手表以及其它的手机上面使用，你可以根据你手机上面的展示出不一样的优势！我的壁纸和主题介绍...
7.7/1,305.7M
一款大学生的学习软件，大学作业考试答案app有丰富的功能，考完试后可以查询答案，有丰富的题库内容，可以针对性的进行学习。功能介绍1、搜题范围广：大学作业考试答案...
10.0/777.1M
图标牧羊人(IconShepherd)是一个恢复桌面图标的位置的简单的工具。只需再次单击应用程序的任务栏图标，选择“恢复图标”选项，然后根据创建的日期和时间选择...
8.0/940.9M
Modern摩登印app是一款很不错的相册制作软件，在软件中，有多种专业的模板供用户选择，可以帮助用户制作个性化订制印品。有需要的来下载吧！相册制作软件软件介绍...
7.7/344.9M
这是一款创新融合跑酷与战略元素的冒险游戏，玩家化身时间旅行者穿越时空。从石器时代原始森林到太空时代星际战场，既需在各时代奔跑跳跃战斗，又要策略管理资源、升级装备...
7.7/1,104.4M
txt编辑器手机版提供简洁的文本编辑界面，支持标记格式创建任务清单、插入图片和待办事项，具备页面共享和书签功能，方便文档管理和快速访问。txt编辑器功能介绍tx...
8.0/702.0M
宅急送快递查询工具，提供准确、实时、快速的宅急送快递单号查询，让属于你的快递了如指掌。不用登陆宅急送官网就可以直接查询你的快递物流情况，调用官方查询接口，查询结...
7.5/233.7M
开罗游戏都是以一种像素类的风格出现的，这款合战忍者村物语也不例外，而且在十二月份就汉化了，小编特意为大家带来了的简体中文版本的，让大家免费建造模拟城市。合战忍者...
9.9/1,625.3M
AnukoWorldClock是一个世界时钟桌面工具.时间同步,时间换算,定时器,秒表,闹钟时区的时钟等,它取代了与您选择的时钟数目标准的Windows时钟,也...
9.0/355.2M
网校云学堂app是一款专业的职业培训服务软件，软件为用户开设了多种职业技能培训课程，供用户自主学习，可以很好的满足用户的学习需求，超多优质的学习课程可以在线进行...
9.4/1,827.6M
票房大卖王是一款经营模拟玩法手游，各大明星大亨加盟，搜罗海量神级剧本任你挑选，拍摄大卖电影横扫全球奖项，创造属于你的影视传奇，感兴趣的玩家不要错过哟。票房大卖王...
8.8/1,200.1M
现在ai人工智能已经应用在我们生活的方方面面了，无论工作还是学习基本都有应用。这里介绍的雅意安卓版也是一款ai智能型应用，里面为大家提供了超多的ai功能，我们可...
8.2/210.3M
根据知名动漫作品改编而来的游戏《口袋妖怪Mega起源》，是一款趣味十足的角色扮演类游戏，该作讲述的是火红原的故事。游戏特色-像火红一样的故事-所有的先发球员-在...
8.0/1,583.5M
免费的FTPClient软件，但其功能却不会因为免费软件，而功能过于高级了。除了基本的上下传功能之外，更支持了FXP（站台与站台间的文件对传）功能，也支持TLS...
10.0/1,416.6M
想当年小编上小学那会儿，逢年过节什么的老师就让做手抄报，其实现在也一样不是吗？近日看到不少父母在替自己家的小孩搜寻五一劳动节手抄报相关内容，于是热心的小编就快马...
