永发信息网

用java程序实现定期抓取网页的一些信息

答案:3  悬赏:30  手机版
解决时间 2021-03-12 05:14
应该怎么做呢,大家有什么思路吗?做这样一个系统代码量大吗

有源码的最好了,会追加分数
最佳答案
思路:
定时器的话java里有Timer.schedule()可定时执行任务;
读取网页可以用httpClient这个封装好的工具,建立http连接
读取网页后,可以Pattern和Match实现正则表达式,匹配相关信息
全部回答
1. 用jsoup抓取生成页面后的静态信息,非常简单,会jquery的选择器就会用 2. 对于加载页面后通过ajax返回刷新的页面,没办法,请从发出的request返回xml或json的数据一条条分析,看是哪个 爬虫不可能任意条件下都适用的!
看你要多少时间的定期了,自己做肯定工作量大,八爪鱼采集器支持从一个月到1分钟的各种速度定时,目前是免费的,给源码给你的只能说明这个源码没啥用,真正好用的软件,源码肯定不是一般人能买得起的,估计好点的给钱也不卖吧。
我要举报
如以上问答信息为低俗、色情、不良、暴力、侵权、涉及违法等信息,可以点下面链接进行举报!
大家都在看
果园飘香农庄休闲中心地址有知道的么?有点事
我交的是阳光人寿险每年6000元交10年能不能领
大锅卫星接收机上有天线插孔是干什么用的
我这有个传销公司,以婚纱摄影为虚头在闹市搞
岁零有贞忠孤竹的全诗
英语翻译 绕路 怎么说?
一个同事让我帮忙充当他女朋友去见他项目导师
我今年16岁,有一个23的女生要找我开房,我该
品质外卖这个地址在什么地方,我要处理点事
肖申克的救赎后面那句字幕什么意思
新大地家园地址在什么地方,想过去办事
感情专一的男人
用张剑的150还是新东方?
求一篇函电!!!
电脑运行一段时间后,任何操作都无反应
推荐资讯
水家湖出入境护照下来流程查询
qq被别人盗了绑定至尊宝了怎么办
某生物兴趣小组的同学把一盆天竺葵放置在黑暗
请问,知识人上如何添加好友?,知识人上如何添
如何在excel表中计算出年休假的天数
信阳的哪家饭店好吃又不贵
2005年我国对外贸易总额继续稳居全球第三位.
可喜喜洋淡水金源NO.1在什么地方啊,我要过去
五龙社区联合工会委员会地址在什么地方,想过
主板CPU旁边那块大芯片是什么。。。
众泰t600双闪旁边的红灯闪是什么意思
起点看一本书要多少钱
正方形一边上任一点到这个正方形两条对角线的
阴历怎么看 ?