2 wooniu WooNiu 于 2016.05.05 11:35 提问

java如何获取网页上的数据,怎么处理?

毕业设计需要采集一些数据,比如招聘信息,创业信息。如何把这些数据整合到自己的页面上,我用java写的毕业设计救助各位大神支招,听说有jsoup,我试了可以解析出某网站,但是不知道怎么处理,如何展示到自己的页面上,需要放到数据库吗?怎么放?

7个回答

Royal_lr
Royal_lr   Ds   Rxr 2016.05.05 14:01

就是通过爬虫获取数据,然后进行展示就行了,httpClient发送请求

WooNiu
WooNiu
一年多之前 回复
CSDNXIAOD
CSDNXIAOD   2016.05.05 11:42

JAVA中伪造referer来获取网页数据
java post数据到网页
java 抓取 网页 数据
----------------------biu~biu~biu~~~在下问答机器人小D,这是我依靠自己的聪明才智给出的答案,如果不正确,你来咬我啊!

abcdhcy8
abcdhcy8   2016.05.05 11:50

ctrl+c ctrl+v

abcdhcy8
abcdhcy8   2016.05.05 11:50

ctrl+c ctrl+v

Oliozcw
Oliozcw   2016.05.05 11:59

Ctrlc Ctrlv

WooNiu
WooNiu ╮(╯▽╰)╭
一年多之前 回复
a510835147
a510835147   2016.05.05 13:04

数据都收集到了 还不会进行展示吗。。。。。。

WooNiu
WooNiu 不太会处理
一年多之前 回复
SmartIceberg
SmartIceberg   2016.05.05 14:51

利用jsoup去获取html每个dom节点的html间的文本信息,jsoup的api有相关示例的,然后你把每个页面需要获取的信息封装成一个对象,改变每次连接的地址,这里的意思是说,现在很多网站信息都是分页显示的,其实他的地址信息只是页码那个参数不同罢了,你只要在循环里改变这个参数信息,然后每次获取的dom进行解析,把获取的信息存储到mysql数据库中,当然通过navicat就可以将获取的数据导出成excel等等你需要的格式,希望我的回答能够帮到你。

WooNiu
WooNiu 谢谢了,我好像有点思路了
一年多之前 回复
Csdn user default icon
上传中...
上传图片
插入图片
准确详细的回答,更有利于被提问者采纳,从而获得C币。复制、灌水、广告等回答会被删除,是时候展现真正的技术了!