
Java爬虫.入门
发布日期:2021-05-07 02:45:58
浏览次数:22
分类:精选文章
本文共 2241 字,大约阅读时间需要 7 分钟。
**
Java爬虫.入门小实例:
今天看视频跟着大神进行爬取CSDN上的主页面,感觉很牛的样子,分享以下,哈哈~~
**
4.0.0 cn.itcast itcast-crawler-first 1.0-SNAPSHOT //这里开始是从网上maven官网借套的~~org.apache.httpcomponents httpclient 4.5.2 org.slf4j slf4j-log4j12 1.7.25 test
package cn.itsast.crawlar.test;import org.apache.http.HttpEntity;import org.apache.http.client.methods.CloseableHttpResponse;import org.apache.http.client.methods.HttpGet;import org.apache.http.impl.client.CloseableHttpClient;import org.apache.http.impl.client.HttpClients;import org.apache.http.util.EntityUtils;import java.io.IOException;public class CrawlarFirst { public static void main(String[] args) throws IOException { // 1.打开浏览器,创建HttpClient对象 CloseableHttpClient httpClient = HttpClients.createDefault(); // 2.输入网址,创建HttpGet对象 String url = "https://www.csdn.net/"; HttpGet httpGet = new HttpGet(url); // 3.回车键,请求,响应,使用HttpClient对象发起请求 CloseableHttpResponse response = httpClient.execute(httpGet); // 4.解析响应,获取数据 // 判断状态码是否为200 if (response.getStatusLine().getStatusCode() == 200) { HttpEntity httpEntity = response.getEntity(); String content = EntityUtils.toString(httpEntity, "utf8"); System.out.println(content); } }}
结果:
CSDN-专业IT技术社区
发表评论
最新留言
不错!
[***.144.177.141]2025年03月23日 13时03分56秒
关于作者

喝酒易醉,品茶养心,人生如梦,品茶悟道,何以解忧?唯有杜康!
-- 愿君每日到此一游!
推荐文章
asp.net打印网页后自动关闭网页【无需插件】
2021-05-09
一个人开发的html整站源码分享网站就这么上线了
2021-05-09
SQLServer 查看耗时较多的SQL语句(转)
2021-05-09
【计算机网络】应用层
2021-05-09
【Maven】POM基本概念
2021-05-09
【Java思考】Java 中的实参与形参之间的传递到底是值传递还是引用传递呢?
2021-05-09
【设计模式】单例模式
2021-05-09
【SpringCloud】Hystrix熔断器
2021-05-09
【Linux】2.3 Linux目录结构
2021-05-09
java.util.Optional学习笔记
2021-05-09
远程触发Jenkins的Pipeline任务的并发问题处理
2021-05-09
jackson学习之七:常用Field注解
2021-05-09
jackson学习之八:常用方法注解
2021-05-09
Web应用程序并发问题处理的一点小经验
2021-05-09
entity framework core在独立类库下执行迁移操作
2021-05-09
Asp.Net Core 2.1+的视图缓存(响应缓存)
2021-05-09
服务器开发- Asp.Net Core中的websocket,并封装一个简单的中间件
2021-05-09
没花一分钱的我竟然收到的JetBrains IDEA官方免费赠送一年的Licence
2021-05-09
Redis 集合统计(HyperLogLog)
2021-05-09
RE套路 - 关于pyinstaller打包文件的复原
2021-05-09