`
lin358
  • 浏览: 62075 次
  • 性别: Icon_minigender_1
  • 来自: 福州
社区版块
存档分类
最新评论

JAVA获取网页返回值

阅读更多
为了提高爬虫的抓取速度,就想到了减少无用功这方面,因此就想先获取网页返回值,已减少一些无用的网页(比如404,500什么的),故网上搜了下如何获取返回值,发现都比较繁琐,后来自己瞎摸索了一下,发现了一个自认为不错的方法,特此记录下来


URL urlPage = null;
HttpURLConnection conn = null;
try {
urlPage = new URL(link);
conn = (HttpURLConnection) urlPage.openConnection();
conn.setConnectTimeout(30000);
conn.setReadTimeout(30000);
System.out.println(conn.getHeaderField(null)); return false;
} catch (Exception e) {
return false;
}
0
0
分享到:
评论

相关推荐

    bat获取网页信息 命令行下调用curl获取网页信息

    命令行下调用curl获取网页信息,例如在Java servlet中使用response.getWriter().print("success") curl就可以获取到"success",并保存到check.txt中,再从check.txt中读取数据,并做判断

    android webview中使用Java调用JavaScript方法并获取返回值

    网上例子很少啊,基本都不能获取返回值,贴一个自己最后调试完的代码如下: Java: 代码如下: protected void onCreate(Bundle savedInstanceState) { …….. x = (WebView)this.findViewById(R.id.webView_view...

    安卓java读取网页源码-AndroLuaTest:我的第一个Lua应用

    安卓java读取网页源码 AndroLua- lua 5.3.3 for android pro 4.2.0 支持虚类。 4.1.9 优化Http返回值。 4.1.8 优化HorizontalListView。 布局表支持GIF背景图设置。 4.1.7 优化HorizontalListView。 优化日志查看。 ...

    获取Tableau集成时的免登陆凭证

    获取Tableau凭证,实现报表在第三方的免登陆。 第一步:在Tableau服务器上命令行设置授信白名单配置白名单 第二步:这里使用java发送请求,其他方式也可:如php...将返回值返回客户端页面 第三步:页面嵌入报表路径格式

    Java开发实战1200例(第1卷).(清华出版.李钟尉.陈丹丹).part3

    实例151 获得Class对象表示实体的名称 197 实例152 查看类的声明 198 实例153 查看类的成员 199 实例154 按继承层次对类排序 201 实例155 查看内部类信息 202 7.2 反射的进阶 203 实例156 动态设置类的私有域 203 ...

    网页与Web程序设计 课件 ppt 机械工业出版社 part1

    7.6.3 函数的参数传递和返回值 134 7.6.4 函数的变量作用范围 135 7.7 JavaScript对象和数组 135 7.7.1 对象 135 7.7.2 数组 144 7.7.3 文档对象模型 147 本章小结 151 思考题 152 第8章 表单 153 8.1 插入...

    java微信公众号MVC开发框架

    获取相应的微信处理方法,Servlet获取到处理方法后,请求线程池获取线程调用微信方法,根据微信方法的返回值,生成请求的xml响应。本说明文档将分章节说明jwx框架的特征、快速入门、配置、扩展等各个方面。 一、特征...

    易语言-获取谷歌浏览器cookies

    这个获取谷歌cookies的源码目前只能获取谷歌8.0以下的版本,源码是别人分享出来的但是由于谷歌自动更新的机制,我刚开始使用的时候,也是一度差点怀疑人生,只能用几个小时,就自己自动升级版本了,然后就去研究8.0...

    JavaWeb设计在线考试系统(报告)

    外观上也要做到合理化,考虑到用户多对网页较熟悉,应尽量向这一方向靠拢。在设计语言上,已决定使用 Java 语言进行编程。 其中管理界面要做到操作简单,易于管理。总的来说,系统的用户界面应作到可靠性、简单性、...

    搜索项目:小搜搜-商品条形码/二维码搜索APP

    获取扫描返回值后用Retrofit进行网络通信,从中国物品编码网查询得到商品的官方信息,该网站接口返回的是一个html,这里通过Jsoup解析;再查询淘宝该商品的最低价(前三名),解析返回json并处理显示。 中文字体: ...

    精通javascript

    • 13.3.htm DHTML对象模型方法显示和修改网页文字内容 • 13.4.htm DHTML对象模型方法新增和删除表格行内容 • 13.5.htm W3C对象模型方法显示和修改网页内容 • 13.6.htm W3C对象...

    《javaScrip开发技术大全》源代码

    • sample04.htm 在同一个网页中使用不同脚本语言 • sample05.htm 判断浏览器对JavaScript版本的支持情况 • sample06.htm 引用外部JavaScript • sample07.htm 在同一个HTML文档...

    Android应用开发入门教程

    2.2.1. 安装JDK基本Java环境11 2.2.2. 安装Eclipse12 2.2.3. 获得Android SDK12 2.2.4(1). 在Eclipse 3.4(Ganymede)中安装ADT14 2.2.4(2). 在Eclipse 3.5(Galileo)中安装ADT17 2.2.5. 在Eclipse中配置...

    JavaScript基础教程第8版

    1.2 JavaScript不是Java 2 1.3 JavaScript的起源 3 1.4 JavaScript可以做什么 3 1.5 JavaScript不能做什么 3 1.6 Ajax是什么 4 1.7 组合式(snap-together)语言 5 1.7.1 对象 5 1.7.2 属性 6 1.7.3 ...

    精通JavaScript

    • 13.3.htm DHTML对象模型方法显示和修改网页文字内容 • 13.4.htm DHTML对象模型方法新增和删除表格行内容 • 13.5.htm W3C对象模型方法显示和修改网页内容 • 13.6.htm W3C对象...

Global site tag (gtag.js) - Google Analytics