>>分享Java编程技术,对《Java面向对象编程》等书籍提供技术支持 书籍支持  卫琴直播  品书摘要  在线测试  资源下载  联系我们
发表一个新主题 开启一个新投票 回复文章 您是本文章第 22259 个阅读者 刷新本主题
 * 贴子主题:  Java入门实用代码:网页抓取 回复文章 点赞(0)  收藏  
作者:flybird    发表时间:2020-01-21 19:25:31     消息  查看  搜索  好友  邮件  复制  引用

  

Java 实例 - 网页抓取

以下实例演示了如何使用 net.URL 类的 URL() 构造函数来抓取网页:              

Main.java 文件

import   java . io . BufferedReader ;
import   java . io . BufferedWriter ;
import   java . io . FileWriter ;
import   java . io . InputStreamReader ;
import   java . net . URL ;

public   class   Main   {
    public   static   void   main ( String [ ]   args )  
    throws   Exception   {
       URL   url  =  new   URL ( " http://www.javathinker.net " ) ;
       BufferedReader   reader  =  new   BufferedReader
       ( new   InputStreamReader ( url . openStream ( ) ) ) ;
       BufferedWriter   writer  =  new   BufferedWriter
       ( new   FileWriter ( " data.html " ) ) ;
       String   line ;
       while   ( ( line  =  reader . readLine ( ) )  !=  null )   {
          System . out . println ( line ) ;
          writer . write ( line ) ;
          writer . newLine ( ) ;
       }
       reader . close ( ) ;
       writer . close ( ) ;
    }
}

以上代码运行输出结果为(网页的源代码,存储在当前目录下的 data.html 文件中)





程序猿的技术大观园:www.javathinker.net



[这个贴子最后由 flybird 在 2020-01-26 17:22:11 重新编辑]
  Java面向对象编程-->Swing组件(上)
  JavaWeb开发-->JSP中使用JavaBean(Ⅱ)
  JSP与Hibernate开发-->Spring、JPA与Hibernate的整合
  Java网络编程-->基于MVC和RMI的分布式应用
  精通Spring-->Vue CLI脚手架工具
  Vue3开发-->Vue组件开发基础
  [求助] 如何观看孙老师的课程视频
  解决javac编译错误: 编码UTF8/GBK的不可映射字符
  实用类 EncodingDetect,查看一个文件的字符编码
  为网站代码块pre标签增加一个复制代码按钮代码
   JAVA进阶之IO模型深入解析
  序列化与反序列化知识点汇总
  Eclipse的安装配置
  Java关键字final、static使用总结
  java.util.logging.Logger使用详解
  java比c++强大之处JVM垃圾收集算法
  Java入门实用代码:获取当前线程名称
  Java入门实用代码:字符串优化测试
  通过java.net.URL类连接HTTP服务器时获取响应结果的头部信息
  关于Java中try finally return语句的执行顺序浅析
  JDBC使用8.0驱动包连接mysql设置时区serverTimezone
  更多...
 IPIP: 已设置保密
树形列表:   
1页 0条记录 当前第1
发表一个新主题 开启一个新投票 回复文章


中文版权所有: JavaThinker技术网站 Copyright 2016-2026 沪ICP备16029593号-2
荟萃Java程序员智慧的结晶,分享交流Java前沿技术。  联系我们
如有技术文章涉及侵权,请与本站管理员联系。