JAVA爬豆瓣电影数据文件流.zip

网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。本实例通过Java爬取豆瓣电影数据，并通过文件流存入本地

package com.sun.test;

import java.io.File;
import java.io.FileWriter;
import java.io.Writer;
import java.util.List;

import org.apache.http.impl.client.HttpClientBuilder;
import org.apache.http.client.HttpClient;

import come.sun.bean.Films;
import come.sun.get.GetData;

public class Test {
	public static void main（String[] args）throws Exception{
		String url=“https://movie.douban.com/top250“;
		HttpClientBuilder builder=HttpClientBuilder.create（）;
		HttpClient client=builder.build（）;
		List films=GetData.getData（client url）;
		File file=new File（“123.txt“）;
		Writer writer=new FileWriter（filetrue）;
		for（Films films2 : films）{
			writer.write（films2.toString（）+“\n“）;
		}
		writer.close（）;
	}
}

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----
     目录           0  2019-08-30 19:18  JAVA爬豆瓣电影数据（文件流）\
     文件         842  2019-08-29 20:54  JAVA爬豆瓣电影数据（文件流）\.classpath
     文件         940  2019-08-31 15:27  JAVA爬豆瓣电影数据（文件流）\.project
     目录           0  2019-08-29 20:54  JAVA爬豆瓣电影数据（文件流）\.settings\
     文件         567  2019-08-29 20:54  JAVA爬豆瓣电影数据（文件流）\.settings\.jsdtscope
     文件         364  2019-08-29 20:54  JAVA爬豆瓣电影数据（文件流）\.settings\org.eclipse.jdt.core.prefs
     文件         572  2019-08-31 15:27  JAVA爬豆瓣电影数据（文件流）\.settings\org.eclipse.wst.common.component
     文件         345  2019-08-29 20:54  JAVA爬豆瓣电影数据（文件流）\.settings\org.eclipse.wst.common.project.facet.core.xml
     文件          49  2019-08-29 20:54  JAVA爬豆瓣电影数据（文件流）\.settings\org.eclipse.wst.jsdt.ui.superType.container
     文件           6  2019-08-29 20:54  JAVA爬豆瓣电影数据（文件流）\.settings\org.eclipse.wst.jsdt.ui.superType.name
     文件       11787  2019-08-30 19:19  JAVA爬豆瓣电影数据（文件流）\123.txt
     目录           0  2019-08-29 20:54  JAVA爬豆瓣电影数据（文件流）\build\
     目录           0  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\
     目录           0  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\com\
     目录           0  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\come\
     目录           0  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\come\sun\
     目录           0  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\come\sun\bean\
     文件        1374  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\come\sun\bean\Films.class
     目录           0  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\come\sun\get\
     文件        4207  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\come\sun\get\GetData.class
     目录           0  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\com\sun\
     目录           0  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\com\sun\test\
     文件        2026  2019-08-31 15:58  JAVA爬豆瓣电影数据（文件流）\build\classes\com\sun\test\Test.class
     目录           0  2019-08-29 20:58  JAVA爬豆瓣电影数据（文件流）\src\
     目录           0  2019-08-29 20:58  JAVA爬豆瓣电影数据（文件流）\src\com\
     目录           0  2019-08-29 20:58  JAVA爬豆瓣电影数据（文件流）\src\come\
     目录           0  2019-08-29 20:58  JAVA爬豆瓣电影数据（文件流）\src\come\sun\
     目录           0  2019-08-29 20:58  JAVA爬豆瓣电影数据（文件流）\src\come\sun\bean\
     文件         618  2019-08-29 21:33  JAVA爬豆瓣电影数据（文件流）\src\come\sun\bean\Films.java
     目录           0  2019-08-29 20:58  JAVA爬豆瓣电影数据（文件流）\src\come\sun\get\
     文件        2199  2019-08-30 19:17  JAVA爬豆瓣电影数据（文件流）\src\come\sun\get\GetData.java
............此处省略49个文件信息