-
大小: 64.89MB文件类型: .zip金币: 2下载: 1 次发布日期: 2022-12-28
- 语言: 其他
- 标签: 爬虫 springboot Webmagic 多数据源
资源简介
闲来无事最近写了一个全新的爬虫框架WebMagic整合springboot的爬虫程序,不清楚WebMagic的童鞋可以先查看官网了解什么是Webmagic,顺便说说用springboot时遇到的一些坑
代码片段和文件信息
package com.zhy.springboot;
import org.springframework.context.annotation.Configuration;
import org.springframework.web.servlet.config.annotation.CorsRegistry;
import org.springframework.web.servlet.config.annotation.EnableWebMvc;
import org.springframework.web.servlet.config.annotation.WebMvcConfigurer;
@Configuration
@EnableWebMvc
public class CorsConfig implements WebMvcConfigurer {
@Override
public void addCorsMappings(CorsRegistry registry) {
//设置允许跨域的路径
registry.addMapping(“/**“)
//设置允许跨域请求的域名
.allowedOrigins(“*“)
//是否允许证书 不再默认开启
.allowCredentials(true)
//设置允许的方法
.allowedMethods(“*“)
//设置允许的请求头
.allowedHeaders(“*“)
//跨域允许时间
.maxAge(3600);
}
}
属性 大小 日期 时间 名称
----------- --------- ---------- ----- ----
目录 0 2018-11-30 14:51 zhy_springboot\
文件 1433 2018-06-05 18:16 zhy_springboot\.classpath
文件 1090 2018-05-28 11:01 zhy_springboot\.project
目录 0 2018-11-30 14:51 zhy_springboot\.settings\
文件 639 2018-05-28 10:42 zhy_springboot\.settings\.jsdtscope
文件 191 2018-06-05 17:19 zhy_springboot\.settings\org.eclipse.core.resources.prefs
文件 736 2018-05-28 11:05 zhy_springboot\.settings\org.eclipse.jdt.core.prefs
文件 98 2018-06-05 18:24 zhy_springboot\.settings\org.eclipse.jst.jsp.core.prefs
文件 90 2018-05-28 10:42 zhy_springboot\.settings\org.eclipse.m2e.core.prefs
文件 689 2018-05-28 21:43 zhy_springboot\.settings\org.eclipse.wst.common.component
文件 252 2018-05-28 21:43 zhy_springboot\.settings\org.eclipse.wst.common.project.facet.core.xm
文件 49 2018-05-28 10:42 zhy_springboot\.settings\org.eclipse.wst.jsdt.ui.superType.container
文件 6 2018-05-28 10:42 zhy_springboot\.settings\org.eclipse.wst.jsdt.ui.superType.name
文件 50 2018-05-28 10:42 zhy_springboot\.settings\org.eclipse.wst.validation.prefs
目录 0 2018-11-30 14:51 zhy_springboot\log\
目录 0 2018-11-30 14:51 zhy_springboot\log\springboot.log\
文件 511904 2018-11-29 22:00 zhy_springboot\log\springboot.log\error.zhy_springboot.2018-11-29.log
文件 230187 2018-11-30 10:55 zhy_springboot\log\springboot.log\error.zhy_springboot.log
文件 621928 2018-11-29 22:06 zhy_springboot\log\springboot.log\info.zhy_springboot.2018-11-29.log
文件 929440 2018-11-30 13:49 zhy_springboot\log\springboot.log\info.zhy_springboot.log
文件 4036 2018-06-26 13:27 zhy_springboot\phantomjsdriver.log
文件 9010 2018-11-29 21:21 zhy_springboot\pom.xm
目录 0 2018-11-30 14:51 zhy_springboot\src\
目录 0 2018-11-30 14:51 zhy_springboot\src\main\
目录 0 2018-11-30 14:51 zhy_springboot\src\main\java\
目录 0 2018-11-30 14:51 zhy_springboot\src\main\java\com\
目录 0 2018-11-30 14:51 zhy_springboot\src\main\java\com\zhy\
目录 0 2018-11-30 14:51 zhy_springboot\src\main\java\com\zhy\springboot\
目录 0 2018-11-30 14:51 zhy_springboot\src\main\java\com\zhy\springboot\controller\
文件 552 2018-06-05 17:56 zhy_springboot\src\main\java\com\zhy\springboot\controller\ba
文件 1295 2018-11-30 12:41 zhy_springboot\src\main\java\com\zhy\springboot\controller\BookCrawlerController.java
............此处省略185个文件信息
相关资源
- springboot+rabbitmq项目demo(亲测可正常运
- springboot整合RabbitMQ实现延时队列的两
- 很好用的网站前端页面爬取工具
- 2017年-传智播客-张志君老师-SpringBoo
- springboot+mybatis整合实现注册登录
- springboot+webflux+mongodb+freemarker
- springboot整合activiti完整demo
- SpringBoot实战(第4版)清晰版.pdf.zip
- SpringBoot 中文文档
- springboot+jpa+thymeleaf实现增删改查分页
- es(elasticsearch)整合SpringCloudSpringBo
- Springboot日志开启SLF4J过程解析
- springboot全套教程2018年2.0版本
- 官网springboot项目
- SpringBoot+Mybatis+前后台隔离技术,完整
- Spring Boot技术栈博客企业前后端2018
- springboot从入门到精通视频教程课程源
- SpringBoot +vue 框架项目.zip
- springBoot+security+oauth2 资源和认证分离
- 爬取豆瓣电影TOP250程序,包含非常详
- Web Scraper 爬虫 网页抓取 Chrome插件
- 爬取新浪微博上的妹纸照片的爬虫程
- 中国行政区划到村总.txt
- Lucene(搜索)Demo
- 基于yml 配置方式 ,实现springBoot+sha
- springboot集成activiti5.22
- 机械主题爬虫的设计与实现
- SpringBoot官方文档(中文版).pdf
- 2018年SpringBoot与Shiro整合-权限管理实战
- spring boot整合activiti modeler
评论
共有 条评论