# spider-dw

**Repository Path**: dropfeather/spider-dw

## Basic Information

- **Project Name**: spider-dw
- **Description**: No description available
- **Primary Language**: Java
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2021-04-15
- **Last Updated**: 2021-08-05

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# spider-jsoup
基于jsoup的入门爬虫系统，包括接口爬、定时爬、多线程爬

项目讲解地址：https://blog.csdn.net/u012888052/article/details/99703199

作者：Happy王子乐
QQ：820155406


## 说明

> 基于SpringBoot+jsoup的爬虫系统，包括 接口爬、定时爬、多线程爬

> 如果该项目对您有帮助，您可以点右上角 "Star" 支持一下 谢谢！

> 或者您可以 "follow" 一下，该项目将持续更新，不断完善功能。

> 项目交流人QQ：[820155406]

> 项目讲解地址：https://blog.csdn.net/u012888052/article/details/99703199

## 前言

`spider-jsoup`项目属于爬虫入门项目，仅可爬取静态网页，动态网页无法抓取

## 项目介绍

`spider-jsoup`项目是基于SpringBoot+jsoup的入门爬虫系统，包括 接口爬、定时爬、多线程爬

### 技术选型

#### 后端技术

技术 | 说明 | 官网
----|----|----
Spring Boot | 容器+MVC框架 | [https://spring.io/projects/spring-boot](https://spring.io/projects/spring-boot)
jsoup | java爬虫框架  | 
Lombok | 简化对象封装工具 | [https://github.com/rzwitserloot/lombok](https://github.com/rzwitserloot/lombok)

## 环境搭建

### 开发工具

工具 | 说明 | 下载
----|----|----
IDEA | 开发IDE | http://www.ilearn1234.com/#/tool?id=1&type=tool

### 开发环境

工具 | 版本号 | 下载
----|----|----
JDK | 11 | http://www.ilearn1234.com/#/tool?id=4&type=tool 注意：这里需要下载jdk11的版本
### 搭建步骤

> 本地环境搭建

- 本地安装开发环境中的所有工具并启动，具体参考博客：https://blog.csdn.net/u012888052/article/details/99703199