代码

package org.example;

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

import java.io.*;
import java.util.Scanner;

public class Main {
    public static void main(String[] args) throws IOException {
        /*
        声明 一些常量 变量
         */
        System.out.println("请输入爱下书小说的目录页地址（格式：https://www.aixiaxsw.com/105/105503/  : ");
        String  STUrl = "https://www.aixiaxsw.com";
        Scanner scanner = new Scanner(System.in);
        String menuUrl = scanner.nextLine();//默认目录页
        while(!menuUrl.matches("https://www.aixiaxsw.com/[0-9]+/[0-9]+/")){
            System.out.println("输入的URL不符合格式，请重新输入\n格式：https://www.aixiaxsw.com/105/105503/");
            menuUrl = scanner.next();//
        }

        final String fileAddr = "./";//

        System.out.println("输入1则根据下次输入的Url爬取，输入2则爬取上述Url的小说");
        int op = scanner.nextInt();
        if(op==1){
            menuUrl = scanner.next();
        }
        else if(op!=2&&op!=1){
            System.out.println("请输入1或2");
        }
        /*
        访问目录页，获取小说名，章节名，章节链接。
         */
        Document document =null;
        try {
            document = Jsoup.connect(menuUrl).get();
        }catch (IOException e){
            e.printStackTrace();
        }

        String title = document.body().selectFirst("h1").text();//小说名
        String author = document.body().selectFirst("p").text();//作者名

        System.out.println("开始爬取："+title+"\n"+author);

        Elements menu = document.body().select("dl dd");//选择父元素为dl 的dd元素
        Elements as = menu.select("a[href]");

        /*
        新建文件 文件流
         */
        System.out.println("小说将存在： "+fileAddr + title+".md  中");

        File file  = new File(fileAddr + title+".md");
        OutputStream fileOut = null;
        try{
            fileOut = new FileOutputStream(file);
        }catch (FileNotFoundException e){
            e.printStackTrace();
        }
        //在向文件中输出每一个章节前，先输出小说名
        fileOut.write(("<h1 align =\"center\">"+title+"</h1>\n\n").getBytes());
        fileOut.write(("<h4 align =\"right\">"+author+"</h4>\n\n").getBytes());
        //先输出目录，再输出章节
        int cnt = 1;
        fileOut.write(("\n\n## 目录").getBytes());
        for(Element a : as){
            if(cnt<=9){
                cnt++;
                continue;
            }
            String subLink = a.attr("href");//获取每个章节的链接
            String chapterName = a.text();//章节名称
            fileOut.write(("\n\n##### [" + chapterName +"]("+STUrl+subLink+")").getBytes());// []()附加超链接
        }
        /*
        保存每个章节的正文到文件中，
         */
        int count = 1;
        for(Element a : as){
            if(count<=9){
                count++;
                continue;
            }

            String subLink = a.attr("href");//获取每个章节的链接
            String chapterName = a.text();//章节名称
            System.out.println("当前爬取章节"+chapterName);
//            System.out.println(STUrl+subLink);
            Document chapter = null;
            try{
                chapter = Jsoup.connect(STUrl+subLink).get();//
                //connect  访问链接
            }catch (IOException e){
                e.printStackTrace();
            }
            Element chapterContent = chapter.selectFirst("#content");//查找第一个这样的元素  ---正文
            String MainContent = chapterContent.html().replaceAll("<br>","\n");
            fileOut.write(("\n\n## "+chapterName+"\n\n" +" "+MainContent).getBytes());
           // fileOut.write(("\n\n## [" + chapterName +"]("+STUrl+subLink+")" +"\n\n" +" "+MainContent).getBytes());
        }

        System.out.println("小说爬取成功！！");

        fileOut.close();
    }

}

吕坤蓬