如何访问URL中的每个HTML文件

import requests
from bs4 import BeautifulSoup

def visit_html_files(url):
    # 发送HTTP GET请求
    response = requests.get(url)
    
    # 解析HTML内容
    soup = BeautifulSoup(response.text, 'html.parser')
    
    # 处理当前HTML文件
    # 在这里可以执行各种操作，如提取特定元素、修改内容等
    
    # 获取HTML文件中的链接
    links = soup.find_all('a')
    
    # 递归访问每个链接的HTML文件
    for link in links:
        href = link.get('href')
        if href.endswith('.html'):
            # 构造完整的URL
            next_url = url + '/' + href
            visit_html_files(next_url)

# 调用函数开始访问HTML文件
visit_html_files('https://example.com')