Python 网络爬虫实战：使用 Requests 抓取音乐数据教程

2. 下载模块

根据用户选择的序号，获取对应的歌曲 ID，调用播放接口获取下载地址，最后写入本地文件。

while True:
    try:
        input_index = int(input("请输入与你要下载歌曲的序号 (-1 退出):"))
    except ValueError:
        print("请输入有效的数字")
        continue

    if input_index == -1:
        break

    if 0 <= input_index < len(info_list):
        download_info = info_list[input_index]
        song_id = download_info[0]
        song_name = download_info[1]
        singer_name = download_info[2]

        # 构造播放接口 URL，br 参数控制音质
        play_url = f'http://www.kuwo.cn/api/v1/www/music/playUrl?mid={song_id}&type=convert_url3&br=320kmp3'
        
        try:
            resp_play = requests.get(play_url, headers=headers, timeout=10)
            music_json = resp_play.json()
            music_url = music_json['data']['url']
            
            # 获取音频内容
            music_data = requests.get(music_url).content
            
            # 确保目录存在
            import os
            if not os.path.exists('download'):
                os.makedirs('download')
            
            # 保存文件
            file_path = f'download/{song_name}-{singer_name}.mp3'
            with open(file_path, mode='wb') as f:
                f.write(music_data)
            
            print(f'{song_name} 下载完成！路径：{file_path}')
        except Exception as e:
            print(f'下载失败：{e}')
    else:
        print("无效的序号")

关键技术点解析

1. 请求头 (Headers)

服务器通常通过检查 User-Agent 来识别客户端。爬虫需要设置合理的 User-Agent 以避免被识别为脚本。此外，部分接口需要携带 Cookie 或 Token 才能访问，这些值通常是动态的，硬编码可能导致请求失败（如 403 Forbidden）。

2. URL 编码

中文关键词直接拼接 URL 会导致乱码或请求错误。使用 urllib.parse.quote 可以将中文字符转换为百分号编码格式。

3. 异常处理

网络请求受环境影响较大，必须使用 try-except 捕获超时、连接错误或 JSON 解析异常，保证程序的健壮性。

4. 文件流处理

下载音频时，使用 response.content 获取二进制数据，并以 'wb' (Write Binary) 模式写入文件，确保文件完整性。

常见问题与优化

1. 403 错误：通常是因为 IP 被封禁或 Headers 缺失。解决方案包括更换 IP、更新 Cookie 或使用代理池。
2. Cookie 失效：Cookie 具有时效性。在生产环境中，应通过登录流程动态获取 Cookie，而不是硬编码。
3. 反爬机制：大型平台通常有复杂的反爬策略（如加密参数、验证码）。学习爬虫时应专注于理解 HTTP 协议原理，而非绕过安全限制。

结语

通过本教程，我们掌握了使用 Python 进行基础网络爬虫开发的流程。从发送请求到解析数据，再到文件存储，这是构建更复杂数据采集系统的基础。希望读者能在此基础上进一步探索，同时始终遵循法律法规，文明上网。

本文旨在分享编程技术，请勿用于商业用途或侵犯版权。