0

0

Linux 怎么批量下载某个网站所有图片?

冷漠man

冷漠man

发布时间:2025-12-05 17:32:03

|

235人浏览过

|

来源于php中文网

原创

wget或curl配合脚本可批量下载网站图片,关键在于选对工具、参数及规避反爬;wget适合静态站递归下载,curl+解析工具更适js渲染页面;需注意robots.txt、请求频率、user-agent及https证书等问题。

linux 怎么批量下载某个网站所有图片?

wgetcurl + 简单脚本 就能批量下载网站图片,关键是选对工具、加好参数、避开反爬限制。

用 wget 递归下载所有图片(最常用)

wget 支持按后缀过滤和深度限制,适合静态页面为主的网站。

  • 基础命令:获取当前页及子目录下所有 jpg/png/gif
wget -r -P ./images -A "*.jpg,*.jpeg,*.png,*.gif" -nH --no-parent https://example.com/
  • -r:开启递归下载
  • -P ./images:保存到本地 images 文件夹
  • -A:只接受指定后缀的文件
  • --no-parent:不跳到上级目录,防止越界抓取
  • -nH:不创建以主机名命名的子目录

如果网站图片在独立域名(如 cdn.example.com),加上 -H 允许跨域,再用 --domains=cdn.example.com 限定范围。

奥硕企业网站管理系统终身免费版精简版1.0 build 090625
奥硕企业网站管理系统终身免费版精简版1.0 build 090625

奥硕企业网站管理系统具有一下特色功能1、双语双模(中英文采用单独模板设计,可制作中英文不同样式的网站)2、在线编辑JS动态菜单支持下拉效果,同时生成中文,英文,静态3个JS菜单3、在线制作并调用FLASH展示动画4、自动生成缩略图,可以自由设置宽高5、图片批量加水印,可以自由设置字体,大小,样式,水印位置(同时支持文字或图片类型水印)6、强大的标签式数据调用,可以调用(新闻,产品,下载,招聘)支持

下载

先提取图片链接再下载(更灵活、适合复杂结构)

当网页用 JS 渲染、或图片地址藏在 data-src、背景样式里时,wget 默认抓不到。这时先用工具解析 HTML 提取真实图片 URL。

  • curl + grep + sed 快速提取 img src:
curl -s https://example.com | grep -o 'src="[^"]*"' | sed 's/src="//' | sed 's/"$//' | grep -E '\.(jpg|png|gif)$' | xargs -I {} wget -P ./images {}
  • 更可靠可用 python + requests + BeautifulSoup 解析 DOM,处理相对路径、懒加载
  • 注意加 User-Agent 头,避免被 403 拒绝(wget 可加 --user-agent="Mozilla/5.0..."

注意事项和避坑提醒

不是所有网站都欢迎爬取,操作前请确认 robots.txt 和网站条款。

  • --random-wait--wait=1 控制请求频率,别给服务器添堵
  • 有些图片是带参数的动态 URL(如 ?v=123),wget 默认会保留参数;如需去参,得用脚本预处理
  • HTTPS 网站若证书异常,wget 加 --no-check-certificate(仅测试用,生产环境慎用)
  • 下载中断可加 -c 续传,配合 -N 跳过已下载文件

基本上就这些。小站直接 wget 一行搞定;大站或前端复杂的,建议先抽链接再下,可控性更强。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python爬虫获取数据的方法
Python爬虫获取数据的方法

Python爬虫可以通过请求库发送HTTP请求、解析库解析HTML、正则表达式提取数据,或使用数据抓取框架来获取数据。更多关于Python爬虫相关知识。详情阅读本专题下面的文章。php中文网欢迎大家前来学习。

293

2023.11.13

curl_exec
curl_exec

curl_exec函数是PHP cURL函数列表中的一种,它的功能是执行一个cURL会话。给大家总结了一下php curl_exec函数的一些用法实例,这个函数应该在初始化一个cURL会话并且全部的选项都被设置后被调用。他的返回值成功时返回TRUE, 或者在失败时返回FALSE。

454

2023.06.14

linux常见下载安装工具
linux常见下载安装工具

linux常见下载安装工具有APT、YUM、DNF、Snapcraft、Flatpak、AppImage、Wget、Curl等。想了解更多linux常见下载安装工具相关内容,可以阅读本专题下面的文章。

183

2023.10.30

js正则表达式
js正则表达式

php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

530

2023.06.20

js获取当前时间
js获取当前时间

JS全称JavaScript,是一种具有函数优先的轻量级,解释型或即时编译型的编程语言;它是一种属于网络的高级脚本语言,主要用于Web,常用来为网页添加各式各样的动态功能。js怎么获取当前时间呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

576

2023.07.28

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

760

2023.08.03

js是什么意思
js是什么意思

JS是JavaScript的缩写,它是一种广泛应用于网页开发的脚本语言。JavaScript是一种解释性的、基于对象和事件驱动的编程语言,通常用于为网页增加交互性和动态性。它可以在网页上实现复杂的功能和效果,如表单验证、页面元素操作、动画效果、数据交互等。

6147

2023.08.17

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

492

2023.09.01

Go高并发任务调度与Goroutine池化实践
Go高并发任务调度与Goroutine池化实践

本专题围绕 Go 语言在高并发任务处理场景中的实践展开,系统讲解 Goroutine 调度模型、Channel 通信机制以及并发控制策略。内容包括任务队列设计、Goroutine 池化管理、资源限制控制以及并发任务的性能优化方法。通过实际案例演示,帮助开发者构建稳定高效的 Go 并发任务处理系统,提高系统在高负载环境下的处理能力与稳定性。

4

2026.03.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 10.4万人学习

Git 教程
Git 教程

共21课时 | 4.1万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号