数码之家

 找回密码
 立即注册
搜索
查看: 1217|回复: 11

请教下,现在还有没有好用的整站下载工具

[复制链接]
发表于 2022-1-10 13:06:06 | 显示全部楼层 |阅读模式

爱科技、爱创意、爱折腾、爱极致,我们都是技术控

您需要 登录 才可以下载或查看,没有账号?立即注册

x
最近用电脑试过原来ipv4环境下的一些整站下载工具,好像都只能下载首页和网站结构,无法下载附件(网站的附件不用密码直接下)
在这里请教下各位老师,看看有没有推荐能用的整站下载软件
 楼主| 发表于 2022-1-12 02:25:36 | 显示全部楼层
kpj001 发表于 2022-1-11 06:12
跑题。。。而且逻辑错误。。。街头卖艺(真艺术和东北低俗都算)和乞讨(卖惨)不是一回事(卖肉的不算卖 ...

本就是另起一贴的题外话,何来跑题一说,你自己执念了:)
继续探讨下哈:卖艺和乞讨不是一回事吗,因为一种是出卖艺术换取报酬、另一种是出卖惨状换取报酬?你认为是这样吗,你认为出卖艺术要比出卖惨状更高贵?
艺术来源于生活,乞丐出卖惨状可能比很多模仿的艺术还要真实还要自然,喜剧之王中说过“我是一个演员”,得到大家的认同,也就有大家发出“人生如戏全靠演技”的感慨!
老辈人把人分三六九等,在三教九流里卖艺(戏子)的和乞丐(叫街)都是下九流,能否简称“下流”就是仁者、智者的见识差异:)
表面上道貌然,背地里男盗偿,云迪、力宏之流!
这种事本来还有一定门槛,结果抖音、快手、西瓜之类美其名曰打赏,大大拉低了卖艺乞讨的门槛,现在的人想赚快钱的多,想当直播网红(名丐)的大有人在,你说这是对社会积极还是消极,即便是懒人经济好歹做个外卖骑手还是靠劳动力赚钱吧!
回复 支持 反对

使用道具 举报

发表于 2022-1-10 13:20:02 | 显示全部楼层
只有老结构的站点才能完整下载,基于数据库实时生成链接的动态页面根本不可能完全下载。
回复 支持 反对

使用道具 举报

发表于 2022-1-10 13:49:33 | 显示全部楼层
很多年前用过WebZip,在宽带不足的年代,与WinZip一样有名的软件。
回复 支持 反对

使用道具 举报

发表于 2022-1-10 13:55:35 | 显示全部楼层
httrack-noinst-3.49.2   http://www.httrack.com/page/2/
Portable Offline Browser  https://metaproducts.com/products/portable-offline-browser

httrack  对 ASP php 动态页面可以下载  ……但每次“刷新”页面都可以“可更新”,所以实际应用中 ,更新规则 里 屏蔽 更新 的链接
回复 支持 反对

使用道具 举报

 楼主| 发表于 2022-1-10 16:04:43 | 显示全部楼层
谢谢各位老师,现在的网络应用环境变了,看来是不太容易有效果好的方案
回复 支持 反对

使用道具 举报

发表于 2022-1-10 18:13:50 | 显示全部楼层
网站的流量都是花钱买的,于是各种人机验证,反爬虫,就是因为有你这样的好事者存在
回复 支持 0 反对 1

使用道具 举报

 楼主| 发表于 2022-1-10 23:56:06 | 显示全部楼层
kpj001 发表于 2022-1-10 18:13
网站的流量都是花钱买的,于是各种人机验证,反爬虫,就是因为有你这样的好事者存在 ...

话不能这么说,互联网发展的最初就是共享,大家也乐于分享,彼时网络资源包罗万象,技术发展也日新月异,从拨号猫几K的下载速度download东西,用户每个月的网费、流量费不是真金白银?
现在互联网被商业异化,从ipv4到ipv6技术的革新被耽搁了多少年,到头来商业积极推进的全是直播、电商、外卖...这些个应用场景,现在的人机验证、反爬虫都跟注册或者登陆后流量变现有关系,跟download一些free资料的全站资源有什么关系?!全站镜像后把流量或者带宽时间让给其他需要下载的用户,岂不更好!
回复 支持 反对

使用道具 举报

 楼主| 发表于 2022-1-11 00:06:44 | 显示全部楼层
kpj001 发表于 2022-1-10 18:13
网站的流量都是花钱买的,于是各种人机验证,反爬虫,就是因为有你这样的好事者存在 ...

尤其想说说这个直播、打赏的应用场景设计,就是拉低整体人口素质!
大家设想下:让你在现实生活中唱首歌,然后伸手要钱,这可以叫乞讨吧,有胆量把脸揣兜里的人毕竟是少数,大多数人还是知道羞耻二字!现在好了,换个商业运作的说法叫为你的表演打赏,于是乎明明是卖艺乞讨,却变成了通过劳动获得报酬!
你——说是不是真tl的颠倒黑白、sfbf?
回复 支持 反对

使用道具 举报

发表于 2022-1-11 05:34:20 | 显示全部楼层
72张半格 发表于 2022-1-10 23:56
话不能这么说,互联网发展的最初就是共享,大家也乐于分享,彼时网络资源包罗万象,技术发展也日新月异, ...

如果你自己运营一个服务器你就知道,全站下载对服务器网络的压力比你点击浏览大了何止十倍百倍,所以几乎所有靠谱的网站都会有保护机制。自由的互联网也需要“弱水三千只取一瓢的修养”
回复 支持 反对

使用道具 举报

发表于 2022-1-11 06:12:20 | 显示全部楼层
72张半格 发表于 2022-1-11 00:06
尤其想说说这个直播、打赏的应用场景设计,就是拉低整体人口素质!
大家设想下:让你在现实生活中唱首歌, ...

跑题。。。而且逻辑错误。。。街头卖艺(真艺术和东北低俗都算)和乞讨(卖惨)不是一回事(卖肉的不算卖艺,归刑法管)!打赏本来没什么,愿打愿挨的事。。。说难听一点,直播打赏好比某些国度的合法红灯区,都是挑逗你内心的需求,自己非要去消费能怪谁呢?


回复 支持 反对

使用道具 举报

 楼主| 发表于 2022-1-12 02:55:57 | 显示全部楼层
kpj001 发表于 2022-1-11 05:34
如果你自己运营一个服务器你就知道,全站下载对服务器网络的压力比你点击浏览大了何止十倍百倍,所以几乎 ...

不好意思,看帖习惯倒序:)
你运营过服务器?建站的必要流程就是压力测试,如果并发访问后网站的压力测试不过关,不单说明带宽、服务器的问题,更可能是网站的结构、代码的效率做的不好。
从技术上说,整站下载free网站(非登录/注册)的资料用的不是深层网络爬虫技术,用户在下载的同时不会影响正常的网络应用,从逻辑上说,如果大量使用通用爬虫技术将导致互联网使用环境不断恶化,不断更新的整站下载软件公司(已经开始收费)以及百度、谷歌这样的公司早就被互联网的舆论口笔诛伐,推到风口浪,口水死,不复存在。
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

APP|手机版|小黑屋|关于我们|联系我们|法律条款|技术知识分享平台

闽公网安备35020502000485号

闽ICP备2021002735号-2

GMT+8, 2024-4-17 06:50 , Processed in 0.296400 second(s), 13 queries , Redis On.

Powered by Discuz!

© 2006-2023 smzj.net

快速回复 返回顶部 返回列表