for i in {1..6000}; do echo $i; done | xargs -i curl https://web.archive.org/save/https://whycan.com/t_{}.html
太简单了, 我就不解释了。
离线
wayback.sh
#!/bin/bash
BEGIN=1
END=6000
for i in $(seq $BEGIN $END); do echo $i; done | xargs -i curl https://web.archive.org/save/https://whycan.com/t_{}.html
做成脚本执行
离线
感谢分享,刚刚了解了一下,美国的法院可以接受时光机采集的数据作为证据。
离线
要能把附件也备份了就好了,哈哈哈哈。
离线
archive不存附件,如果不指定具体url的话,爬虫默认只从首页趴几级链接。这玩意除了看文字意义不大。
离线
离线