一直都是用的 Typora+微博免费图床写作,前段时间突然发现图片全都裂了,打开一看都是 403 。
开始我以为图片微博都给我删了,找了一堆平台去翻我的历史文章看图片是不是都在,找了半天发现图片要么不够清晰,要么就是文章不全,要么呢就是有水印,所有的原图基本上是找不回来了,跟不用说还有一些文章是没有在任何平台发表过的。
这就很难受了,所以这件事情就拖了好几个月都没处理,最近突然看到一篇文章才发现,哦,原来 403 是限制了Referrer,写代码还是可以下载下来的,试了试果然是可以的,那问题就简单了。
那我只要:扫描我的所有 md 文件=>找到所有的微博图床的图片链接=>下载所有图片=>上传到新图床=>替换图片链接,不就搞定了嘛。
扫描文件
首先找到我的文章的目录,扫描所有的文件,把 md 文件全部找出来。
private static List<File> getFiles(String workUrl){ return FileUtil.loopFiles(workUrl).stream() .filter(file -> file.isFile()) .filter(file -> file.getName().endsWith(".md")) .collect(Collectors.toList()); }
获取链接
根据参考文章里大佬写的正则,根据正则匹配到每篇文章里的链接地址,然后根据微博图床的名称过滤得到所有使用微博图床的图片地址,扫描最终得到的图片有大概 2000 张。
private static Set<String> getUrls(List<File> files)throws Exception{ Set<String> urlList = new HashSet<>(); Pattern pattern = Pattern.compile( "\b(((ht|f)tp(s?)\:\/\/|~\/|\/)|www.)" + "(\w+:\w+@)?(([-\w]+\.)+(com|org|net|gov" + "|mil|biz|info|mobi|name|aero|jobs|museum" + "|travel|[a-z]{2}))(:[\d]{1,5})?" + "(((\/([-\w~!$+|.,=]|%[a-f\d]{2})+)+|\/)+|\?|#)?" + "((\?([-\w~!$+|.,*:]|%[a-f\d{2}])+=?" + "([-\w~!$+|.,*:=]|%[a-f\d]{2})*)" + "(&(?:[-\w~!$+|.,*:]|%[a-f\d{2}])+=?" + "([-\w~!$+|.,*:=]|%[a-f\d]{2})*)*)*" + "(#([-\w~!$+|.,*:=]|%[a-f\d]{2})*)?\b"); files.forEach(file->{ String mdContent = FileReader.create(file).readString(); Matcher matcher = pattern.matcher(mdContent); while(matcher.find()){ urlList.add(matcher.group()); } }); return urlList.stream().filter(url->url.contains("sinaimg.cn")).collect(Collectors.toSet()); }
下载|上传图片
得到所有图片地址后,直接把图片下载到本地,这里为了方便,直接截取出图片中的图片名称保存,那么之后就可以直接把图片上传到其他的图床了。
private static void download(Set<String> urls) throws Exception{ for (String str : urls) { OutputStream os = null; InputStream is = null; try { URL url = new URL(str); URLConnection con = url.openConnection(); is = con.getInputStream(); byte[] bs = new byte[1024]; int len; String fileName = str.substring(str.lastIndexOf("/")+1); os = Files.newOutputStream(Paths.get("/Users/user/Desktop/" + fileName)); // 开始读取 while ((len = is.read(bs)) != -1) { os.write(bs, 0, len); } } finally { if (os != null) { os.close(); } if (is != null) { is.close(); } } } }
这里我选择用的是阿里云 OSS,直接手动全丢进去就行了。
替换链接
现在我的图片名称都是一样的,只要替换掉域名那部分就行了,最后写回文件。
private static void replace(List<File> files){ //替换 md 文件中的微博图床文件 files.forEach(file->{ String mdContent = FileReader.create(file).readString(); String newMDContent = mdContent.replaceAll("https://tva1.sinaimg.cn/large","http://cdn.aixiaoxian.vip/blog"); FileWriter.create(file).write(newMDContent); }); }
另外一方面就是关于费用的问题,目前因为基本都是我自己在用,一天都花了 7 分,一个月岂不是 2 块钱,有点太贵了!!!后面再看看有没有跟便宜点的。