王尘宇王尘宇

研究百度干SEO做推广变成一个被互联网搞的人

利用aria2快速下载SRA数据


    将这个列表中的DDBJ_Potential_SRR_Links 这一列数据提取出来 做成一个单独的地址列表list_file.txt 上传到你的linux服务器上就行。

      理论上任何一个下载地址都行,但是我这个例子里面从生成文件中挑选的NCBI下载地址是无法下载的,不知道毛病在哪里,所以后来用的DDBJ的地址。

      在linux下安装aria2 。

      下载命令是  aria2c -x16(线程数) -s16(文件分割数)-j10(同时下载文件数) -c(断点续传) -i list_file.txt

       就可以批量多线程下载了,速度还行,这是学校服务器的下载速度,同时下载5个文件,要是断了重新运行一下命令就可以接着下了。

        DDBJ数据库是日本的数据库,目前下载数据还算比较快,理论上3大数据库每晚交换数据,所以应该都是一样的,只要不是特别新的数据,过个把礼拜都能在这个数据库里下载到。

相关文章

评论列表

发表评论:
验证码

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。