前言

以前一直对离线下载很感兴趣,但苦于没有大带宽、大容量,所以一直没有付诸于行动。最近一次偶然的机会,我有了一台7T、1000mbps下行带宽的服务器帐号。

而且我发现sakurafrp的映射服务有4-8mbps的上行带宽(实测1mb/s),映射教程,如此机会怎能不行动呢?

1.安装Aria2

由于本人没有root权限,yum、rpm都用不了,且不认识管理员,所以选择了使用源码编译。

如果你用root权限,那么请参考:Centos7 Install Aria2

1
2
3
4
5
6
7
8
9
10
11
12
#下载
mkdir Aria2 &&cd Aria2
wget https://github.com/aria2/aria2/releases/download/release-1.35.0/aria2-1.35.0.tar.gz

#解压
tar -xvzf 1.35.0.tar.gz

#设置路径
./configure --prefix=

#编译,在执行make命令前也可以先执行 make clean 命令
make -j 4

说一下我这里遇到的坑:1.LibXML2这个依赖库,我也是用源码装的,设置bash_profile的PATH 、CLibPath、PKG_CON_PATH之后。我编译aria2一直搜索不到libxml2,气死了。目前还没解决

2.设置Aria2参数

我实在网上下载的模板稳健aria2.conf

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
#在一个文件夹下(最好是/etc/aria2/)新建aria2.conf、aria2.session(这个是会话文件)
#然后进入aria2.conf 编辑

## '#'开头为注释内容, 选项都有相应的注释说明, 根据需要修改 ##
## 被注释的选项填写的是默认值, 建议在需要修改时再取消注释 ##

## 文件保存相关 ##

# 文件的保存路径(可使用绝对路径或相对路径), 默认: 当前启动位置
dir=/home1/user/yzh/ts
# 启用磁盘缓存, 0为禁用缓存, 需1.16以上版本, 默认:16M
disk-cache=32M
# 文件预分配方式, 能有效降低磁盘碎片, 默认:prealloc
# 预分配所需时间: none < falloc ? trunc < prealloc
# falloc和trunc则需要文件系统和内核支持
# NTFS建议使用falloc, EXT3/4建议trunc, MAC 下需要注释此项
file-allocation=falloc
# 断点续传
continue=true

## 下载连接相关 ##

# 最大同时下载任务数, 运行时可修改, 默认:5
max-concurrent-downloads=20
# 同一服务器连接数, 添加时可指定, 默认:1
max-connection-per-server=16
# 最小文件分片大小, 添加时可指定, 取值范围1M -1024M, 默认:20M
# 假定size=10M, 文件为20MiB 则使用两个来源下载; 文件为15MiB 则使用一个来源下载
min-split-size=10M
# 单个任务最大线程数, 添加时可指定, 默认:5
split=20
# 整体下载速度限制, 运行时可修改, 默认:0
#max-overall-download-limit=0
# 单个任务下载速度限制, 默认:0
#max-download-limit=0
# 整体上传速度限制, 运行时可修改, 默认:0
#max-overall-upload-limit=0
# 单个任务上传速度限制, 默认:0
#max-upload-limit=0
# 禁用IPv6, 默认:false
#disable-ipv6=true

## 进度保存相关 ##

# 从会话文件中读取下载任务
# 最好修改为绝对路径
input-file=/etc/aria2/aria2.session
# 在Aria2退出时保存`错误/未完成`的下载任务到会话文件
save-session=/etc/aria2/aria2.session
# 定时保存会话, 0为退出时才保存(此处需要设置,否则失去自动保存), 需1.16.1以上版本, 默认:0
save-session-interval=60

## RPC相关设置 ##

# 启用RPC, 默认:false
enable-rpc=true
# 允许所有来源, 默认:false
rpc-allow-origin-all=true
# 允许非外部访问, 默认:false
rpc-listen-all=true
# 事件轮询方式, 取值:[epoll, kqueue, port, poll, select], 不同系统默认值不同
#event-poll=select
# RPC监听端口, 端口被占用时可以修改, 默认:6800
#rpc-listen-port=6800
# 设置的RPC授权令牌, v1.18.4新增功能, 取代 --rpc-user 和 --rpc-passwd 选项
rpc-secret=<TOKEN>


## BT/PT下载相关 ##

# 当下载的是一个种子(以.torrent结尾)时, 自动开始BT任务, 默认:true
follow-torrent=true
# BT监听端口, 当端口被屏蔽时使用, 默认:6881-6999
listen-port=51413
# 单个种子最大连接数, 默认:55
#bt-max-peers=55
# 打开DHT功能, PT需要禁用, 默认:true
enable-dht=true
# 打开IPv6 DHT功能, PT需要禁用
#enable-dht6=false
# DHT网络监听端口, 默认:6881-6999
#dht-listen-port=6881-6999
# 本地节点查找, PT需要禁用, 默认:false
bt-enable-lpd=true
# 种子交换, PT需要禁用, 默认:true
enable-peer-exchange=true
# 每个种子限速, 对少种的PT很有用, 默认:50K
#bt-request-peer-speed-limit=50K
# 客户端伪装, PT需要
peer-id-prefix=-TR2770-
user-agent=Transmission/2.77
# 当种子的分享率达到这个数时, 自动停止做种, 0为一直做种, 默认:1.0
seed-ratio=1.0
# 强制保存会话, 即使任务已经完成, 默认:false
# 较新的版本开启后会在任务完成后依然保留.aria2文件
force-save=false
# BT校验相关, 默认:true
#bt-hash-check-seed=true
# 继续之前的BT任务时, 无需再次校验, 默认:false
bt-seed-unverified=true
# 保存磁力链接元数据为种子文件(.torrent文件), 默认:false
bt-save-metadata=true

# bt-tracker 更新,解决Aria2 BT下载速度慢没速度的问题
# https://raw.githubusercontent.com/ngosang/trackerslist/master/trackers_best.txt
bt-tracker=udp://tracker.opentrackr.org:1337/announce,udp://p4p.arenabg.com:1337/announce,udp://9.rarbg.to:2710/announce,udp://9.rarbg.me:2710/announce,udp://exodus.desync.com:6969/announce,udp://tracker.cyberia.is:6969/announce,udp://open.stealth.si:80/announce,udp://tracker.sbsub.com:2710/announce,udp://retracker.lanta-net.ru:2710/announce,udp://tracker.tiny-vps.com:6969/announce,udp://tracker.torrent.eu.org:451/announce,udp://tracker.moeking.me:6969/announce,udp://tracker3.itzmx.com:6961/announce,http://tracker1.itzmx.com:8080/announce,udp://ipv4.tracker.harry.lu:80/announce,udp://bt2.archive.org:6969/announce,udp://bt1.archive.org:6969/announce,udp://explodie.org:6969/announce,udp://www.loushao.net:8080/announce,udp://valakas.rollo.dnsabr.com:2710/announce

# 后台挂起服务
# aria2c --conf-path=$你的配置文件路径 -D

Tips:

1.file-allocation=none,如果下载时遇到内存报错,则更改此参数,一般是ntfs硬盘才会遇到

2.提供一个实时更新BT-Tracker的项目:https://github.com/ngosang/trackerslist

3.如果需要设置密码,请添加参数:rpc-secret=123456(你的密码)

这些参数中有一条需要注意bt-tracker,它决定了你的初次下载速度。我的大致理解是:在进行BT/磁力链下载时,我们是需要先搜索并进入一个有资源的网络的,这个网络由很多节点组成。而我们在初次下载的时候,由于本地没有节点缓存,是需要重新搜索,因此速度很慢。添加bt-tracker可以让我们迅速的找到有资源的网络,会使我们的初次下载速度明显提快,我之前就吃了这个亏=__=^

但是,我发现了几个问题:

总结

目前呢,我还是刚刚摸索会了一点,目前就是开多条命令下载,然后通过ftp取回本地,还无法做到远程rpc,实现真正离线下载。

路漫漫其修远兮,吾将上下而求索!
嘻嘻~


以下为aria2 常用命令

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
-o 指定下载目录
#具体用法:yy是指重命名的文件名
aria2c -o yy http://xx.com/xx

#使用aria2的分段和多线程下载功能可以加快文件的下载速度,对于下载大文件时特别有用。-x 分段下载,-s 多线程下载,如:
aria2c -s 2 -x 2 http://xx.com/xx

#种子和磁力下载,注意要加'',否则可能无法下载
aria2c ‘xxx.torrnet‘
aria2c '磁力链接'


#单个文件最大下载速度:
aria2c --max-download-limit=300K -s10 -x10 'http://xx.com/xx'

#整体下载最大速度:
aria2c --max-overall-download-limit=300k -s10 -x10 'http://xx.com/xx'

另外有时候需要后台运行

1
2
3
#screen or nohup
nohub aria2c XXX >out.log 2>&1 &
nohup aria2c XXX >&out.log &

Linux 环境配置

本节只是不想新建文件,所以才有这个

  • 当使用gcc编译时,找不到库文件
1
2
export LDFLAGS="-L/home/tongshun/byp/devel/zlib/lib"
export CPPFLAGS="-I/home/tongshun/byp/devel/zlib/include"
  • configure时,要求使用pkg来包含库

    1
    2
    #根据依赖库的位置,换一下就可以了
    export PKG_CONFIG_PATH="$PKG_CONFIG_PATH:/home/tongshun/byp/devel/sqlite3/lib/pkgconfig"