说明:博主很久前分享过使用Shell
写的OneDrive
网盘上传工具→传送门,不过由于使用的是旧API
,而微软使旧API
强制过时,也就是强制不让用了,不让授权了,导致全部人无法使用,所以在外搬砖多日的萌咖大佬重新出山,使用Golang
基于新的API
写了个效率更高的上传工具,同时也修复了各种Shell
版本遗留下来的小问题,该版本特点就是授权简单,无需依赖,单文件。同样的也可以配合Aria2
一起自动上传,这里就再分享下,方便下有需求的人。
更新
【2019.12.21】
支持跳过网盘中已存在的同名文件。
【2019.12.20】
目前同时支持国际版、个人版(家庭版)、中国版(世纪互联)。
【2019.12.15】
修复授权失败、上传文件大小为0等问题。
现已支持arm、x86、x64平台的系统。
【2019.11.29】
新增多线程上传、MacOS客户端。
修复了一个致命bug,建议之前装过的更新下程序。
功能
- 支持上传文件和文件夹到指定目录,并保持上传前的目录结构。
- 支持命令参数使用,方便外部程序调用。
- 支持自定义上传分块大小。
- 支持多线程上传(多文件同时上传)。
- 支持根据文件大小动态调整重试次数,对抗不好的网络环境。
使用
Github地址:https://github.com/MoeClub/OneList/tree/master/OneDriveUploader
这里只详细说下Linux
的用法,Windows
后面大概说下。
Windows
、MacOS
系统下载地址→传送门,直接将程序下载到本地后,按照下面方法进行授权、初始化,然后就可以使用命令上传了。
1、授权认证
点击右侧URL
登录并授权,授权地址→【国际版、个人版(家庭版)】、【中国版(世纪互联)】。
授权后会获取一个localhost
开头打不开的链接,这里复制好整个链接地址,包括localhost
。
2、安装OneDriveUploader
#64位系统下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/amd64/linux/OneDriveUploader -P /usr/local/bin/
#32位系统下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/i386/linux/OneDriveUploader -P /usr/local/bin/
#arm架构下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/arm/linux/OneDriveUploader -P /usr/local/bin/
#给予权限
chmod +x /usr/local/bin/OneDriveUploader
3、初始化配置
#国际版,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -a "url"
#个人版(家庭版),将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -ms -a "url"
#中国版(世纪互联),将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -cn -a "url"
如果提示Init config file: /path/to/file/auth.json
类似信息,则初始化成功。
4、使用命令
Usage of OneDriveUploader:
-a string
// 初始化授权
Setup and Init auth.json.
-b string
// 自定义上传分块大小, 可以提高网络吞吐量, 受限于磁盘性能和网络速度.
Set block size. [Unit: M; 5<=b<=60;] (default "10")
-c string
// 配置文件路径
Config file. (default "auth.json")
-n string
// 上传单个文件时,在网盘中重命名
Rename file on upload to remote.
-r string
// 上传到网盘中的某个目录, 默认: 根目录
Upload to reomte path.
-s string
// *必要参数, 要上传的文件或文件夹
Upload item.
-t string
// 线程数, 同时上传文件的个数. 默认: 2
Set thread num. (default "2")
-f
// 开关(推荐)
// 加上 -f 参数,强制读取 auth.json 中的块大小配置和多线程配置.
// 不加 -f 参数, 每次覆盖保存当前使用参数到 auth.json 配置文件中.
Force Read config form config file. [BlockSize, ThreadNum]
-skip
// 开关
// 跳过上传网盘中已存在的同名文件. (默认不跳过)
Skip exist file on remote.
-cn
// 开关
// 授权中国版(世纪互联), 需要此参数.
OneDrive by 21Vianet.
-ms
// 开关
// 授权个人版(家庭版), 需要此参数.
OneDrive by Microsoft.
5、命令示例
#将当前目录下的mm00.jpg文件上传到OneDrive网盘根目录
OneDriveUploader -c /path/to/file/auth.json -s "mm00.jpg"
#将当前目录下的mm00.jpg文件上传到OneDrive网盘根目录,并改名为mm01.jpg
OneDriveUploader -c /path/to/file/auth.json -s "mm00.jpg" -n "mm01.jpg"
#将当前目录下的Download文件夹上传到OneDrive网盘根目录
OneDriveUploader -c /path/to/file/auth.json -s "Download"
#将当前目录下的Download文件夹上传到OneDrive网盘Test目录中
OneDriveUploader -c /path/to/file/auth.json -s "Download" -r "Test"
#将同目录下的Download文件夹上传到OneDriv网盘Test目录中,使用10线程
OneDriveUploader -c /path/to/file/auth.json -t 10 -s "Download" -r "Test"
#将同目录下的Download文件夹上传到OneDrive网盘Test目录中,使用15线程,并设置分块大小为20M
OneDriveUploader -c /path/to/file/auth.json -t 15 -b 20 -s "Download" -r "Test"
/path/to/file/auth.json
为初始化时,生成的auth.json
绝对路径地址,本文默认/root/auth.json
,自行调整。
注意:如果你之前上传手动中断过,再上传的时候,请使用-skip
参数,默认会跳过你已经上传过的文件/文件夹。
Aria2自动上传
同样的这里也会提供个配套的Aria2
自动上传脚本,上传配置方法参考→传送门。
上传脚本代码如下:
#!/bin/bash
GID="$1";
FileNum="$2";
File="$3";
MaxSize="15728640";
Thread="3"; #默认3线程,自行修改,服务器配置不好的话,不建议太多
Block="20"; #默认分块20m,自行修改
RemoteDIR=""; #上传到Onedrive的路径,默认为根目录,如果要上传到MOERATS目录,""里面请填成MOERATS
LocalDIR="/www/download/"; #Aria2下载目录,记得最后面加上/
Uploader="/usr/local/bin/OneDriveUploader"; #上传的程序完整路径,默认为本文安装的目录
Config="/root/auth.json"; #初始化生成的配置auth.json绝对路径,参考第3步骤生成的路径
if [[ -z $(echo "$FileNum" |grep -o '[0-9]*' |head -n1) ]]; then FileNum='0'; fi
if [[ "$FileNum" -le '0' ]]; then exit 0; fi
if [[ "$#" != '3' ]]; then exit 0; fi
function LoadFile(){
if [[ ! -e "${Uploader}" ]]; then return; fi
IFS_BAK=$IFS
IFS=$'\n'
tmpFile="$(echo "${File/#$LocalDIR}" |cut -f1 -d'/')"
FileLoad="${LocalDIR}${tmpFile}"
if [[ ! -e "${FileLoad}" ]]; then return; fi
ItemSize=$(du -s "${FileLoad}" |cut -f1 |grep -o '[0-9]*' |head -n1)
if [[ -z "$ItemSize" ]]; then return; fi
if [[ "$ItemSize" -ge "$MaxSize" ]]; then
echo -ne "\033[33m${FileLoad} \033[0mtoo large to spik.\n";
return;
fi
${Uploader} -c "${Config}" -t "${Thread}" -b "${Block}" -s "${FileLoad}" -r "${RemoteDIR}" -skip
if [[ $? == '0' ]]; then
rm -rf "${FileLoad}";
fi
IFS=$IFS_BAK
}
LoadFile;
编辑好上传脚本后,可以检测下脚本编码是否正确,比如我脚本路径为/root/upload.sh
,使用命令:
bash /root/upload.sh
如果无任何输出,则正确,反之输出类似$'r': command not found
错误,则需要转换下编码格式,具体步骤如下。
先安装dos2unix
:
#CentOS系统
yum install dos2unix -y
#Debian/Ubuntu系统
apt install dos2unix -y
再转换编码:
#后面为脚本路径
dos2unix /root/upload.sh
Windows使用
这里就随便补充下Windows
使用,先下载程序文件,下载地址→传送门。
比如我将exe
文件放到D
盘,然后使用Win+R
,输入CMD
运行,调出窗口后,使用命令:
#进入D盘
cd /d D:\
#国际版初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -a "url"
#个人版(家庭版)初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -ms -a "url"
#中国版(世纪互联)初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -cn -a "url"
然后上传命令和上面一样,只需要把OneDriveUploader
改成OneDriveUploader.exe
即可。
最后经测试,该版本的上传已经完全能应对各种稀奇古怪的字符问题,如果有问题可以回复下,贴上报错代码,方便修复。
请问有qbittorrent用的脚本吗?下载完成自动运行外部脚本实现自动上传到OneDrive
qbittorrent好写多了
!/bin/bashfile=$1
if [ -d "$file" ];then
echo "$file is a directory"
rclone copy "$1" gd:/Downloads/"$2"
elif [ -f "$file" ]; then
echo "$file is a file"
rclone copy "$1" gd:/Downloads
fi
qbittorrent这么简单?
qbittorrent我不咋用,之前看到个qBittorrent + Rclone自动上传脚本,教程:https://www.hostloc.com/thread-612238-1-1.html
谢谢,我研究一下
如果文件比较大,会把一个~tmp开头的文件上传上去,大小是0,真实的文件没有传,也没有删
这是onedrive的机制,先传~tmp那个文件,全部传完后,再自动命名,如果目前没有任务进行,可以删除~tmp,一般是失败残留的。
万分感谢博主的分享,这边已经大概搞定了自动上传
现在还有个疑问 有没有指令可以看自己的上传至onedrive的进度?
看aria2.log这个文件?
比如说我打开SSH手动执行上传命令,就会出现上传了百分之多少,文件很大时间很长的时候,有时就会关掉远程控制窗口,就没办法再查看上传进度了……
博主您这个自动上传脚本,这边文件下载好之后,上传的进度没办法查看。这边有相关的命令可以查看吗?
试试screen命令?先创建一个窗口,screen -S OneDriveUploader,然后上传,到时候,关掉后,再返回这个窗口查看就行了。教程:https://www.moerats.com/archives/142/
大佬,请问怎样实现边上传边删除已经上传完的内容
文件倒是可以这样
怎么操作
找到问题了。授权传送门连接需要更新为https://login.microsoftonline.com/common/oauth2/v2.0/authorize?client_id=78d4dc35-7e46-42c6-9023-2d39314433a5&response_type=code&redirect_uri=http://localhost/onedrive-login&response_mode=query&scope=offline_access%20User.Read%20Files.ReadWrite.All
更新的时候就准备改文章的,忘了
执行到OneDriveUploader -a "${code}"的时候提示
Error: Get token [401 Unauthorized]
大佬好,我想询问一下,我按照您博客里面之前的帖子搭建了olandex以及aria2和NG。
这个帖子里面的两个脚本(OneDriveUploader和aria2上传)都需要安装吗?
没有安装aria2的话,就都要安装
已经搞定了 十分感谢
这边按照您底下回复的方式处理了下
[root@iZj6cgvo77hbzftos4b8joZ admin]# echo "export PATH=/usr/local/bin:$PATH">>/etc/profile
[root@iZj6cgvo77hbzftos4b8joZ admin]# source /etc/profile
[root@iZj6cgvo77hbzftos4b8joZ admin]# echo $PATH
/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin
再次运行
[root@iZj6cgvo77hbzftos4b8joZ admin]# OneDriveUploader -a "http://localhost/onedrive-login?code=OAQABAAIAAACQN9QBRU3jT6bcBQLZNUj7QBfqFHhEMwMTe4cAj0D72k5iq6elstIClgxe7FBC2VuQXKbMcH2uemtpObW5pZmx5qYroMoOeeBFUm1wZlwN40we31qL2stWC3j4uJ-_glOkLbpxbUhTnNHHsx5Y-NZRqKvjNlEJF8Kz4HyHADn0hftnjmapnrZlwtNrG4RCJValLYxhNN9sL5mPyw34KKKTWn37NRQIlMDVBuU1BRw4Ii7_LS25UVTpOJfPSdwbMcW0Tuxw7Pdz1rNyzyB04om9ODIeeBRto5BbZJFZy56ROX3CaYWwdM-MTvUdsz5Q6cuaHknW_zXPwhwbcw2Oefm7Nwyll_6jYVSwdM_DrFs3KGzttFxtH3S6OzwZvLUX69A4OIZkS4xW35mMjAyDoFCNhuPiaakcwPSoF9OwUOBDQ_AS4hCKqDA2doG1w4vZoKlId30yoxkkaQlTEZldMbgn5YBYXI9jCIMt80xU5CfvorXroDe-ypFr-cGEGqthxCnxax5M6rYvCnfjsFM7r-oDQL2p3C196QNu2CZqevXBzRMX1PP-I6XEjutCm5-GN-1_Yz-T4u4IvFRbSCBLjq8qvMhVBJCNzrvUQbcSRS28-IN_LyUPUukZ8E3cfaI40vOOh6GFGBSPG01MJxz4HzzY_4aora4cLRrwOPPTj-Aa3SAA&session_state=5c26e29f-f75d-4616-a8e9-0a176c471c8e"
Code: OAQABAAIAAACQN9QBRU3jT6bcBQLZNUj7QBfqFHhEMwMTe4cAj0D72k5iq6elstIClgxe7FBC2VuQXKbMcH2uemtpObW5pZmx5qYroMoOeeBFUm1wZlwN40we31qL2stWC3j4uJ-_glOkLbpxbUhTnNHHsx5Y-NZRqKvjNlEJF8Kz4HyHADn0hftnjmapnrZlwtNrG4RCJValLYxhNN9sL5mPyw34KKKTWn37NRQIlMDVBuU1BRw4Ii7_LS25UVTpOJfPSdwbMcW0Tuxw7Pdz1rNyzyB04om9ODIeeBRto5BbZJFZy56ROX3CaYWwdM-MTvUdsz5Q6cuaHknW_zXPwhwbcw2Oefm7Nwyll_6jYVSwdM_DrFs3KGzttFxtH3S6OzwZvLUX69A4OIZkS4xW35mMjAyDoFCNhuPiaakcwPSoF9OwUOBDQ_AS4hCKqDA2doG1w4vZoKlId30yoxkkaQlTEZldMbgn5YBYXI9jCIMt80xU5CfvorXroDe-ypFr-cGEGqthxCnxax5M6rYvCnfjsFM7r-oDQL2p3C196QNu2CZqevXBzRMX1PP-I6XEjutCm5-GN-1_Yz-T4u4IvFRbSCBLjq8qvMhVBJCNzrvUQbcSRS28-IN_LyUPUukZ8E3cfaI40vOOh6GFGBSPG01MJxz4HzzY_4aora4cLRrwOPPTj-Aa3SAA
Error: Get token [400 Bad Request]
下载OneDriveUploader也给权限了 但是执行OneDriveUploader -a "url"(url已更换成获得的api链接)这个指令时 会提示 [root@iZj6cgvo77hbzftos4b8joZ admin]# OneDriveUploader -a "http://localhost/onedrive-login?code=OAQABAAIAAACQN9QBRU3jT6bcBQLZNUj7QBfqFHhEMwMTe4cAj0D72k5iq6elstIClgxe7FBC2VuQXKbMcH2uemtpObW5pZmx5qYroMoOeeBFUm1wZlwN40we31qL2stWC3j4uJ-_glOkLbpxbUhTnNHHsx5Y-NZRqKvjNlEJF8Kz4HyHADn0hftnjmapnrZlwtNrG4RCJValLYxhNN9sL5mPyw34KKKTWn37NRQIlMDVBuU1BRw4Ii7_LS25UVTpOJfPSdwbMcW0Tuxw7Pdz1rNyzyB04om9ODIeeBRto5BbZJFZy56ROX3CaYWwdM-MTvUdsz5Q6cuaHknW_zXPwhwbcw2Oefm7Nwyll_6jYVSwdM_DrFs3KGzttFxtH3S6OzwZvLUX69A4OIZkS4xW35mMjAyDoFCNhuPiaakcwPSoF9OwUOBDQ_AS4hCKqDA2doG1w4vZoKlId30yoxkkaQlTEZldMbgn5YBYXI9jCIMt80xU5CfvorXroDe-ypFr-cGEGqthxCnxax5M6rYvCnfjsFM7r-oDQL2p3C196QNu2CZqevXBzRMX1PP-I6XEjutCm5-GN-1_Yz-T4u4IvFRbSCBLjq8qvMhVBJCNzrvUQbcSRS28-IN_LyUPUukZ8E3cfaI40vOOh6GFGBSPG01MJxz4HzzY_4aora4cLRrwOPPTj-Aa3SAA&session_state=5c26e29f-f75d-4616-a8e9-0a176c471c8e"
bash: OneDriveUploader: command not found 会报找不到指令
卡在第三步,Error: Get token [401 Unauthorized]
授权方式变了,我改了下,你重新试试
OK,好了
脚本为https://sm.ms/image/2MwTeIhi89YX14W
aria2的log显示
12/19 22:24:20 [[1;32mNOTICE[0m] Your share ratio was 0.1, uploaded/downloaded=316MiB/2.0GiB
/root/upload.sh: 1: /root/upload.sh: #!/bin/bash: not found
/root/upload.sh: 15: /root/upload.sh: [[: not found
/root/upload.sh: 16: /root/upload.sh: [[: not found
/root/upload.sh: 17: /root/upload.sh: [[: not found
/root/upload.sh: 19: /root/upload.sh: Syntax error: "(" unexpected
请问这是怎么回事?
应该编码格式的问题,你看下面一楼的回复,用dos2unix转换下
我的也是报这个错,已经用dos2unix处理过了,还是不行...
设置之后死活不能上传,一开始发现Aria2下载目录后面没有加上'/'
加上之后还是没用,照博主说的bash /root/rcloneupload.sh
发现报错
rcloneupload.sh: line 2: $'r': command not found
rcloneupload.sh: line 3: $'r': command not found
rcloneupload.sh: line 4: $'r': command not found
rcloneupload.sh: line 5: $'r': command not found
rcloneupload.sh: line 6: $'r': command not found
rcloneupload.sh: line 13: $'r': command not found
rcloneupload.sh: line 14: $'r': command not found
rcloneupload.sh: line 19: syntax error near unexpected token `$'{r''
line 19: `function LoadFile(){
于是用notepad2mod把换行编码转换成unix格式就好了
直接在服务器上转换快些,方法给你:
1、安装dos2unix
Centos:yum install dos2unix -y
Debian/Ubuntu:apt install dos2unix -y
2、转换格式
dos2unix /root/rcloneupload.sh