Rat's

一个好用的OneDrive网盘上传工具,支持文件和文件夹上传
说明:博主很久前分享过使用Shell写的OneDrive网盘上传工具→传送门,不过由于使用的是旧API,而微软使旧...
扫描右侧二维码阅读全文
28
2019/11

一个好用的OneDrive网盘上传工具,支持文件和文件夹上传

说明:博主很久前分享过使用Shell写的OneDrive网盘上传工具→传送门,不过由于使用的是旧API,而微软使旧API强制过时,也就是强制不让用了,不让授权了,导致全部人无法使用,所以在外搬砖多日的萌咖大佬重新出山,使用Golang基于新的API写了个效率更高的上传工具,同时也修复了各种Shell版本遗留下来的小问题,该版本特点就是授权简单,无需依赖,单文件。同样的也可以配合Aria2一起自动上传,这里就再分享下,方便下有需求的人。

更新

【2019.12.21】
 支持跳过网盘中已存在的同名文件。

【2019.12.20】
目前同时支持国际版、个人版(家庭版)、中国版(世纪互联)。

【2019.12.15】
修复授权失败、上传文件大小为0等问题。
现已支持arm、x86、x64平台的系统。

【2019.11.29】
新增多线程上传、MacOS客户端。
修复了一个致命bug,建议之前装过的更新下程序。

功能

  • 支持上传文件和文件夹到指定目录,并保持上传前的目录结构。
  • 支持命令参数使用,方便外部程序调用。
  • 支持自定义上传分块大小。
  • 支持多线程上传(多文件同时上传)。
  • 支持根据文件大小动态调整重试次数,对抗不好的网络环境。

使用

Github地址:https://github.com/MoeClub/OneList/tree/master/OneDriveUploader

这里只详细说下Linux的用法,Windows后面大概说下。

WindowsMacOS系统下载地址→传送门,直接将程序下载到本地后,按照下面方法进行授权、初始化,然后就可以使用命令上传了。

1、授权认证
点击右侧URL登录并授权,授权地址→【国际版、个人版(家庭版)】、【中国版(世纪互联)】。

授权后会获取一个localhost开头打不开的链接,这里复制好整个链接地址,包括localhost

2、安装OneDriveUploader

#64位系统下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/amd64/linux/OneDriveUploader -P /usr/local/bin/
#32位系统下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/i386/linux/OneDriveUploader -P /usr/local/bin/
#arm架构下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/arm/linux/OneDriveUploader -P /usr/local/bin/

#给予权限
chmod +x /usr/local/bin/OneDriveUploader

3、初始化配置

#国际版,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -a "url"

#个人版(家庭版),将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -ms -a "url"

#中国版(世纪互联),将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -cn -a "url"

如果提示Init config file: /path/to/file/auth.json类似信息,则初始化成功。

4、使用命令

Usage of OneDriveUploader:
  -a string
        // 初始化授权
        Setup and Init auth.json.
  -b string
        // 自定义上传分块大小, 可以提高网络吞吐量, 受限于磁盘性能和网络速度.
        Set block size. [Unit: M; 5<=b<=60;] (default "10")
  -c string
        // 配置文件路径
        Config file. (default "auth.json")
  -n string
        // 上传单个文件时,在网盘中重命名
        Rename file on upload to remote.
  -r string
        // 上传到网盘中的某个目录, 默认: 根目录
        Upload to reomte path.
  -s string
        // *必要参数, 要上传的文件或文件夹
        Upload item.
  -t string
        // 线程数, 同时上传文件的个数. 默认: 2
        Set thread num. (default "2")
  -f
        // 开关(推荐)
        // 加上 -f 参数,强制读取 auth.json 中的块大小配置和多线程配置.
        // 不加 -f 参数, 每次覆盖保存当前使用参数到 auth.json 配置文件中.
        Force Read config form config file. [BlockSize, ThreadNum]
  -skip
        // 开关
        // 跳过上传网盘中已存在的同名文件. (默认不跳过)
        Skip exist file on remote.
  -cn
        // 开关
        // 授权中国版(世纪互联), 需要此参数.
        OneDrive by 21Vianet.
  -ms
        // 开关
        // 授权个人版(家庭版), 需要此参数.
        OneDrive by Microsoft.

5、命令示例

#将当前目录下的mm00.jpg文件上传到OneDrive网盘根目录
OneDriveUploader -c /path/to/file/auth.json -s "mm00.jpg"

#将当前目录下的mm00.jpg文件上传到OneDrive网盘根目录,并改名为mm01.jpg
OneDriveUploader -c /path/to/file/auth.json -s "mm00.jpg" -n "mm01.jpg"

#将当前目录下的Download文件夹上传到OneDrive网盘根目录
OneDriveUploader -c /path/to/file/auth.json -s "Download" 

#将当前目录下的Download文件夹上传到OneDrive网盘Test目录中
OneDriveUploader -c /path/to/file/auth.json -s "Download" -r "Test"

#将同目录下的Download文件夹上传到OneDriv网盘Test目录中,使用10线程
OneDriveUploader -c /path/to/file/auth.json -t 10 -s "Download" -r "Test"

#将同目录下的Download文件夹上传到OneDrive网盘Test目录中,使用15线程,并设置分块大小为20M
OneDriveUploader -c /path/to/file/auth.json -t 15 -b 20 -s "Download" -r "Test"

/path/to/file/auth.json为初始化时,生成的auth.json绝对路径地址,本文默认/root/auth.json,自行调整。

注意:如果你之前上传手动中断过,再上传的时候,请使用-skip参数,默认会跳过你已经上传过的文件/文件夹。

Aria2自动上传

同样的这里也会提供个配套的Aria2自动上传脚本,上传配置方法参考→传送门

上传脚本代码如下:

#!/bin/bash

GID="$1";
FileNum="$2";
File="$3";
MaxSize="15728640";
Thread="3";  #默认3线程,自行修改,服务器配置不好的话,不建议太多
Block="20";  #默认分块20m,自行修改
RemoteDIR="";  #上传到Onedrive的路径,默认为根目录,如果要上传到MOERATS目录,""里面请填成MOERATS
LocalDIR="/www/download/";  #Aria2下载目录,记得最后面加上/
Uploader="/usr/local/bin/OneDriveUploader";  #上传的程序完整路径,默认为本文安装的目录
Config="/root/auth.json";  #初始化生成的配置auth.json绝对路径,参考第3步骤生成的路径


if [[ -z $(echo "$FileNum" |grep -o '[0-9]*' |head -n1) ]]; then FileNum='0'; fi
if [[ "$FileNum" -le '0' ]]; then exit 0; fi
if [[ "$#" != '3' ]]; then exit 0; fi

function LoadFile(){
  if [[ ! -e "${Uploader}" ]]; then return; fi
  IFS_BAK=$IFS
  IFS=$'\n'
  tmpFile="$(echo "${File/#$LocalDIR}" |cut -f1 -d'/')"
  FileLoad="${LocalDIR}${tmpFile}"
  if [[ ! -e "${FileLoad}" ]]; then return; fi
  ItemSize=$(du -s "${FileLoad}" |cut -f1 |grep -o '[0-9]*' |head -n1)
  if [[ -z "$ItemSize" ]]; then return; fi
  if [[ "$ItemSize" -ge "$MaxSize" ]]; then
    echo -ne "\033[33m${FileLoad} \033[0mtoo large to spik.\n";
    return;
  fi
  ${Uploader} -c "${Config}" -t "${Thread}" -b "${Block}" -s "${FileLoad}" -r "${RemoteDIR}" -skip
  if [[ $? == '0' ]]; then
    rm -rf "${FileLoad}";
  fi
  IFS=$IFS_BAK
}
LoadFile;

编辑好上传脚本后,可以检测下脚本编码是否正确,比如我脚本路径为/root/upload.sh,使用命令:

bash /root/upload.sh

如果无任何输出,则正确,反之输出类似$'r': command not found错误,则需要转换下编码格式,具体步骤如下。

先安装dos2unix

#CentOS系统
yum install dos2unix -y

#Debian/Ubuntu系统
apt install dos2unix -y

再转换编码:

#后面为脚本路径
dos2unix /root/upload.sh

Windows使用

这里就随便补充下Windows使用,先下载程序文件,下载地址→传送门

比如我将exe文件放到D盘,然后使用Win+R,输入CMD运行,调出窗口后,使用命令:

#进入D盘
cd /d D:\

#国际版初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -a "url"

#个人版(家庭版)初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -ms -a "url"

#中国版(世纪互联)初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -cn -a "url"

然后上传命令和上面一样,只需要把OneDriveUploader改成OneDriveUploader.exe即可。

最后经测试,该版本的上传已经完全能应对各种稀奇古怪的字符问题,如果有问题可以回复下,贴上报错代码,方便修复。

Vultr新用户注册送100美元/16个机房按小时计费,支持支付宝,【点击查看】。
最后修改:2020 年 03 月 28 日 12 : 13 AM

发表评论

366 条评论

  1. 无双

    请问有qbittorrent用的脚本吗?下载完成自动运行外部脚本实现自动上传到OneDrive

    1. ookenhi
      @无双

      qbittorrent好写多了

      !/bin/bash

      file=$1
      if [ -d "$file" ];then
      echo "$file is a directory"
      rclone copy "$1" gd:/Downloads/"$2"
      elif [ -f "$file" ]; then
      echo "$file is a file"
      rclone copy "$1" gd:/Downloads
      fi

      1. Rat's
        @ookenhi

        qbittorrent这么简单?

    2. Rat's
      @无双

      qbittorrent我不咋用,之前看到个qBittorrent + Rclone自动上传脚本,教程:https://www.hostloc.com/thread-612238-1-1.html

      1. 无双
        @Rat's

        谢谢,我研究一下

  2. terry

    如果文件比较大,会把一个~tmp开头的文件上传上去,大小是0,真实的文件没有传,也没有删

    1. Rat's
      @terry

      这是onedrive的机制,先传~tmp那个文件,全部传完后,再自动命名,如果目前没有任务进行,可以删除~tmp,一般是失败残留的。

  3. 无聊的钢镚

    万分感谢博主的分享,这边已经大概搞定了自动上传
    现在还有个疑问 有没有指令可以看自己的上传至onedrive的进度?

    1. Rat's
      @无聊的钢镚

      看aria2.log这个文件?

      1. 无聊的钢镚
        @Rat's

        比如说我打开SSH手动执行上传命令,就会出现上传了百分之多少,文件很大时间很长的时候,有时就会关掉远程控制窗口,就没办法再查看上传进度了……
        博主您这个自动上传脚本,这边文件下载好之后,上传的进度没办法查看。这边有相关的命令可以查看吗?

        1. Rat's
          @无聊的钢镚

          试试screen命令?先创建一个窗口,screen -S OneDriveUploader,然后上传,到时候,关掉后,再返回这个窗口查看就行了。教程:https://www.moerats.com/archives/142/

  4. 小东

    大佬,请问怎样实现边上传边删除已经上传完的内容

    1. Rat's
      @小东

      文件倒是可以这样

      1. 小东
        @Rat's

        怎么操作

  5. 1

    找到问题了。授权传送门连接需要更新为https://login.microsoftonline.com/common/oauth2/v2.0/authorize?client_id=78d4dc35-7e46-42c6-9023-2d39314433a5&response_type=code&redirect_uri=http://localhost/onedrive-login&response_mode=query&scope=offline_access%20User.Read%20Files.ReadWrite.All

    1. Rat's
      @1

      更新的时候就准备改文章的,忘了

  6. 1

    执行到OneDriveUploader -a "${code}"的时候提示
    Error: Get token [401 Unauthorized]

  7. 无聊的钢镚

    大佬好,我想询问一下,我按照您博客里面之前的帖子搭建了olandex以及aria2和NG。
    这个帖子里面的两个脚本(OneDriveUploader和aria2上传)都需要安装吗?

    1. Rat's
      @无聊的钢镚

      没有安装aria2的话,就都要安装

      1. 无聊的钢镚
        @Rat's

        已经搞定了 十分感谢

      2. 无聊的钢镚
        @Rat's

        这边按照您底下回复的方式处理了下
        [root@iZj6cgvo77hbzftos4b8joZ admin]# echo "export PATH=/usr/local/bin:$PATH">>/etc/profile
        [root@iZj6cgvo77hbzftos4b8joZ admin]# source /etc/profile
        [root@iZj6cgvo77hbzftos4b8joZ admin]# echo $PATH
        /usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin
        再次运行
        [root@iZj6cgvo77hbzftos4b8joZ admin]# OneDriveUploader -a "http://localhost/onedrive-login?code=OAQABAAIAAACQN9QBRU3jT6bcBQLZNUj7QBfqFHhEMwMTe4cAj0D72k5iq6elstIClgxe7FBC2VuQXKbMcH2uemtpObW5pZmx5qYroMoOeeBFUm1wZlwN40we31qL2stWC3j4uJ-_glOkLbpxbUhTnNHHsx5Y-NZRqKvjNlEJF8Kz4HyHADn0hftnjmapnrZlwtNrG4RCJValLYxhNN9sL5mPyw34KKKTWn37NRQIlMDVBuU1BRw4Ii7_LS25UVTpOJfPSdwbMcW0Tuxw7Pdz1rNyzyB04om9ODIeeBRto5BbZJFZy56ROX3CaYWwdM-MTvUdsz5Q6cuaHknW_zXPwhwbcw2Oefm7Nwyll_6jYVSwdM_DrFs3KGzttFxtH3S6OzwZvLUX69A4OIZkS4xW35mMjAyDoFCNhuPiaakcwPSoF9OwUOBDQ_AS4hCKqDA2doG1w4vZoKlId30yoxkkaQlTEZldMbgn5YBYXI9jCIMt80xU5CfvorXroDe-ypFr-cGEGqthxCnxax5M6rYvCnfjsFM7r-oDQL2p3C196QNu2CZqevXBzRMX1PP-I6XEjutCm5-GN-1_Yz-T4u4IvFRbSCBLjq8qvMhVBJCNzrvUQbcSRS28-IN_LyUPUukZ8E3cfaI40vOOh6GFGBSPG01MJxz4HzzY_4aora4cLRrwOPPTj-Aa3SAA&session_state=5c26e29f-f75d-4616-a8e9-0a176c471c8e"

        Code: OAQABAAIAAACQN9QBRU3jT6bcBQLZNUj7QBfqFHhEMwMTe4cAj0D72k5iq6elstIClgxe7FBC2VuQXKbMcH2uemtpObW5pZmx5qYroMoOeeBFUm1wZlwN40we31qL2stWC3j4uJ-_glOkLbpxbUhTnNHHsx5Y-NZRqKvjNlEJF8Kz4HyHADn0hftnjmapnrZlwtNrG4RCJValLYxhNN9sL5mPyw34KKKTWn37NRQIlMDVBuU1BRw4Ii7_LS25UVTpOJfPSdwbMcW0Tuxw7Pdz1rNyzyB04om9ODIeeBRto5BbZJFZy56ROX3CaYWwdM-MTvUdsz5Q6cuaHknW_zXPwhwbcw2Oefm7Nwyll_6jYVSwdM_DrFs3KGzttFxtH3S6OzwZvLUX69A4OIZkS4xW35mMjAyDoFCNhuPiaakcwPSoF9OwUOBDQ_AS4hCKqDA2doG1w4vZoKlId30yoxkkaQlTEZldMbgn5YBYXI9jCIMt80xU5CfvorXroDe-ypFr-cGEGqthxCnxax5M6rYvCnfjsFM7r-oDQL2p3C196QNu2CZqevXBzRMX1PP-I6XEjutCm5-GN-1_Yz-T4u4IvFRbSCBLjq8qvMhVBJCNzrvUQbcSRS28-IN_LyUPUukZ8E3cfaI40vOOh6GFGBSPG01MJxz4HzzY_4aora4cLRrwOPPTj-Aa3SAA

        Error: Get token [400 Bad Request]

      3. 无聊的钢镚
        @Rat's

        下载OneDriveUploader也给权限了 但是执行OneDriveUploader -a "url"(url已更换成获得的api链接)这个指令时 会提示 [root@iZj6cgvo77hbzftos4b8joZ admin]# OneDriveUploader -a "http://localhost/onedrive-login?code=OAQABAAIAAACQN9QBRU3jT6bcBQLZNUj7QBfqFHhEMwMTe4cAj0D72k5iq6elstIClgxe7FBC2VuQXKbMcH2uemtpObW5pZmx5qYroMoOeeBFUm1wZlwN40we31qL2stWC3j4uJ-_glOkLbpxbUhTnNHHsx5Y-NZRqKvjNlEJF8Kz4HyHADn0hftnjmapnrZlwtNrG4RCJValLYxhNN9sL5mPyw34KKKTWn37NRQIlMDVBuU1BRw4Ii7_LS25UVTpOJfPSdwbMcW0Tuxw7Pdz1rNyzyB04om9ODIeeBRto5BbZJFZy56ROX3CaYWwdM-MTvUdsz5Q6cuaHknW_zXPwhwbcw2Oefm7Nwyll_6jYVSwdM_DrFs3KGzttFxtH3S6OzwZvLUX69A4OIZkS4xW35mMjAyDoFCNhuPiaakcwPSoF9OwUOBDQ_AS4hCKqDA2doG1w4vZoKlId30yoxkkaQlTEZldMbgn5YBYXI9jCIMt80xU5CfvorXroDe-ypFr-cGEGqthxCnxax5M6rYvCnfjsFM7r-oDQL2p3C196QNu2CZqevXBzRMX1PP-I6XEjutCm5-GN-1_Yz-T4u4IvFRbSCBLjq8qvMhVBJCNzrvUQbcSRS28-IN_LyUPUukZ8E3cfaI40vOOh6GFGBSPG01MJxz4HzzY_4aora4cLRrwOPPTj-Aa3SAA&session_state=5c26e29f-f75d-4616-a8e9-0a176c471c8e"
        bash: OneDriveUploader: command not found 会报找不到指令

  8. 鱼睨狐

    卡在第三步,Error: Get token [401 Unauthorized]

    1. Rat's
      @鱼睨狐

      授权方式变了,我改了下,你重新试试

      1. 鱼睨狐
        @Rat's

        OK,好了

  9. 啸天

    脚本为https://sm.ms/image/2MwTeIhi89YX14W
    aria2的log显示
    12/19 22:24:20 [NOTICE] Your share ratio was 0.1, uploaded/downloaded=316MiB/2.0GiB
    /root/upload.sh: 1: /root/upload.sh: #!/bin/bash: not found
    /root/upload.sh: 15: /root/upload.sh: [[: not found
    /root/upload.sh: 16: /root/upload.sh: [[: not found
    /root/upload.sh: 17: /root/upload.sh: [[: not found
    /root/upload.sh: 19: /root/upload.sh: Syntax error: "(" unexpected

    请问这是怎么回事?

    1. Rat's
      @啸天

      应该编码格式的问题,你看下面一楼的回复,用dos2unix转换下

      1. terry
        @Rat's

        我的也是报这个错,已经用dos2unix处理过了,还是不行...

  10. 嘿嘿

    设置之后死活不能上传,一开始发现Aria2下载目录后面没有加上'/'
    加上之后还是没用,照博主说的bash /root/rcloneupload.sh
    发现报错

    rcloneupload.sh: line 2: $'r': command not found
    rcloneupload.sh: line 3: $'r': command not found
    rcloneupload.sh: line 4: $'r': command not found
    rcloneupload.sh: line 5: $'r': command not found
    rcloneupload.sh: line 6: $'r': command not found
    rcloneupload.sh: line 13: $'r': command not found
    rcloneupload.sh: line 14: $'r': command not found
    rcloneupload.sh: line 19: syntax error near unexpected token `$'{r''
    line 19: `function LoadFile(){

    于是用notepad2mod把换行编码转换成unix格式就好了

    1. Rat's
      @嘿嘿

      直接在服务器上转换快些,方法给你:
      1、安装dos2unix
      Centos:yum install dos2unix -y
      Debian/Ubuntu:apt install dos2unix -y
      2、转换格式
      dos2unix /root/rcloneupload.sh