Rat's

一个好用的OneDrive网盘上传工具,支持文件和文件夹上传
说明:博主很久前分享过使用Shell写的OneDrive网盘上传工具→传送门,不过由于使用的是旧API,而微软使旧...
扫描右侧二维码阅读全文
28
2019/11

一个好用的OneDrive网盘上传工具,支持文件和文件夹上传

说明:博主很久前分享过使用Shell写的OneDrive网盘上传工具→传送门,不过由于使用的是旧API,而微软使旧API强制过时,也就是强制不让用了,不让授权了,导致全部人无法使用,所以在外搬砖多日的萌咖大佬重新出山,使用Golang基于新的API写了个效率更高的上传工具,同时也修复了各种Shell版本遗留下来的小问题,该版本特点就是授权简单,无需依赖,单文件。同样的也可以配合Aria2一起自动上传,这里就再分享下,方便下有需求的人。

更新

【2019.12.21】
 支持跳过网盘中已存在的同名文件。

【2019.12.20】
目前同时支持国际版、个人版(家庭版)、中国版(世纪互联)。

【2019.12.15】
修复授权失败、上传文件大小为0等问题。
现已支持arm、x86、x64平台的系统。

【2019.11.29】
新增多线程上传、MacOS客户端。
修复了一个致命bug,建议之前装过的更新下程序。

功能

  • 支持上传文件和文件夹到指定目录,并保持上传前的目录结构。
  • 支持命令参数使用,方便外部程序调用。
  • 支持自定义上传分块大小。
  • 支持多线程上传(多文件同时上传)。
  • 支持根据文件大小动态调整重试次数,对抗不好的网络环境。

使用

Github地址:https://github.com/MoeClub/OneList/tree/master/OneDriveUploader

这里只详细说下Linux的用法,Windows后面大概说下。

WindowsMacOS系统下载地址→传送门,直接将程序下载到本地后,按照下面方法进行授权、初始化,然后就可以使用命令上传了。

1、授权认证
点击右侧URL登录并授权,授权地址→【国际版、个人版(家庭版)】、【中国版(世纪互联)】。

授权后会获取一个localhost开头打不开的链接,这里复制好整个链接地址,包括localhost

2、安装OneDriveUploader

#64位系统下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/amd64/linux/OneDriveUploader -P /usr/local/bin/
#32位系统下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/i386/linux/OneDriveUploader -P /usr/local/bin/
#arm架构下载
wget https://raw.githubusercontent.com/MoeClub/OneList/master/OneDriveUploader/arm/linux/OneDriveUploader -P /usr/local/bin/

#给予权限
chmod +x /usr/local/bin/OneDriveUploader

3、初始化配置

#国际版,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -a "url"

#个人版(家庭版),将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -ms -a "url"

#中国版(世纪互联),将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader -cn -a "url"

如果提示Init config file: /path/to/file/auth.json类似信息,则初始化成功。

4、使用命令

Usage of OneDriveUploader:
  -a string
        // 初始化授权
        Setup and Init auth.json.
  -b string
        // 自定义上传分块大小, 可以提高网络吞吐量, 受限于磁盘性能和网络速度.
        Set block size. [Unit: M; 5<=b<=60;] (default "10")
  -c string
        // 配置文件路径
        Config file. (default "auth.json")
  -n string
        // 上传单个文件时,在网盘中重命名
        Rename file on upload to remote.
  -r string
        // 上传到网盘中的某个目录, 默认: 根目录
        Upload to reomte path.
  -s string
        // *必要参数, 要上传的文件或文件夹
        Upload item.
  -t string
        // 线程数, 同时上传文件的个数. 默认: 2
        Set thread num. (default "2")
  -f
        // 开关(推荐)
        // 加上 -f 参数,强制读取 auth.json 中的块大小配置和多线程配置.
        // 不加 -f 参数, 每次覆盖保存当前使用参数到 auth.json 配置文件中.
        Force Read config form config file. [BlockSize, ThreadNum]
  -skip
        // 开关
        // 跳过上传网盘中已存在的同名文件. (默认不跳过)
        Skip exist file on remote.
  -cn
        // 开关
        // 授权中国版(世纪互联), 需要此参数.
        OneDrive by 21Vianet.
  -ms
        // 开关
        // 授权个人版(家庭版), 需要此参数.
        OneDrive by Microsoft.

5、命令示例

#将当前目录下的mm00.jpg文件上传到OneDrive网盘根目录
OneDriveUploader -c /path/to/file/auth.json -s "mm00.jpg"

#将当前目录下的mm00.jpg文件上传到OneDrive网盘根目录,并改名为mm01.jpg
OneDriveUploader -c /path/to/file/auth.json -s "mm00.jpg" -n "mm01.jpg"

#将当前目录下的Download文件夹上传到OneDrive网盘根目录
OneDriveUploader -c /path/to/file/auth.json -s "Download" 

#将当前目录下的Download文件夹上传到OneDrive网盘Test目录中
OneDriveUploader -c /path/to/file/auth.json -s "Download" -r "Test"

#将同目录下的Download文件夹上传到OneDriv网盘Test目录中,使用10线程
OneDriveUploader -c /path/to/file/auth.json -t 10 -s "Download" -r "Test"

#将同目录下的Download文件夹上传到OneDrive网盘Test目录中,使用15线程,并设置分块大小为20M
OneDriveUploader -c /path/to/file/auth.json -t 15 -b 20 -s "Download" -r "Test"

/path/to/file/auth.json为初始化时,生成的auth.json绝对路径地址,本文默认/root/auth.json,自行调整。

注意:如果你之前上传手动中断过,再上传的时候,请使用-skip参数,默认会跳过你已经上传过的文件/文件夹。

Aria2自动上传

同样的这里也会提供个配套的Aria2自动上传脚本,上传配置方法参考→传送门

上传脚本代码如下:

#!/bin/bash

GID="$1";
FileNum="$2";
File="$3";
MaxSize="15728640";
Thread="3";  #默认3线程,自行修改,服务器配置不好的话,不建议太多
Block="20";  #默认分块20m,自行修改
RemoteDIR="";  #上传到Onedrive的路径,默认为根目录,如果要上传到MOERATS目录,""里面请填成MOERATS
LocalDIR="/www/download/";  #Aria2下载目录,记得最后面加上/
Uploader="/usr/local/bin/OneDriveUploader";  #上传的程序完整路径,默认为本文安装的目录
Config="/root/auth.json";  #初始化生成的配置auth.json绝对路径,参考第3步骤生成的路径


if [[ -z $(echo "$FileNum" |grep -o '[0-9]*' |head -n1) ]]; then FileNum='0'; fi
if [[ "$FileNum" -le '0' ]]; then exit 0; fi
if [[ "$#" != '3' ]]; then exit 0; fi

function LoadFile(){
  if [[ ! -e "${Uploader}" ]]; then return; fi
  IFS_BAK=$IFS
  IFS=$'\n'
  tmpFile="$(echo "${File/#$LocalDIR}" |cut -f1 -d'/')"
  FileLoad="${LocalDIR}${tmpFile}"
  if [[ ! -e "${FileLoad}" ]]; then return; fi
  ItemSize=$(du -s "${FileLoad}" |cut -f1 |grep -o '[0-9]*' |head -n1)
  if [[ -z "$ItemSize" ]]; then return; fi
  if [[ "$ItemSize" -ge "$MaxSize" ]]; then
    echo -ne "\033[33m${FileLoad} \033[0mtoo large to spik.\n";
    return;
  fi
  ${Uploader} -c "${Config}" -t "${Thread}" -b "${Block}" -s "${FileLoad}" -r "${RemoteDIR}" -skip
  if [[ $? == '0' ]]; then
    rm -rf "${FileLoad}";
  fi
  IFS=$IFS_BAK
}
LoadFile;

编辑好上传脚本后,可以检测下脚本编码是否正确,比如我脚本路径为/root/upload.sh,使用命令:

bash /root/upload.sh

如果无任何输出,则正确,反之输出类似$'r': command not found错误,则需要转换下编码格式,具体步骤如下。

先安装dos2unix

#CentOS系统
yum install dos2unix -y

#Debian/Ubuntu系统
apt install dos2unix -y

再转换编码:

#后面为脚本路径
dos2unix /root/upload.sh

Windows使用

这里就随便补充下Windows使用,先下载程序文件,下载地址→传送门

比如我将exe文件放到D盘,然后使用Win+R,输入CMD运行,调出窗口后,使用命令:

#进入D盘
cd /d D:\

#国际版初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -a "url"

#个人版(家庭版)初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -ms -a "url"

#中国版(世纪互联)初始化,将url换成你上面复制的授权地址,包括http://loaclhost。
OneDriveUploader.exe -cn -a "url"

然后上传命令和上面一样,只需要把OneDriveUploader改成OneDriveUploader.exe即可。

最后经测试,该版本的上传已经完全能应对各种稀奇古怪的字符问题,如果有问题可以回复下,贴上报错代码,方便修复。

Vultr新用户注册送100美元/16个机房按小时计费,支持支付宝,【点击查看】。
最后修改:2020 年 03 月 28 日 12 : 13 AM

发表评论

366 条评论

  1. neko酱

    大佬,这个golang版完美解决了之前shell版特殊字符上传出错的问题,但是aria2自动上传功能有点小问题,它把aria2的整个下载目录都传上去了,有些还没下完的也传上去了。哎,一言难尽啊!

    1. Rat's
      @neko酱

      额,我没过多测试,这个脚本是之前那个shell改过来的,以为没得问题

  2. neko酱

    windows系统要怎么写aria2的bat/powershell自动上传脚本?
    我尝试用win版的busybox执行楼主写的bash脚本,但是失败了。

    1. Rat's
      @neko酱

      win的还没试过

  3. oxmosama

    Error Session: 400 Bad Request手动上传出现这个

    1. Rat's
      @oxmosama

      这个好像是授权失败,重新授权看看

  4. Lonely

    能不能上传完删除.aria2文件和删除任务就删除对应的下载文件

    1. Rat's
      @Lonely

      .aria2文件好像可以通过修改配置文件后,不产生该类型文件。

      1. Lonely
        @Rat's

        // 20200110175252
        // https://jker-my.sharepoint.com/personal/cloud_jker_onmicrosoft_com/_layouts/15/download.aspx?UniqueId=780de0e0-e839-4b0f-8f21-0885e11176b8&Translate=false&tempauth=eyJ0eXAiOiJKV1QiLCJhbGciOiJub25lIn0.eyJhdWQiOiIwMDAwMDAwMy0wMDAwLTBmZjEtY2UwMC0wMDAwMDAwMDAwMDAvamtlci1teS5zaGFyZXBvaW50LmNvbUA5YjhlZWQ3Mi0xMGJlLTQ5NmQtYmFmNS0yODg5NTg2MDM5N2EiLCJpc3MiOiIwMDAwMDAwMy0wMDAwLTBmZjEtY2UwMC0wMDAwMDAwMDAwMDAiLCJuYmYiOiIxNTc4NjQ5OTUxIiwiZXhwIjoiMTU3ODY1MzU1MSIsImVuZHBvaW50dXJsIjoiQU5MWmMrUjlXR21jV1hFR1dYZTVDUzFBeTdtSkZUaVc2UzRNL2tHek5odz0iLCJlbmRwb2ludHVybExlbmd0aCI6IjE1NCIsImlzbG9vcGJhY2siOiJUcnVlIiwiY2lkIjoiWldNek9UUXpZelF0TVdZell5MDBaVFE0TFRnMllXTXRZakV6TWpjeU1HSTJaRFV5IiwidmVyIjoiaGFzaGVkcHJvb2Z0b2tlbiIsInNpdGVpZCI6IlpUZzFaVFkwWlRNdE5UUTROUzAwWVRZNUxUazNOemt0WkRaaU5HVXhOR1V3Wm1NdyIsImFwcF9kaXNwbGF5bmFtZSI6Im9uZWluZGV4IiwiZ2l2ZW5fbmFtZSI6IuW7uiIsImZhbWlseV9uYW1lIjoi5YiYIiwiYXBwaWQiOiJmZTVhN2YxZC1hZDJiLTQ5Y2MtOGY0NC1jMDI1ODY2YTNhOWIiLCJ0aWQiOiI5YjhlZWQ3Mi0xMGJlLTQ5NmQtYmFmNS0yODg5NTg2MDM5N2EiLCJ1cG4iOiJjbG91ZEBqa2VyLm9ubWljcm9zb2Z0LmNvbSIsInB1aWQiOiIxMDAzMjAwMDk0MkM4MkY3IiwiY2FjaGVrZXkiOiIwaC5mfG1lbWJlcnNoaXB8MTAwMzIwMDA5NDJjODJmN0BsaXZlLmNvbSIsInNjcCI6ImFsbGZpbGVzLndyaXRlIiwidHQiOiIyIiwidXNlUGVyc2lzdGVudENvb2tpZSI6bnVsbH0.R2lUaVpWVlpBT2tTRUtKMlRTUUZjV2VBK3VBVEJzTlhKSjJtNzYydVZ1TT0&ApiVersion=2.0

        {
        "error": {

        "code": "serviceNotAvailable", "message": "Service unavailable", "retryAfterSeconds": 30

        }
        }
        一直包这个错误,是我什么地方配置错了么
        博主,我最近

        1. Rat's
          @Lonely

          这个不太清楚

  5. Mr.Lin

    现在还不能上传大于15g的多文件吗?上传80g的文件夹会 杀死

    1. Rat's
      @Mr.Lin

      国际版的好像快支持大于15G的,具体不是很清楚

  6. Mr.Lin

    Error Session: 504 Gateway Timeout
    这样咋回事啊。。

    1. Rat's
      @Mr.Lin

      超时,看是不是网络不太好。

      1. Mr.Lin
        @Rat's

        上传大文件经常504

  7. 88pan

    连续用了一段时间,发现几个问题
    1.连续上传容易出现Error Session: 429,判断是api调用过频繁导致,微软建议加上合适的ua
    2.希望加入15G以上自动跳过的机制,一旦文件超过15G将报错
    3.经常性内存占用过大导致被kill

    1. Rat's
      @88pan

      1、第一个貌似已经加了 UA。
      2、可以自己改下配置文件,支持按文件大小过滤,马上微软就支持100G文件了。
      3、内存问题已经解决。

  8. 妄想症

    bash /root/rcloneupload.sh这个没有报错,权限给过重启后还是不行,手动上传依旧正常

  9. 妄想症

    大佬,这个脚本不会自动上传什么情况,手动上传没有问题,aria2.log找不到上传脚本的痕迹,看下了底下的评论,貌似还有几个人跟我遇到一样的问题了,求解决

  10. satuki

    博主,为什么我还是会得到Error: Get token [401 Unauthorized]呀,试过好多次了

    1. Rat's
      @satuki

      url只能用一次,还有版本记得选对。

      1. 啸天
        @Rat's

        我url重新获取几次了,也提示这个,本来上周已经配置好了,但是上传到OneDrive后服务器上面的文件还是没有删除,很奇怪