付费求alist百度网盘rclone挂载webdav可上传大文件方案

[sanwecn]

目前上传大文件报错，小文件正常上传
ERROR RESTY Post "https://d.pcs.baidu.com/rest/2.0/pcs/superfile2?access_token=***********=upload&partseq=1&path=%252F%25E6%258A%2596%25E9%259F%25B3%252F%25E4%25B8%25AD%25E5%259B%25BD%25E8%2588%259E%25E7%258F%258D%25E5%25A6%25AE%2520%25E6%258A%2596%25E9%259F%25B32023-07-28T10_17_58.mp4&type=tmpfile&uploadid=P1-MTAuMjI5LjE4Ni4xNzM6MTY5MDUxNzQyMToyMjQxODQxOTQwODUwMTY5ODU%3D": read tcp 172.17.0.6:33080->110.242.69.44:443: read: connection reset by peer, Attempt 1
rclone挂载参数
rclone mount baidu: /mnt/sda/data/baidu --cache-dir /mnt/sda/data/rclonecache --vfs-cache-mode full --header "Referer:https://pan.baidu.com/" --header "User-Agent:pan.baidu.com" --no-modtime --multi-thread-streams 8 --vfs-read-chunk-size 256M --vfs-read-chunk-size-limit 600M --buffer-size 4096M --daemon

[pongfcnkl]

换这个项目上传
https://github.com/qjfoidnh/BaiduPCS-Go

[pongfcnkl]

上传速度慢是因为用了单线程，多线程还没做

[sanwecn]

#root@localhost:/mnt/sda/data/go# bypy syncup -v
Loading Hash Cache File '/root/.bypy/bypy.hashcache.json'...
Hash Cache File loaded.
Gathering local directory ...
Done
Gathering remote directory ...
Done
Comparing ...
Done
[18:13:16] Error accessing 'https://c.pcs.baidu.com/rest/2.0/pcs/file'
[18:13:16] Function: _upload_one_file_act
[18:13:16] Website parameters: {'method': 'upload', 'path': '/apps/bypy/BaiduPCS-Go-v3.9.2-linux-amd64/README.md', 'ondup': 'overwrite'}
[18:13:16] Waiting 10 seconds before retrying...
[18:13:26] Request Try #2 / 5
速度太慢无法使用，如果可以修改上传服务器地址应该会好点。

[pongfcnkl]

你是国外vps吧，不能把文件下载回来在上传吗？

[pongfcnkl]

[sanwecn]

是的没错境外大盘鸡，想把BT下载的文件上传到百度盘再下载，因为直接访问速度很慢。

[SeanHeuc]

找到问题了，百度上传因为要使用seek，所以必须先把整个文件先接受并存储为alist 临时目录temp下的临时文件，然后再去处理，此时rclone等软件会认为数据都已经上传成功了，只是等待最后服务器返回一个成功的信号。此时如果是大文件alist是需要一定的时间才能上传完，而rclone 有默认的5分钟超时，超过5分钟就会断开连接并重新上传，所以需要在任何rclone 复制等操作时加入 --timeout
以下为示例：
rclone sync '/mnt/aaaa' 'baidu:/bbbbb' --buffer-size=256M --use-mmap -v --transfers 1 --timeout 60m

[foxxorcat]

这报错明显的连接不稳定，服务器被迫断开连接，设置超时是没多大用的。
或许这个可以改善这个问题？ #4987

[SeanHeuc]

😵‍💫 太卷了，断点续传的上传实现了的话，其他网盘工具可能真的没有多少优势了

[sanwecn]

使用BaiduPCS-Go可以上传，用alist挂载阿里盘可以正常上传。

[9k001]

感谢 ，你的参数解决了我无法上传阿里云盘的问题。

[Aixtuz]

虽然不确定是否能解决楼主的问题，但确实解决了我这大文件失败的问题。
现象为：
rclone 上传进度 100% 后，显示速度降到最低。
此时查看网络状态，会发现依然在高速上传。（默认多线程上传时没注意到，后来改单线程才发现 100% 后，上传其实还没完成）
此时就会遇到这个答案说的情况，超时后再次重新上传，100% 再次重复此问题，直至默认的3次失败停止。