首页 > TAG信息列表 > S3cmd
单机CEPH安装部署与对象存储
个人记录,仅供参考 本文只记录操作流程以及我遇到的报错和解决手段,不包含CEPH知识 报错若没遇到可以不看,遇到其他问题可以去附录里的链接找找 1. 单机CEPH安装部署 (1) 准备 虚拟机:VMware WorkStation 16 Pro 系统:Ubuntu 20.04.3 LTS 安装ceph-deploy: sudo apt -y install ceph-dep在windows下使用s3cmd和s3browser来管理amazon s3的笔记
S3是Amazon S3的简称,s3cmd是一款命令行工具用来管理s3,同时还有一款图形化的管理工具:s3 browser。 因为绝大多数用户都是在linux下管理s3,而我们的打包机是在windows上,所以需要在windows下管理s3,本文记录一下踩坑。 S3文档 s3的官方文档:https://s3tools.org/s3cmd s3cmd下载:https://s3cmd sync命令常用选项说明
1. s3cmd sync命令常用选项说明 --list-md5:结合list一起使用,打印md5 -H, --human-readable-sizes:人性化文件大小 -v, --verbose:显示详细的输出 -d, --debug:调试信息 --limit-rate=LIMITRATE:将上传或下载速度限制为每秒字节数。 数量可以用字节、k 后缀的千字节或 m 后缀的兆字s5cmd,比s3cmd更快的s3协议客户端
今天使用s3cmd上传文件,因为s3cmd是单线程的,当文件非常多且小,速度堪忧。网上的方法也无外乎多开几个cmd上传。 后来发现s5cmd工具,(https://github.com/peak/s5cmd),可以多线程运行,速度灰常的快。 使用方式如下: 在/root/目录下新建.aws目录 在.aws目录下,新建,config、credentials文件 coceph高可用分布式存储集群12-S3cmd详解
S3cmd(s3cmd)是免费的命令行工具和客户端,用于在Amazon S3和其他使用S3协议的云存储服务提供商(例如Google Cloud Storage或DreamHost DreamObjects)中上载,检索和管理数据。最适合熟悉命令行程序的高级用户。它也是批处理脚本和自动备份到S3(由cron等触发)的理想选择。 S3cmd用Python编写S3cmd
一:安装方法 #wget http://nchc.dl.sourceforge.net/project/s3tools/s3cmd/1.0.0/s3cmd-1.0.0.tar.gz #tar -zxf s3cmd-1.0.0.tar.gz -C /usr/local/ #mv /usr/local/s3cmd-1.0.0/ /usr/local/s3cmd/ #ln -s /usr/local/s3cmd/s3cmd /usr/bin/s3cmd 二:使用