OSS传输工具OSSutil使用介绍-低调大师

OSS传输工具OSSutil使用介绍

2018-03-17 1158

对象存储OSS是我们平时经常使用的产品，那么对于往OSS上传输数据的工具也是需要经常使用到的，下面介绍几款OSS传输工具的使用方式：

首先先了解一下什么是对象存储OSS：

阿里云对象存储服务（Object Storage Service，简称 OSS），是阿里云提供的海量、安全、低成本、高可靠的云存储服务。您可以通过调用 API，在任何应用、任何时间、任何地点上传和下载数据，也可以通过 Web 控制台对数据进行简单的管理。OSS 适合存放任意类型的文件，适合各种网站、开发企业及开发者使用。按实际容量付费真正使您专注于核心业务。

几种OSS传输工具简单介绍：

工具	简介	备注
ossbrowser	图形化的Object管理工具。	支持Windows、Linux、Mac平台。官方工具。提供类似Windows资源管理器的功能。用户可以方便的浏览文件、上传下载文件、支持断点续传等。
ossutil	命令行管理工具。提供方便、简洁、丰富的Object管理命令。	官方工具，支持Windows, Linux, Mac平台，不依赖于任何第三方组件，下载后即用不需要安装。
osscmd	命令行管理工具。提供完备的Bucket、object管理命令。	官方工具。基于Python2.5 - 2.7版本，支持多平台。将逐步被ossutil替代，除非需要ossutil不具备的Bucket管理功能外，强烈推荐使用ossutil。
ossfs	挂载bucket到本地文件系统，能够通过本地文件系统操作OSS 上的对象，实现数据的访问和共享。	官方工具。支持Linux平台。
ossftp	FTP工具，使用FTP协议来管理OSS的object，可以使用FileZilla、WinSCP、FlashFXP等FTP客户端操作OSS。OSSFTP本质是FTP Server, 接收FTP请求，将对文件、文件夹的操作映射为对OSS的操作。	基于Python2.7及以上，支持Windows、Linux、Mac平台。
ossimport2	数据同步工具。	可以将本地或第三方云存储服务上的文件同步到OSS上。官方工具。依赖JRE7及以上。支持Windows、Linux平台。

**
本篇文章我们重点讲述一下传输工具Ossutil的使用：
若文件总量小于30T则建议使用ossutil，若大于30T建议使用ossimport**

Ossutil工具：
1.Ossutil简介：
命令行管理工具。提供方便、简洁、丰富的Object管理命令。简单来讲就是通过简单的命令行，即可实现数据往OSS上传输的功能，当然也包括其他的功能。
**
2.下载与安装：**
进入阿里云官网下载安装包
https://help.aliyun.com/document_detail/50452.html?spm=a2c4g.11186623.6.1054.KQWN6E

**3
. 安装使用**

根据您的操作系统选择相应的binary或者压缩包下载后，运行相应的binary（如果binary为不可执行文件，请给binary增加可执行权限：chmod 755 ossutil），即：
linux系统下：

./ossutil

windows系统下有两种方法（以64位系统为例）：
1) 解压压缩包，双击运行其中的bat文件，再键入：

ossutil64.exe

2）解压压缩包，cmd进入压缩包中binary所在的目录，键入：

ossutil64.exe

mac系统下：

./ossutilmac64

**
4.配置工具config文件**
在使用访问oss的命令时，需要先配置访问AK，关于AK的更多信息见：RAM和STS介绍
配置ossutil由两种方式：交互式和非交互式。
关于配置命令的更多帮助，请使用ossutil help config查看。
交互式配置ossutil

./ossutil config
1.    $./ossutil config -L ch
2.    该命令创建将一个配置文件，在其中存储配置信息。
3.    
4.    请输入配置文件路径（默认为：/home/admin/.ossutilconfig，回车将使用默认路径。如果用户设置为其它路径，在使用命令时需要将--config-file选项设置为该路径）：
非交互式配置ossutil
./ossutil config -e oss.aliyuncs.com -i your_id -k your_key

1.    配置文件格式：
2.    
3.    [Credentials]
4.    language = CH
5.    endpoint = oss.aliyuncs.com
6.    accessKeyID = your_key_id
7.    accessKeySecret = your_key_secret
8.    stsToken = your_sts_token
9.    outputDir = your_output_dir
10.    [Bucket-Endpoint]
11.    bucket1 = endpoint1
12.    bucket2 = endpoint2
13.    ...
14.    [Bucket-Cname]
15.    bucket1 = cname1
16.    bucket2 = cname2
17.    ...
18.    
19.    SAMPLE
20.    
21.    ossutil config
22.    ossutil config -e oss-cn-hangzhou.aliyuncs.com -c ~/.myconfig
23.    
24.    OPTIONS
25.    
26.    -c, --config-file
27.    ossutil工具的配置文件路径，ossutil启动时从配置文件读取配置，在config命令中，ossutil将配置写入该文件。
28.    
29.    -e, --endpoint
30.    ossutil工具的基本endpoint配置（该选项值会覆盖配置文件中的相应设置），注意其必须为一个二级域名。
31.    
32.    -i, --access-key-id
33.    访问oss使用的AccessKeyID（该选项值会覆盖配置文件中的相应设置）。
34.    
35.    -k, --access-key-secret
36.    访问oss使用的AccessKeySecret（该选项值会覆盖配置文件中的相应设置）。
37.    
38.    -t, --sts-token
39.    访问oss使用的STSToken（该选项值会覆盖配置文件中的相应设置），非必须设置项。
40.    
41.    --output-dir=ossutil_output
42.    指定输出文件所在的目录，输出文件目前包含：cp命令批量拷贝文件出错时所产生的report文件（关于report文件更多信息，请参考cp命令帮助）。默认值为：当前目录下的ossutil_output目录。
43.    
44.    -L CH, --language=CH
45.    设置ossutil工具的语言，默认值：CH，取值范围：CH/EN，若设置成"CH"，请确保您的系统编码为UTF-8。

5. 使用案例：
使用环境：
Windows 文件往 OSS上传输
5.1安装工具包，配置config文件

**
5.2**
使用命令行进行传输：
若遇到以下错误，则证明配置文件中AK出现错误，再重新检查一遍

使用过程中可以添加使用选项实现提高并行数，断点续传等功能
具体选项请用 ./ossutil或 ./ossutil help 查看命令文档

5.3
传输完毕实例

传输过程中可能遇到的问题：

上图中显示传输到一半，提示某个文件找不到，于是人工去排查了一下，发下是如下图中的文件：

该类文件特点，无法删除，名字中有特殊字符，

原因及解决方式：
1、文件夹带点或者特殊字符。
右键新建-文本文档-写入下列命令：
DEL /F /A /Q \?%1
RD /S /Q \?%1
另存为"delete.bat"，不要双击运行。
【把要删除的文件或者目录拖放到这个bat文件的图标上就可以删除了!】
也可以下载类似文件粉碎机类的软件删除。

2、磁盘有错误。
这个比较简单，右键文件所在盘符，属性，工具，开始检测，勾选自动修复文件系统错误。
3、硬盘有坏道或者分区表错误。
这种情况基本无解，想要修复坏道硬盘的东西全的备份出去。

以上就是ossutil传输工具简单的使用方法，具体更多工具使用细节请进入官方文档查询。

微信关注我们

原文链接：https://yq.aliyun.com/articles/550214

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Docker Centos添加SSH服务

docker version: 1.12.6 image: docker.io/centos:latest, 2d194b392dd1 在Docker社区中，对于是否需要为Docker容器添加SSH服务一直存有争议。反对方的观点是：Docker的理念是一个容器只运行一个服务。因此，如果每一个容器都运行一个额外的SSH服务，就违背Docker的初衷。另外也有人认为根本没有从远程主机进入容器进行维护的必要。支持方的观点是：在Docker 1.3版本之前，如果要用attach进入容器，经常会出现卡死的情况，v1.3之后，虽然官方推出了docker exec 命令，再从宿主机进入容器是没有以前的问题了，但是如果要从去其他远程主机进入容器依然没有更好的解决方案。其实，我认为这两种说法都有道理。对于是否需要为Docker容器添加SSH服务，应取决于容器的具体应用场景：即作为应用容器还是作为系统容器或数据容器。应用容器行为围绕应用生命周期，较少简单，不需要人工的额外干预；而系统容器或数据容器则需要支持管理员的登录操作，这个时候容器对SSH服务的支持就变得十分有必要了，因为它对资源的需求不高，...

2018-03-17

725

背景：一致的全球部署的需要的时候，通过将自定义镜像从一个区域复制到另一个区域或者复制到相同到区域，使您能够在不同的区域启动基于相同 Image 的一致实例，达到高可用的需求。针对场景做相应的查询场景1. 华东1的实例，在华东2部署一样的实例（一致实例）场景2. 华东1的实例，取消复制到华东2场景3. 新购部署实例，镜像没有符合特定要求，需要导入镜像场景4. 对于实例，导出镜像到本地测试或线下私有云环境除了您现在看到的这文章，您还可以前往：您也可以使用 ECS 管理控制台、API操作你的自定义镜像。 ECS 控制台－快照和镜像－镜像对象存储OSS 控制台访问控制控制台ECS ALIYUN CLICopyImage API文档CancelCopyImage API文档ImportImage API文档ExportImage AP

2018-03-17

726

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。