006.Ceph对象存储基础使用

一 ceph文件系统

1.1 概述

ceph 对象网关是一个构建在 librados 之上的对象存储接口，它为应用程序访问ceph 存储集群提供了一个 restful 风格的网关 。

ceph 对象存储支持 2 种接口：

兼容s3: 提供了对象存储接口，兼容亚马逊s3 restful接口的一个大子集。

兼容swift: 提供了对象存储接口，兼容openstack swift接口的一个大子集。

ceph 对象存储使用 ceph 对象网关守护进程（ radosgw ），一个与 ceph 存储集群交互的 fastcgi 模块。提供了与 openstack swift 和 amazon s3 兼容的接口， rados 要有它自己的用户管理。 ceph 对象网关可与 ceph fs 客户端或 ceph 块设备客户端共用一个存储集群。 s3 和 swift 接口共用一个通用命名空间，即可以用一个接口写入数据、然后用另一个接口取出数据。

提示：ceph 对象存储不使用 ceph 元数据服务器。

新版ceph storage简化ceph对象网关的安装和配置，gateway守护程序嵌入civetweb，因此您不必安装web服务器或配置fastcgi。此外，ceph-deploy可以安装网关包，生成密钥，配置数据目录并为您创建网关实例。

二 对象存储安装

2.1 切换部署用户

  1 [root@deploy ~]# su - manager

2.2 添加rgw

  1 [manager@deploy my-cluster]$ ceph-deploy rgw create node1

提示：要使用ceph的ceph对象网关组件，必须部署rgw实例；

默认情况下，rgw实例将侦听端口7480.可以通过在运行rgw的节点上编辑ceph.conf来更改此设置。

注意：若使用ceph-deploy部署的时候出现安装包无法下载，可在部署时候指定ceph.repo为国内源：

  1 ceph-deploy install --rgw cephclient --repo-url=https://mirrors.aliyun.com/ceph/rpm-mimic/el7/ --gpg-url=https://mirrors.aliyun.com/ceph/keys/release.asc

civetweb 7480默认使用端口。

  1 [manager@deploy my-cluster]$ ceph-deploy admin node1

提示：为方便后期deploy节点管理node1，在cli中使用命令中简化相关key的输出，可将key复制至相应节点。ceph-deploy 工具会把密钥环复制到/etc/ceph目录，要确保此密钥环文件有读权限（如 sudo chmod +r /etc/ceph/ceph.client.admin.keyring ）。

2.3 测试访问

浏览器访问：http://172.24.8.72:7480/

三 对象存储使用-s3方式使用

3.1 创建s3网关用户

  1 [root@cephclient ~]# sudo radosgw-admin user create --uid="rgwuser" --display-name="this is first rgw test user"

  1 "access_key": "q0nr1hsl1jqjlxy8lolf",
  2 "secret_key": "eokvtfjqjgtjjn12ccxfoie4cddvtw0nerjoilso"
  3 [root@cephclient ~]# yum -y install python-boto			#安装测试所需依赖包

 

3.2 创建测试脚本

  1 [root@cephclient ~]# vim s3.py
  2 #!/usr/bin/python
  3 #****************************************************************#
  4 # scriptname: s3.py
  5 # author: xhy
  6 # create date: 2019-02-01 22:32
  7 # modify author: xhy
  8 # modify date: 2019-02-01 22:32
  9 # version:
 10 #***************************************************************#
 12 import boto
 13 import boto.s3.connection
 14 access_key = 'q0nr1hsl1jqjlxy8lolf'
 15 secret_key = 'eokvtfjqjgtjjn12ccxfoie4cddvtw0nerjoilso'
 16 conn = boto.connect_s3(
 17     aws_access_key_id = access_key,
 18     aws_secret_access_key = secret_key,
 19     host = 'node1', port= 7480,
 20     is_secure=false,
 21     calling_format = boto.s3.connection.ordinarycallingformat(),
 22 )
 23 bucket = conn.create_bucket('my-first-s3-bucket')
 24 for bucket in conn.get_all_buckets():
 25         print "{name}\t{created}".format(
 26                 name = bucket.name,
 27                 created = bucket.creation_date,
 28 )
 29 [root@cephclient ~]# python s3.py			#运行脚本
 30 my-first-s3-bucket      2019-02-01t15:14:55.284z

 

注意：安装所需python-boto 包，使用认证信息连接 s3，然后创建了一个 my-first-s3-bucket 的 bucket，最后列出所有已创建的 bucket，打印名称和创建时间。

四 对象存储使用-swift方式使用

4.1 创建swift用户

  1 [root@cephclient ~]# sudo radosgw-admin subuser create --uid=rgwuser --subuser=rgwuser:swift --access=full

  1     "swift_keys": [
  2         {
  3             "user": "rgwuser:swift",
  4             "secret_key": "ymotqleefmwdw5gojpcjh44g5xpp3gvgitn3goee"
  5         }

 

4.2 安装相关依赖包

  1 [root@cephclient ~]# curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py
  2 [root@cephclient ~]# python get-pip.py
  3 [root@cephclient ~]# pip install --upgrade setuptools
  4 [root@cephclient ~]# pip install --upgrade python-swiftclient

 

4.3 测试确认

  1 [root@cephclient ~]# swift -a http://node1:7480/auth/1.0 -u rgwuser:swift -k 'ymotqleefmwdw5gojpcjh44g5xpp3gvgitn3goee' list			#查看相关bucket
  2 my-first-s3-bucket

 

注意：node1:7480 为网关服务器的外网访问 ip 地址，即172.24.8.72主机，端口默认 7480，若已修改端口号，则修改为对应端口。

 

参考链接：http://docs.ceph.org.cn/install/install-ceph-gateway/