一、概述 Ceph在k8s中用做共享存储还是非常方便的，Ceph是比较老牌的分布式存储系统，非常成熟，功能也强大，支持三种模式（快存储、文件系统存储、对象存储），所以接下来就详细讲解如何在k8s使用ceph，关于ceph的介绍可以参考我以下几篇文章：分布式存储系统Ceph介绍与环境部署 分布式存储系统Ceph实战操作 前提是需要一个k8s环境，k8s环境的部署可以参考我这篇文章：云原生Kubernetes（k8s）最完整版环境部署（V1。24。1） 二、CephRook介绍 Rook是一个开源的云原生存储编排工具，提供平台、框架和对各种存储解决方案的支持，以和云原生环境进行本地集成。Rook将存储软件转变成自我管理、自我扩展和自我修复的存储服务，通过自动化部署、启动、配置、供应、扩展、升级、迁移、灾难恢复、监控和资源管理来实现。Rook底层使用云原生容器管理、调度和编排平台提供的能力来提供这些功能。Rook利用扩展功能将其深度地集成到云原生环境中，并为调度、生命周期管理、资源管理、安全性、监控等提供了无缝的体验。有关Rook当前支持的存储解决方案的状态相关的更多详细信息，可以参考Rook仓库的项目介绍。Rook目前支持Ceph、NFS、MinioObjectStore和CockroachDB。 官网：https：rook。io 项目地址：https：github。comrook三、通过Rook在k8s中部署Ceph 官方文档：https：rook。iodocsrookv1。10GettingStartedquickstart 【温馨提示】k8s节点各挂载一块（或者多块）20GB的未使用的磁盘。1）下载部署包gitclonesinglebranchbranchv1。10。8https：github。comrookrook。git 部署所用到的镜像如下： 由于镜像源在国外，国内无法下载，这里需要修改一些镜像或者提前下载tag，操作如下：cdrookdeployexamples（registry。aliyuncs。comgooglecontainersimage：tag），后四个镜像我FQ下dockerpullregistry。aliyuncs。comgooglecontainerscsinodedriverregistrar：v2。5。1dockertagregistry。aliyuncs。comgooglecontainerscsinodedriverregistrar：v2。5。1registry。k8s。iosigstoragecsinodedriverregistrar：v2。5。1dockerpullregistry。aliyuncs。comgooglecontainerscsisnapshotter：v6。1。0dockertagregistry。aliyuncs。comgooglecontainerscsisnapshotter：v6。1。0registry。k8s。iosigstoragecsisnapshotter：v6。1。0dockerpullregistry。aliyuncs。comgooglecontainerscsiattacher：v4。0。0dockertagregistry。aliyuncs。comgooglecontainerscsiattacher：v4。0。0registry。k8s。iosigstoragecsiattacher：v4。0。0dockerpullregistry。aliyuncs。comgooglecontainerscsiresizer：v1。6。0dockertagregistry。aliyuncs。comgooglecontainerscsiresizer：v1。6。0registry。k8s。iosigstoragecsiresizer：v1。6。0dockerpullregistry。aliyuncs。comgooglecontainerscsiresizer：v1。6。0dockertagregistry。aliyuncs。comgooglecontainerscsiresizer：v1。6。0registry。k8s。iosigstoragecsiresizer：v1。6。0dockerpullregistry。aliyuncs。comgooglecontainerscsiprovisioner：v3。3。0dockertagregistry。aliyuncs。comgooglecontainerscsiprovisioner：v3。3。0registry。k8s。iosigstoragecsiprovisioner：v3。3。02）部署RookOperatorcdrookdeployexampleskubectlcreatefcrds。yamlfcommon。yamlfoperator。yaml检查kubectlnrookcephgetpod 也可以通过helm部署helmrepoaddrookreleasehttps：charts。rook。ioreleasehelminstallcreatenamespacenamespacerookcephrookcephrookreleaserookcephfvalues。yaml3）创建RookCeph集群 现在RookOperator处于Running状态，接下来我们就可以创建Ceph集群了。为了使集群在重启后不受影响，请确保设置的dataDirHostPath属性值为有效得主机路径。cdrookdeployexampleskubectlapplyfcluster。yaml4）部署RookCeph工具cdrookdeployexampleskubectlcreateftoolbox。yaml5）部署CephDashboardcdrookdeployexampleskubectlapplyfdashboardexternalhttps。yaml获取dashboardadmin密码kubectlnrookcephgetsecretrookcephdashboardpasswordojsonpath｛〔data〕〔password〕｝base64d 通过CephDashboard查看Ceph集群状态查看对外端口kubectlgetsvcnrookceph https：：nodePort 6）检查kubectlgetpods，svcnrookceph 6）通过cephtool工具pod查看ceph集群状态kubectlexecitkubectlgetpodsnrookcephgreprookcephtoolsawk｛print1｝nrookcephbashcephs 四、测试验证1）块存储（RBD）测试1、创建StorageClasscdrookdeployexamples创建一个名为replicapool的rbdpoolkubectlapplyfcsirbdstorageclass。yaml 2、部署WordPresskubectlapplyfmysql。yamlkubectlapplyfwordpress。yaml2）文件系统（CephFS）测试1、创建StorageClasskubectlapplyfcsicephfsstorageclass。yaml2、部署应用kubectlapplyffilesystem。yaml3）对象存储（RGW）测试1、创建对象存储kubectlcreatefobject。yaml验证rgwpod正常运行kubectlnrookcephgetpodlapprookcephrgw2、创建对象存储userkubectlcreatefobjectuser。yaml3、获取accesskeysecretkey获取AccessKeykubectlnrookcephgetsecretrookcephobjectusermystoremyuseroyamlgrepAccessKeyawk｛print2｝base64decode获取SecretKeykubectlnrookcephgetsecretrookcephobjectusermystoremyuseroyamlgrepSecretKeyawk｛print2｝base64decode4、部署rgwnodeportkubectlapplyfrgwexternal。yamlkubectlnrookcephgetservicerookcephrgwmystorerookcephrgwmystoreexternal5、通过api接口使用Ceph存储存储首先，我们需要安装pythonboto包，用于测试连接S3。：yuminstallpythonbotoy然后，编写python测试脚本。cats3。py！usrbinpythonimportbotoimportboto。s3。connectionaccesskeyC7492VVSL8O11NZBK3GTsecretkeylo8IIwMfmow4fjkSOMbjebmgjzTRBQSO7w83SvBdconnboto。connects3（awsaccesskeyidaccesskey，awssecretaccesskeysecretkey，host192。168。182。110，port30369，issecureFalse，callingformatboto。s3。connection。OrdinaryCallingFormat（），）bucketconn。createbucket（myfirsts3bucket）forbucketinconn。getallbuckets（）：print｛name｝｛created｝。format（namebucket。name，createdbucket。creationdate，） 具体测试过程在我之前的文章中有很详细的介绍，可以参考：分布式存储系统Ceph实战操作 Ceph在k8s中应用介绍就先到这里了，有任何疑问欢迎给我留言，后续会持续更新【大数据云原生】相关的文章，请小伙伴耐心等待！！！
关晓彤这一身造型告诉你2018最新时尚潮流【关晓彤这一身造型告诉你2018最新时尚潮流】关晓彤整个的穿搭可以说是又美了几分，整个的造型选择的相当不错，比如说凹上一款黑色系的连衣裙，有点小天鹅的感觉，将关晓彤整个的线条感……半身裙怎么搭配显瘦？修身显瘦半身裙优雅显气质【半身裙怎么搭配显瘦？修身显瘦半身裙优雅显气质】相当赞的一步裙，款式平淡无奇，给人的感觉很美好，十分耐看，面料有质感，也不会透。很棒的一款单品，值得入手。一起来看一下半身裙怎么……冬季时尚服饰穿搭烂漫的甜美系很唯美【冬季时尚服饰穿搭烂漫的甜美系很唯美】冬天虽然没有春天，那么的生机勃勃，但是冬天也有它独特的一面。漫天飘扬的雪花，就是冬天的一大特征。女生总是喜欢产生一些浪漫的幻想，尤其是在下……这些柔软舒适的服饰穿搭创出你的时尚魅力这些柔软舒适的服饰穿搭创出你的时尚魅力，2016新款，手工打造，大码女装2016夏装200斤胖妹妹宽松印花雪纺时尚显瘦中长款连衣裙复古印花民族风T恤，露肩袖，T恤是宽松短……那英穿衣服真不咋地，大花裤也敢穿上舞台，气场全靠修图撑着呢那英一直是素有大姐大称号，这个是大家都比较承认的，毕竟她豪爽的性格和她在歌坛的地位，也确实是值得起这个称号！但是那英的这个穿衣打扮，还真的是不敢恭维的呢，总是能穿一些大家都看不……打破冬日臃肿穿搭5款美裙点燃冬日色彩（图）打破冬日臃肿穿搭，5款美裙点燃冬日色彩。用一件件美裙点燃冬日的激情，唤醒那份时尚的温暖的活力吧。不要因为怕麻烦，老是选择那些暗沉的冬衣裤子，其实裙子可以更加的有活力，美裙也让你……蜕变氧气美女要有的神器高领刺绣卫衣两件套（图）蜕变氧气美女要有的神器，高领刺绣卫衣两件套。昔日高领刺绣卫衣两件套的活力简洁是青春青涩的象征，也是令人依依不舍的根源，最怕到最后会变得很复杂，套路满满，像这样高领刺绣卫衣两件套……背带裤怎么搭配？这些时尚的背带裤穿搭俏皮吸睛背带裤怎么搭配？这些时尚的背带裤穿搭俏皮吸睛内搭Bra抹胸心机露肉是夏日的吸睛之道，直接内搭Bra抹胸，露出香肩和侧腰，性感魅力就在不经意间释放。友情提醒：l……简约松糕凉鞋搭配夏日一双凉鞋就够了（图）夏日搭配，一双简约松糕凉鞋就够了，幸亏，夏日搭配已经被凉鞋承包了，有了简约松糕凉鞋就不用面临如何选择的窘境了，小编推荐几款简约松糕凉鞋的搭配，整个夏天就靠简约松糕凉鞋了。……女人的优雅一件长款气质连衣裙就可以搞定（图）【女人的优雅一件长款气质连衣裙就可以搞定】这件长款连衣裙非常优雅精致又甜美的风格。蕾丝元素的长款连衣裙几乎是百穿不厌的时尚单品，这款欧根纱刺绣蕾丝长款连衣裙就很值得入手哦。……5款镂空蕾丝拼接连衣裙妩媚，优雅，迷人（图）镂空蕾丝拼接连衣裙的搭配，彰显妩媚，优雅，迷人！穿镂空蕾丝拼接连衣裙要的就是这个感觉。当蕾丝碰撞上针织，性感中带着优雅，假两件设计，镂空蕾丝拼接连衣裙内搭的蕾丝与吊带的设计，若……最新流行趋势是衣衫不整别再叫她们把衬衫穿好【最新流行趋势是衣衫不整别再叫她们把衬衫穿好】比起中规中矩的衬衫，不规则变化款更深得女明星的心。不论是素色、格纹还是图案款式，以往衬衫给人的印象脱离不了正式感。然而，今年时尚圈……