草庐IT

OpenStack$Kubernetes

全部标签

hadoop - Kubernetes 分布式文件系统

嗯,我的公司正在考虑从Hadoop迁移到Kubernetes。我们可以在Kubernetes中找到解决方案,例如cassandra,sparks等工具。所以最后一个问题是如何在Kubernetes中存储海量文件,比如说1PB。仅供引用,我们不想使用S3等在线存储服务。据我所知,HDFS只是在Kubernetes中使用,还有Torus、Quobyte等少数替代产品。所以我的问题是,对Kubernetes上的文件系统有什么建议吗?或者有什么更好的解决方案?非常感谢。 最佳答案 您可以使用Hadoop兼容文件系统,例如Ceph或Minio

hadoop - Openstack 和 Cloudera 之间的差异

关闭。这个问题不符合StackOverflowguidelines.它目前不接受答案。这个问题似乎不是关于aspecificprogrammingproblem,asoftwarealgorithm,orsoftwaretoolsprimarilyusedbyprogrammers的.如果您认为这个问题是关于anotherStackExchangesite的主题,您可以发表评论,说明问题可能在哪里得到解答。关闭5年前。Improvethisquestion我无法阐明OpenStack和Cloudera之间的区别。据我了解,两者都是您可以安装在自己的集群中以对其进行管理的软件。但我想两者

linux - 在 OpenStack 上安装 Apache Hadoop

我已经按照here中的教程成功配置了OpenStack.我搜索了很多有关在OpenStack上安装ApacheHadoop的信息,但找不到安装方法。谁能建议我如何在OpenStack上配置ApacheHadoop? 最佳答案 SaharaProject(前Savanna项目)是一项在OpenStack之上提供Hadoop的计划他们提供了一个installationguide. 关于linux-在OpenStack上安装ApacheHadoop,我们在StackOverflow上找到一个类

apache - 使用 Kubernetes 或 Apache mesos

我们有一个产品,在一些docker文件中有描述,它可以创建必要的docker容器。一些docker容器将只运行一些基本应用程序,而其他容器将运行集群(hadoop)。现在是我需要使用哪个集群管理器的问题。Kubernetes或Apachemesos或两者兼而有之?我读到Kubernetes适用于100%容器化环境,而ApacheMesos更适用于部分容器化和部分非容器化的环境。但是ApacheMesos更适合在docker中运行hadoop(?)。我们的环境仅由docker容器组成,但有些带有hadoop集群,有些带有一些应用程序。什么是最好的? 最佳答案

hadoop - 在 Kubernetes 上为 Apache Spark 部署 Elasticsearch

我想知道是否有人有使用ElasticsearchforHadooplibrary配置Kubernetes集群的经验.尝试从spark写入elasticsearch时,我遇到了节点发现超时的问题。感谢elasticsearch-cloud-kubernetes,我已经启动并运行了ElasticsearchES的插件,它处理发现,但我不确定如何最好地配置elasticsearch-hadoop以了解kubernetes集群中的节点(pods)。我已经尝试将spark.es.nodes设置为es-client服务,但这似乎不起作用。我也知道我可以启用es.nodes.wan.only,但如文

使用 Azure DevOps 的 Kubernetes 部署

Kubernetes是一个开源容器编排平台,用于管理和自动化容器化应用程序的部署、扩展和管理。AzureDevOps是一种基于云的DevOps服务,可为构建、测试和部署应用程序提供完整的CI/CD管道。在本文中,我将讨论如何使用AzureDevOps部署Kubernetes应用程序。先决条件Azure订阅一个AzureDevOps帐户一个Kubernetes集群一个Docker镜像第1步:创建Kubernetes部署文件在源代码存储库中创建Kubernetes部署文件(deployment.yaml)。此文件应包含Kubernetes部署的规范,包括容器映像、副本和端口。这是部署文件的示例:a

OpenStack云计算相关问题解答

OpenStack支持哪几种虚拟化技术?在OpenStack环境中,计算服务通过API服务器来控制虚拟机管理程序,它具备一个抽象层,可以在部署时选择一种虚拟化技术来创建虚拟机,向用户提供云服务。KVM基于内核的虚拟机(Kernel-basedVirtualMachine,KVM)是通用的开放虚拟化技术,也是OpenStack用户使用较多的虚拟化技术,它支持OpenStack的所有特性。XenXen是部署快速、安全、开源的虚拟化软件技术,可使多个同样的操作系统或不同操作系统的虚拟机运行在同一主机上。Xen技术主要包括XenServer(服务器虚拟化平台)、XenCloudPlatform(XCP

【云计算 | OpenStack】从零开始使用libvirt创建一个kvm虚机

环境:os镜像:CentOS-7-x86_64-Minimal-2009.isoqemu-kvm:qemu-kvm.x86_6410:1.5.3-175.el7_9.6Libvirt:libvirt-4.5.0-36.el7.x86_641.背景1.1KVM基于内核的虚拟机KVM(Kernel-BasedVirtualMachine)需要两个条件:硬件支持全虚拟化、操作系统为Linux。KVM只支持对虚拟机的虚拟CPU、虚拟内存进行管理和调度;针对其他的虚拟外设,KVM需要借助另一个虚拟化项目Qemu1.2Libvirt针对不同的Hypervisor(如KVM、Xen和其他商业虚拟化软件等),

OpenStack平台-keystone与glance服务运维

目录一、Keystone服务运维1.1什么是keystone?keystone的作用是什么?1.2 Keystone的部分管理对象1.3Keystone的认证过程1.4Keystone的运维命令1.5Keystone基础查询命令二、Glance服务运维2.1什么是Glance?Glance的作用是什么?​2.2镜像的访问权限2.3Glance管理镜像2.4Glance镜像运维一、Keystone服务运维1.1什么是keystone?keystone的作用是什么?        在OpenStack框加中,Keystone(OpenStackIdentityService)的功能是负责身份验证、

【云原生】Kubernetes编排工具精讲

文章目录一、Kubernetes编排工具1.1Kubernetes介绍1.2Kubernetes架构1.3Kubernetes安装一、Kubernetes编排工具1.1Kubernetes介绍Kubernetes是一个开源的,用于管理云平台中多个主机上的容器化的应用,Kubernetes的目标是让部署容器化的应用简单并且高效(powerful),Kubernetes提供了应用部署,规划,更新,维护的一种机制。Kubernetes一个核心的特点就是能够自主的管理容器来保证云平台中的容器按照用户的期望状态运行着,管理员可以加载一个微型服务,让规划器来找到合适的位置。同时,Kubernetes也系统