#集群

专有宿主机如何实现“资源池”管理——集群管理能力升级

/专有宿主机是一台用户独享的部署了阿里云虚拟化平台的物理服务器,可以直接创建ECS实例,开箱即用。同时物理机可用资源对用户完全透明,用户可以自主的部署不同规格的ECS实例,对部署有绝对的自主权。在专有宿主机上创建ECS实例时,用户获得了指定宿主机创建实例的自由。但是当具有多台宿主机的时候,每次创建实例都需要输入宿主机I...

GitOps:Kubernetes多集群环境下的高效CICD实践

为了解决传统应用升级缓慢、架构臃肿、不能快速迭代、故障不能快速定位、问题无法快速解决等问题,云原生这一概念横空出世。云原生可以改进应用开发的效率,改变企业的组织结构,甚至会在文化层面上直接影响一个公司的决策,可以说,云时代的云原生应用大势已来。在容器领域内,Kubernetes已经成为了容器编排和管理的社区标准。它通过...

半分钟就懂 --- 分布式与集群是什么 ? 区别是什么?

一、大白话解说,半分钟就懂,用生活中的例子来说明: 小饭店原来只有一个厨师,切菜洗菜备料炒菜全干。后来客人多了,厨房一个厨师忙不过来,又请了个厨师,两个厨师都能炒一样的菜,两个厨师的关系是集群。为了让厨师专心炒菜,把菜做到极致,再请了个配菜师负责切菜,备菜,备料... 厨师和配菜师的关系是分布式。&...

(转)解决k8s集群提示docker login问题(同样适用于Rancher)

文章转自 https://blog.liv1020.com/参考文档:https://kubernetes.io/docs/concepts/containers/images/#configuring-nodes-to-authenticate-to-a-private-repositorysudocp~/...

阿里云集群搭建

几位朋友找我,做一个基于spark的推荐系统。我们于是买了三台阿里云服务器折腾一下。  1.配置putty和安装nano    2.配置主机映射/etc/hosts172.18.161.218hadoop01172.18.161.225hadoop03172....
代码星球 ·2021-02-22

华为集群后killsql命令和查看mr占用的磁盘空间

 (1)linux后台:yarnapplication-list 找到相应的命令粘贴job(2)去FImanager的yarn上粘贴job看详细过程(3)确定后在linux后台 yarnapplication-kilxxxx都是因为华为的集群对hivesql脚本的给出了部分信息没有全部信息...

Redis集群部署

Redis作为目前最常用的内存NOSQL数据库,使用的场景非常的广泛.但是在3.0以前官方一直都是没有集群的方案的.相当于是一个单机内存数据库.为了其高可用,集群的部署是非常有必要的.因此,各种第三方厂商都推出了自己的集群方案.使用的最多的就是豌豆荚开源的Codis,Twitter开源的Twemproxy,Netfli...
代码星球 ·2021-02-19

CentOS7.5搭建Zookeeper3.4.12集群与命令行操作

1.0下载地址官网首页: https://zookeeper.apache.org/下载地址: http://mirror.bit.edu.cn/apache/zookeeper/1.1集群规划在node21、node22和ode23三个节点上部署Zookeeper,三个节点都已安装jdk。IP节点...

CentOS7.5搭建Hadoop2.7.6完全分布式集群

Hadoop官方地址:http://hadoop.apache.org/1.1防火墙,静态IP,主机名关闭防火墙,设置静态IP,主机名此处略,参考  Linux之CentOS7.5安装及克隆1.2修改host文件我们希望三个主机之间都能够使用主机名称的方式相互访问而不是IP,我们需要在hosts中配...

集群、节点操作

集群建立,分布式安装:conf/elasticsearch.yml下cluster.name:wali//集群名字node.name:masternode.master:truenetwork.host:0.0.0.0查看原来的进程并杀掉:ps-ef|grep'elasticsearch'kill进程号节点建立:同级目...
代码星球 ·2021-02-18

大数据学习——下载集群根目录下的文件到E盘

代码如下:packagecn.itcast.hdfs;importjava.io.IOException;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FileSystem;importorg.apache.hadoop.fs...

大数据学习——上传本地文件到集群根目录下

TestHDFS.javapackagecn.itcast.hdfs;importjava.io.IOException;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FileSystem;importorg.apache.h...

大数据学习——hadoop2.x集群搭建

1.准备Linux环境1.0先将虚拟机的网络模式选为NAT1.1修改主机名vi/etc/sysconfig/networkNETWORKING=yesHOSTNAME=itcast###1.2修改IP两种方式:第一种:通过Linux图形界面进行修改(强烈推荐)进入Linux图形界面->右键点击右上方的两个小电脑-...

大数据学习——yarn集群启动

启动yarn命令:start-yarn.sh验证是否启动成功1jps查看进程2http://192.168.74.100:8088页面关闭stop-yarn.sh ...

大数据学习——hdfs集群启动

第一种方式:1格式化namecode(是对namecode进行格式化)hdfsnamenode-format(或者是hadoopnamenode-format)进入cd/root/apps/hadoop/tmp/dfs/name/current启动namecode  hadoop-daemon.sh...
首页上一页12345...下一页尾页