靠谱运维的文章

靠谱运维,Linux运维实战技能分享平台,企业一线原创运维经验总结。
运维职场

运维的苦与痛

最近互联网也是非常有意思,接二连三的发生故障,让我们一起先回顾一下。 2015年5月11号晚上21点左右开始,网易的网易新闻、云音乐、易信、有道云笔记等移动应用均无法正常刷新,网易名下的游戏也全线瘫痪。故障原因:骨干网络遭受攻击。 2015年5月27日下午,部分用户反映其支付宝出...

3年前 (2017-03-23) 2859℃ 0评论 4喜欢

docker技术

Docker学习笔记:Docker 基础用法

Docker 基础用法 Docker HUB : Docker镜像首页,包括官方镜像和其它公开镜像 因为国情的原因,国内下载 Docker HUB 官方的相关镜像比较慢,可以使用 Daocloud 镜像加速。 3.1 Search images $ sudo docker se...

3年前 (2017-03-16) 2181℃ 0评论 1喜欢

docker技术

Docker学习笔记:Docker 简介

Docker学习笔记:Docker 简介
一、Docker 简介 Docker 两个主要部件: Docker: 开源的容器虚拟化平台 Docker Hub: 用于分享、管理 Docker 容器的 Docker SaaS 平台 – Docker Hub Docker 使用客户端-服务器 (C/S) 架构模式。Docke...

3年前 (2017-03-16) 2091℃ 0评论 0喜欢

docker技术

Docker入门教程学习(六)15个Docker命令

Docker入门教程学习(六)15个Docker命令
在这篇文章中,我们将学习另外的15个Docker命令。它们分别是:daemon:Docker daemon是一个用于管理容器的后台进程。一般情况下,守护进程是一个长期运行的用来处理请求的进程服务。-d参数用于运行后台进程。build:如之前所讨论的,可以使用Dockerfile来...

3年前 (2017-03-15) 2217℃ 0评论 0喜欢

hadoop运维

Hadoop、Storm、Samza、Spark和Flink大数据框架对比

简介 大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限,但这种计算类型的普遍性、规模,以及价值在最近几年才经历了大规模扩展。 本文将介绍大数据系统一个最基本的组件:处理框架。处理框架负责...

3年前 (2017-03-15) 2111℃ 0评论 0喜欢

docker技术

Docker入门教程学习(五)Docker安全

Docker入门教程学习(五)Docker安全
我们必须高度重视开源软件的安全问题,当开发者在使用Docker时,从本地构建应用程序到生产环境部署是没有任何差异的(译者注:作者的言外之意是更应该重视Docker的安全问题)。当Docker被越来越多的平台使用的时候,我们需要严格保证Docker作为一个项目或者平台的安全性。因此...

3年前 (2017-03-14) 2011℃ 0评论 0喜欢

hadoop运维

Hadoop运维必须知道的10个运维技能

前言 接触Hadoop有两年的时间了,期间遇到很多的问题,既有经典的NameNode和JobTracker内存溢出故障,也有HDFS存储小文件问题,既有任务调度问题,也有MapReduce性能问题.遇到的这些问题有些是Hadoop自身的缺陷(短板),有些则是使用的不当。 在解决问...

3年前 (2017-03-14) 4261℃ 1评论 2喜欢

hadoop运维

Yarn简单介绍及内存配置

Yarn简单介绍及内存配置
我么知道MRv1存在的主要问题是:在运行时,JobTracker既负责资源管理又负责任务调度,这导致了它的扩展性、资源利用率低等问题。之所以存在这样的问题,是与其最初的设计有关,如下图: 从上图可以看到,MRv1是围绕着MapReduce进行,并没有过多地考虑以后出现的其它数据...

3年前 (2017-03-13) 1727℃ 0评论 0喜欢

docker技术

Docker入门教程学习(四)Docker Registry

DockerOne组织翻译了Flux7的Docker入门教程,本文是系列入门教程的第四篇,介绍了Docker Registry,它是Docker中的重要组件。本文通过情景演绎的方式对其进行了介绍,图文并茂,强烈推荐读者阅读。在Docker系列教程的上一篇文章中,我们讨论了Dock...

3年前 (2017-03-13) 2033℃ 0评论 0喜欢