-
运维工具 – Hadoop高可用的架构知识
hadoop 2.0 对于Hadoop高可用架构节点介绍 NN服务器会出现脑裂(brain-split)情况什么是脑裂在hadoop2.x版本中，如果存在两个NameNode节点同时服务，这种情况称之为“脑裂” 为什么会出现脑裂脑裂出现原因一般发生在主备NamoNode切换，由于网络延迟、设备故障等，备用的StandbyNameNode【备用节点】认为ActiveNameNode【主节点】失效，此…- 2
- 0
-
排查 K8S 问题的经验和技巧
最近更新：故障经验、Kubernetes架构、持久化存储、Helm、CICD、Ingress-nginx、监控告警、应用可观察性、服务治理等相关文章。 排查 Kubernetes 问题需要有一定的经验和技巧。在实际使用过程中，可以通过学习和实践来积累经验，并结合官方文档和社区资源进行学习和交流。同时，也可以考虑采用监控和日志系统等第三方工具来帮助进行排查和预警。这样可以更好地保障应用程序的稳定性和…- 1
- 0
-
经验教训 – 2018.12.24 一个800万的教训：运维怎样规避违规操作风险？
“郑大一附院系统瘫痪2小时，违规操作的运维被判5年半”的事件刷了屏。据目前公开资料显示，北京中科某某科技有限公司的夏某某在未经授权或许可的情况下，私自编写了“数据库性能观测程序”和锁表语句，并利用私自记录的账号密码将该程序私自连接郑大一附院“HIS数据库”，导致该锁表语句在“HIS数据库”运行并锁定，造成郑大一附院三个院区所有门诊、临床计算机业务受恶意语句攻击，多个门诊业务系统无法正常操作，所有门…- 11
- 0
-
系统稳定性保障 – 混沌工程 – 持续保障系统稳定性和高可用：腾讯游戏混沌工程实践
最近一两年，我们可以发现混沌工程这个技术变得十分火热，大家都知道它变成了一个新的风口。常说做事情要顺势而为，我们希望能够抓住这个机会，所以我最近一年的工作主要是将混沌工程这一技术在腾讯游戏落地。 文章目录 Toggle 一、什么是混沌工程1、混沌工程的定义2、混沌工程的作用1）故障预防2）故障发现3）故障响应4）故障定位5）故障恢复6）复盘改进二、混沌工程平台建设1、流程设计1）实验前2）实验中3…- 5
- 0
-
经验教训 – 软件工程没有银子弹,凡是可能出错的地方就一定会出错“24年了，终于有人发现curl的这个Bug了”
雷军每天都把卓越网的链接全部点击一遍，检查错误。作为软件工程师，雷军深知：软件工程没有银子弹，凡是可能出错的地方就一定会出错。 “24年了，终于有人发现curl的这个Bug了” 本文最初发布于 Daniel Stenberg 的个人博客。 curl 作者 Daniel Stenberg 近日在个人博客分享了一个存在 23.9 年的 curl 漏洞。curl 是常用的命令行工具，用来请求 Web 服…- 3
- 0
-
运维生产故障有哪些？运维常见问题最佳实践
运维生产故障是指在运维过程中出现的各种问题和故障，可能导致系统停机、服务中断或其他运维效率问题。运维生产故障可以根据不同的因素进行分类，下面是一些常见的运维生产故障分类和其常见类型： 1. 硬件故障硬件故障是指由于服务器、网络设备或其他硬件设备的故障或损坏导致的系统停机或服务中断的问题。常见的硬件故障类型包括：– 服务器故障：例如硬盘故障、内存故障等。– 网络设备故障：例如…- 16
- 0
-
故障治理 – 线上故障分析与故障治理指引
文章目录 Toggle 1 生产故障分级规范概要1.1 开篇1.2 事故等级定义1.2.1 故障等级定义1.2.2 故障报告模板示例1.2.3 故障响应处理机制1.2.4 思考2 生产故障原因和分类2.1 故障分类2.2 bug是可以完全避免的么？-了解2.3 经典故障示例-了解2.4 混沌工程简介3 生产故障定位和解决流程3.1 影响服务质量的因素3.1.1我们常常面对如下的业务场景3.1.2 …- 21
- 0
-
IT服务治理 – SRE工具链建设思路与实践
讲师介绍 刘天斯，腾讯游戏营销SRE负责人，腾讯T12级技术专家，国家工程实验室兹聘专家（工业大数据应用技术）。曾荣获：华章最有价值作者、中国十大杰出IT博主、WOT十大优秀讲师、OpsWorld金牌讲师、TOP100优秀出品人、中国数据质量杰出专家奖、DAMA中国数据治理专家奖。个人著作：《python自动化运维：技术与实践》《循序渐进学Docker》《第一次使用Docker就上手》《破解数据治…- 34
- 0
-
FLINK SQL 实践 – （十六）：flink sql 开发利器之 Zeppelin
文章目录 Toggle 1.序篇2.Apache Zeppelin 平台效果3.安装部署篇3.1.安装 flink3.2.下载 zeppelin 的 tar 包3.3.在 zeppelin 中配置 flink 环境信息 1.序篇 上节介绍了 flink sql 的企业级开发利器 Dlink。本节就来介绍下 Apache Zeppelin。 本节主要介绍一下博主在本地部署 Apache Zeppel…- 2
- 0
-
[运维工具]每秒几十亿实时处理，阿里巴巴超大规模 Flink 集群运维揭秘
今天主要讲三块： 第一，阿里 Flink 发展的历史背景，怎么来的，现状规模到底什么样第二，阿里 Flink 运维管控平台第三，阿里 Flink 平台运维技术解决方案 文章目录 Toggle 一、阿里 Flink 集群运维挑战二、阿里 Flink 运维管控三、Flink 运维解决方案 一、阿里 Flink 集群运维挑战 首先说一下流计算，批计算就是数据集是有限的，每次的计算都可以拿到一样的结果，在…- 3
- 0
-
在 Web 服务中异步调用 Python 脚本
CGI 中需要调用一个 Python 脚本，脚本去更新执行 update 的 sql 语句，时间较长，超过了 Web 服务器的最大连接时间，因此需要使用异步调用脚本的方式。 同步方式 1char command[300] = "~/tools/read_emoji_text.py"; 2iRet = system(command); 3MMJsonOutput *pOutRes…- 21
- 0
-
一个强大的python模版脚本
#templates.py import fileinput, re field_pat = re.compile(r'[(.*?)]') scope = {} def replacement(match): code = match.group(1) try: return str(eval(code, scope)) except SyntaxError: exec cod…- 9
- 0
-
生成源码字典的python脚本
vim在编写C语言代码时，可以设置字典，以自动完成。:set dictionary=mydict 将其放到.vimrc中。 在编辑模式，Ctrl+x,Ctrl+k即可以根据字典自动完成输入。 将下面的脚本放到源码目录执行，即可生成mydict字典文件。 该脚本稍做修改即可用于对文本进行统计，生成统计数据。可用于搜索或者输入法，或者语音合成。 # !/bin/env python # file…- 7
- 0
-
python tab自动补全脚本
转自：linux系统运维 http://www.linuxyw.com/a/Shell/Python/2013/0412/27.html 自动安装方法： 脚本下载地址（linux下可用wget下载）：http://www.linuxyw.com/scripts/python-tab.sh 执行完脚本后，需要断开SSH重新登陆才可自动补全。 手动修改方法： 1.进入用户 宿主目录，建立 .pyth…- 11
- 0
-
11个提问频率最高的PHP面试题
你是否正在准备寻找一份PHP开发的工作，并且也在寻找一些关于PHP的面试题及答案？本文为大家分享了一些被提问频率最高的11个PHP面试题，以及对应的常规回答，每个公司都有自己的面试标准，面试和问题是完全取决于你在工作中所扮演的角色，当然也和你的编程技能息息相关。 问题：请用最简单的语言告诉我PHP是什么？ 回答：PHP全称：Hypertext Preprocessor，是一种用来开发动态网站的服务…- 5
- 0
-
JavaScript—网络编程(3)-Object、String、Array对象和prototype属性
本节学习JavaScript的对象和方法（函数）~ Object 对象 提供所有 JScript 对象通用的功能。 obj = new Object([value]) 参数 obj 必选项。要赋值为 Object 对象的变量名。 value 可选项。任意一种 JScript 基本数据类型。（Number、Boolean、或 String。）如果 value 为一个对象，返回不作改动的该对象。如果 …- 22
- 0
-
Rust: 如何交换Vec类型中数据的位置？
在脚本语言中，要把Vec<>中两两值进行对调，这个是太过于轻松的事情不过了。但是对于Rust而言，还是有些麻烦。 一、如何对Vec<&str>两两值进行对调？ 输出结果： 有其它写法，比如简化一些？： 以下的写法可以运行，但结果是不对的，可以看看具体什么原因造成的。clone()? 二、标准库中的用法 在Rust中有swap函数，可以直接使用：- 14
- 0
-
从零搭建自己的SpringBoot后台框架(十三)
一：什么是XSS XSS攻击全称跨站脚本攻击，是一种在web应用中的计算机安全漏洞，它允许恶意web用户将代码植入到提供给其它用户使用的页面中。 你可以自己做个简单尝试： 在任何一个表单内，你输入一段简单的js代码：<script>for(var i=0;i<1000;i++){alert("弹死你"+i);}</script>，将其存入数据库； …- 9
- 0
-
利用python脚本自动拦截DDOS攻击
改成python试试 一个很实用的iptables脚本，实现自动拒绝可疑IP地址，并发送报警邮件，短信 linux:~ # cat iptables #!/bin/bash touch /root/back_bad_ip.txt time=1`date +"%Y-%m-%d %H:%M:%S"1` ar=1`wc -l /root/back_bad_ip.txt |awk &…- 28
- 0
-
Python脚本，定时删除归档日志文件
Python脚本，定时删除归档日志文件 1# !/usr/bin/env python3 2# -*- coding:utf-8 -*- 3import math,os,sys,time 4import traceback 5import subprocess 6import datetime 7... 8#定时任务脚本，删除归档日志文件 9 10... 11#定义前一天的时间 12theDayB…- 19
- 0
-
如何用Python脚本自动SVN Update
1import os 2import time 3while True: 4 time.sleep(1) 5 os.system('sudo svn update') 6 print 'update' 7 写出脚本，然后shell下 1python autoup.py 2- 28
- 0
-
python 中__name__ = '__main__' 的作用
转自：https://www.cnblogs.com/alan-babyblog/p/5147770.html 有句话经典的概括了这段代码的意义： “Make a script both importable and executable” 意思就是说让你写的脚本模块既可以导入到别的模块中用，另外该模块自己也可执行。 这句话，可能一开始听的还不是很懂。下面举例说明： 先写一个模块： 1 2 3…- 1
- 0
-
PHP超全局变量$_SERVER
$_SERVER 是一个包含了诸如头信息(header)、路径(path)、以及脚本位置(script locations)等等信息的数组。这个数组中的项目由 Web 服务器创建。不能保证每个服务器都提供全部项目；服务器可能会忽略一些，或者提供一些没有在这里列举出来的项目。 Http请求头消息 : HTTP_HOST web服务器的地址 HTTP_USER_AGEN…- 6
- 0
-
JavaScript—网络编程(2)-函数与数组
上节，学完循环了~ 现在学Javascript的函数和数组。 JavaScript语法 每一种语言都有自己的语法规则，JS语法与Java很像，所以学习起来比较容易。JS中也一样有变量，语句，函数，数组等常见语言组成元素。 1.一般函数 格式： 1function 函数名(形式参数...) 2{ 3 执行语句； 4 return 返回值； 5} 6 函数是多条执行语句的封装体，只有被调用才会被运行。…- 7
- 0
-
￥优惠劵使用时效：无法使用使用时效：
之前
使用时效：永久有效优惠劵ID：×