文章
文章用户文档快讯圈子网址导航
全部标签

安全运维

  • 亿级Web系统搭建——单机到分布式集群

    亿级Web系统搭建——单机到分布式集群

    当一个Web系统从日访问量10万逐步增长到1000万，甚至超过1亿的过程中，Web系统承受的压力会越来越大，在这个过程中，我们会遇到很多的问题。为了解决这些性能压力带来问题，我们需要在Web系统架构层面搭建多个层次的缓存机制。在不同的压力阶段，我们会遇到不同的问题，通过搭建不同的服务和架构来解决。 **Web负载均衡 ** Web负载均衡（Load Balancing），简单地说就是给我们的服务器…
    安全运维
    • 6
    • 0
    aqztaqzt
  • 清除MAC 可清除空间

    清除MAC 可清除空间

    可行的平民命令解决方法,简单又可靠 找出系统大的文件夹 1sudo du -a / | sort -n -r | head -n 50 2 看看那个大文件夹的数据是多余,以本人为例子,就找出不少多余而又大的文件 例如: /CoreSimulator/Devices/ 这个目录就很多不要的数据 删除命令: 1xcrun simctl delete unavailable 2 ~/Library/Ca…
    安全运维
    • 12
    • 0
    aqztaqzt
  • SVN服务器搭建和使用

    SVN服务器搭建和使用

      svn 插件地址 http://subclipse.tigris.org/update http://subclipse.tigris.org/update_1.0.x http://subclipse.tigris.org/update_1.4.x http://subclipse.tigris.org/update_1.6.x Subversion是优秀的版本控制工具,其具体的的优点和详细…
    安全运维
    • 3
    • 0
    aqztaqzt
  • 用vlc搭建简单流媒体服务器（UDP和TCP方式）

    用vlc搭建简单流媒体服务器（UDP和TCP方式）

    这段时间用到了流媒体数据传输的TCP和UDP方式，感觉vlc可以做这方面的demo，这里总结下，也方便我以后查阅。 简介 VLC主页：http://www.videolan.org VLC不仅仅是个播放器，也可以作为流媒体服务器使用。这个网上有相关的资料，我就不多说了。 声明下本文用的VLC版本：2.0.3 用VLC搭建基于UDP的流媒体服务器 流媒体服务器大多数是基于UDP的，这个在VLC中也有…
    安全运维
    • 22
    • 0
    aqztaqzt
  • Linux自动检测网站心跳通知shell脚本

    Linux自动检测网站心跳通知shell脚本

    1#!/bin/bash 2LIST=("http://xxxx.com") 3NAME=("评价系统getwindowList接口") 4for ((i=0;i<${#LIST[@]};i++)) 5do 6HTTP_CODE=`curl -o /dev/null -s -w "%{http_code}" "${LIST…
    安全运维
    • 14
    • 0
    aqztaqzt
  • MyEclipse+Tomcat+MAVEN+SVN项目完整环境搭建

    MyEclipse+Tomcat+MAVEN+SVN项目完整环境搭建

    1.JDK的安装 首先下载JDK，这个从sun公司官网可以下载，根据自己的系统选择64位还是32位，安装过程就是next一路到底。安装完成之后当然要配置环境变量了。 1.1新建变量名：JAVA_HOME 变量值：E:\Java\jdk1.6.0_43（这是我的jdk安装路径） 1.2编辑变量名：Path 在后面加上：%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin 1.3 新…
    安全运维
    • 3
    • 0
    aqztaqzt
  • Spark集群搭建

    Spark集群搭建

    环境装备 192.168.16.6 master 192.168.16.4 slave1 192.168.16.5 slave2 spark安装 在Master机器，上传spark安装包spark-2.4.3-bin-hadoop2.7.tgz，并将其解压到/home/spark 目录下（根据实际情况定）。 1#上传 2[root@master software]# rz -y 3#解压 4[ro…
    安全运维
    • 6
    • 0
    aqztaqzt
  • Elasticsearch中 重新索引数据脚本(可用作数据迁移)

    Elasticsearch中 重新索引数据脚本(可用作数据迁移)

    重新索引原理 更改分析器,升级es都需要重新索引数据,所以ES重新索引是需要重视的一个功能. 参考: https://www.daimajiaoliu.com/daima/4ed62ea791003fc (教你如何在 elasticsearch 中重建索引) 重新索引准备 我的是使用hanlp的分析器,自己根据自己所需修改参数. 注: number_of_replicas 设置为0,这会加快重新索…
    安全运维
    • 7
    • 0
    aqztaqzt
  • MySQL主从搭建

    MySQL主从搭建

    1、环境 mysql5.6.37 + centos7.0 64位 2、一主多从 主从复制原理      Mysql主从复制的实现原理如下图所示：   MySQL之间数据复制的基础是二进制日志文件（binary log file）。一台MySQL数据库一旦启用二进制日志后，其作为master，它的数据库中所有操作都会以“事件”的方式记录在二进制日志中，其他数据库作为slave通过一个I/O线程与主服…
    安全运维
    • 9
    • 0
    aqztaqzt
  • ELK(ElasticSearch, Logstash, Kibana)搭建实时日志分析平台

    ELK(ElasticSearch, Logstash, Kibana)搭建实时日志分析平台

    摘要: 前段时间研究的Log4j+Kafka中，有人建议把Kafka收集到的日志存放于ES（ElasticSearch，一款基于Apache Lucene的开源分布式搜索引擎）中便于查找和分析，在研究此方案可行性的时候，我发现ELK（ElasticSearch, Logstash, Kibana）平台恰好可以同时实现日志收集、日志搜索和日志分析的功能，于是又去学习了一番。之后发现如果使用这三者，收…
    安全运维
    • 11
    • 0
    aqztaqzt
  • 搭建DNS 服务器

    搭建DNS 服务器

    安装 环境变量 1OS: centos 6.9 2 安装 Bind 9 1$ yum install -y bind* caching-nameserver* 2 3 安装 Webmin 1$ wget https://jaist.dl.sourceforge.net/project/webadmin/webmin/1.881/webmin-1.881.tar.gz 2$ tar zxf webm…
    安全运维
    • 10
    • 0
    aqztaqzt
  • crontab

    crontab

    最近工作需要使用定时执行脚本，研究了下crontab，如果不用vi编辑，而是使用windows编辑后ftp上传，需要注意crontab的回车换行符，需要vi中手动删掉。以下是crontab的详细用法。 描述 这个 crontab 命令提交、编辑、列出或除去 cron 作业。一个 cron 作业是一个命令，其运行是由 cron 守护进程在规则的调度间隔执行的。要提交一个 cron 作业，指定 cro…
    安全运维
    • 8
    • 0
    aqztaqzt
  • Kafka、RabbitMQ、RocketMQ等 消息中间件 介绍和对比

    Kafka、RabbitMQ、RocketMQ等 消息中间件 介绍和对比

    文章目录 1、前言 2、概念 2.1、MQ简介 2.2、MQ特点 2.2.1、先进先出 2.2.2、发布订阅 2.2.3、持久化 2.2.4、分布式 3、消息中间件性能究竟哪家强? 3.1、Kafka 3.2、RabbitMQ 3.3、RocketMQ 4、测试 4.1、测试目的 4.2、测试场景 4.2.1、Kafka 4.2.2、RocketMQ 4.2.3、RabbitMQ 4.3、测试结论…
    安全运维
    • 4
    • 0
    aqztaqzt
  • 设计模式 之 中介者模式

    设计模式 之 中介者模式

      下载 23种设计模式源码 ： http://download.csdn.net/download/knight_black_bob/8936043   //////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////…
    安全运维
    • 29
    • 0
    aqztaqzt
  • 设计模式之代理模式

    设计模式之代理模式

    设计模式之代理模式 应用场景：为其他对象提供一种代理以控制对这个对象的访问。从结构上来看和 Decorator 模式类似， 但 Proxy 是控制，更像是一种对功能的限制，而 Decorator 是增加职责。 Spring 的 Proxy 模式在 AOP 中有体现，比如 JdkDynamicAopProxy 和 Cglib2AopProxy。 代理实战演示 静态代理 1// 定义需要代理的功能接口…
    安全运维
    • 5
    • 0
    aqztaqzt
  • K-SVD算法

    K-SVD算法

    K-SVD算法的基本思想： Y为训练样本，D为字典，X为稀疏系数。 一般分为 Sparse Coding 和 DictionaryUpdate 两个步骤： 1 ： Sparse Coding ：固定字典 D 通过下面的目标函数采用一种追踪算法找到样本的最佳稀疏矩阵。 2 ： Dictionary Update ：按列更新字典，一句可使 MSE 减少的准则，通过 SVD （奇异值分解）循序的更新每一…
    安全运维
    • 5
    • 0
    aqztaqzt
  • BP神经网络算法

    BP神经网络算法

    BP神经网络算法 本文根据. 大佬博客推导出公式及表达的个人见解 1.1直接调包的过程 matlab的神经网络工具箱功能强大。 1.2强推过程 实验的目的：强推BP神经网络算法，并且增加了噪声数据，增加了误差分析和图形效果，采用数据集来验证效果和预测未来的情况。 1.2.1数据加载和网络节点确定 本人在写python代码时，数据的加载未命名函数，直接以list数组形式来确定1990——2009的数…
    安全运维
    • 8
    • 0
    aqztaqzt
  • pagerank算法

    pagerank算法

    问题背景 搜索引擎根据用户的查询，快速准确地从网络中找到用户最需要的网页。由于“网页数量大”和“网页质量参差不齐”，需要搜索引擎根据查询，对网页排序，根据“用户搜索目的”，将最符合用户需求的网页依次排在最前面。 在pagerank算法之前，搜索引擎主要根据“网页的关键词词频”排序。但该排序没考虑网页质量。网页排序的任务中，最核心的难点在于判别网页质量。在此背景下，借鉴“学术论文的质量判别引用方法”…
    安全运维
    • 15
    • 0
    aqztaqzt
  • Java中NLP的学习

    Java中NLP的学习

    CRF分类器 参考：https://nlp.stanford.edu/nlp/javadoc/javanlp/edu/stanford/nlp/ie/crf/CRFClassifier.html 各种工具包 https://www.cnblogs.com/aeexiaoqiang/p/6531784.html https://nlp.stanford.edu/nlp/javadoc/javanlp…
    安全运维
    • 0
    • 0
    aqztaqzt
  • 加密算法

    加密算法

       加密算法概述 【前言】常见的加密算法可以分成三类，对称加密算法，非对称加密算法和Hash算法 一、非对称 加密算法 非对称加密算法需要两个密钥：公开密钥（publickey）和私有密钥（privatekey）。公开密钥与私有密钥是一对，如果用公开密钥对数据进行加密，只有用对应的私有密钥才能解密，反之亦然。因为加密和解密使用的是两个不同的密钥，所以这种算法叫作非对称加密算法。 非对称加密算法实…
    安全运维
    • 2
    • 0
    aqztaqzt
  • NLP常用工具

    NLP常用工具

    1、统计类工具：可参见【统计学习常用Python扩展包】 2、linux自带工具：可参见【【整理】Linux常用文本处理命令】 3、简繁转换工具：opencc Open Chinese Convert（OpenCC）是一個中文簡繁轉換開源項目，提供高質量的簡繁轉換詞庫和可供調用的函數庫(libopencc)。還提供命令行簡繁轉換工具，人工校對工具，詞典生成程序，以及圖形用戶界面。（https://…
    安全运维
    • 2
    • 0
    aqztaqzt
  • 深度学习caffe数据结构（一）—— 数据结构概述

    深度学习caffe数据结构（一）—— 数据结构概述

            caffe框架中，数据结构主要包括：Blob、Layer、Net、Solver。caffe的所有数据结构都在caffe根目录下的src/caffe/proto/caffe.proto文件中进行了描述。         首先，Blob是caffe中基本的数据结构，如果把caffe比作一栋大楼，那么Blob就是每一块砖。通过Blob这些砖构建成一层一层的楼层Layer，每一层合在一起就…
    安全运维
    • 8
    • 0
    aqztaqzt
  • 深度学习超分辨率重建（二）： TensorFlow——FSRCNN

    深度学习超分辨率重建（二）： TensorFlow——FSRCNN

    基于TensorFlow的代码下载：https://github.com/yifanw90/FSRCNN-TensorFlow 文章链接： (Accelerating the Super-Resolution Convolutional Neural Network , ECCV2016) 环境配置：深度学习（一）：虚拟机Linux系统搭建CPU TensorFlow 基础理论学习方便理解：dee…
    安全运维
    • 39
    • 0
    aqztaqzt
  • [深度学习基础] 3. 前馈神经网络

    [深度学习基础] 3. 前馈神经网络

    多层前馈神经网络 (multilayer feedforward nueral network), 也称为多层感知器 (multilayer perceptrons, MLP), 它利用上一章讨论的线性分类器处理非线性问题. 本章讨论的神经网络就是这种多层前馈神经网络. 在本文, 将讨论为什么要使用神经网络及深度学习, 神经网络的基本架构和学习方法. 本章也是下文深度学习的铺垫. 1 特征/表示学…
    安全运维
    • 0
    • 0
    aqztaqzt
❯

解锁会员权限

开通会员

解锁海量优质VIP资源

立刻开通
个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索

  • 扫码打开当前页

返回顶部