-
深度学习caffe数据结构（一）—— 数据结构概述
caffe框架中，数据结构主要包括：Blob、Layer、Net、Solver。caffe的所有数据结构都在caffe根目录下的src/caffe/proto/caffe.proto文件中进行了描述。 首先，Blob是caffe中基本的数据结构，如果把caffe比作一栋大楼，那么Blob就是每一块砖。通过Blob这些砖构建成一层一层的楼层Layer，每一层合在一起就…- 8
- 0
-
深度学习超分辨率重建（二）： TensorFlow——FSRCNN
基于TensorFlow的代码下载：https://github.com/yifanw90/FSRCNN-TensorFlow 文章链接： (Accelerating the Super-Resolution Convolutional Neural Network , ECCV2016) 环境配置：深度学习（一）：虚拟机Linux系统搭建CPU TensorFlow 基础理论学习方便理解：dee…- 39
- 0
-
[深度学习基础] 3. 前馈神经网络
多层前馈神经网络 (multilayer feedforward nueral network), 也称为多层感知器 (multilayer perceptrons, MLP), 它利用上一章讨论的线性分类器处理非线性问题. 本章讨论的神经网络就是这种多层前馈神经网络. 在本文, 将讨论为什么要使用神经网络及深度学习, 神经网络的基本架构和学习方法. 本章也是下文深度学习的铺垫. 1 特征/表示学…- 0
- 0
-
深度学习中文NLP任务实战（一）：中文词向量的训练
开篇 最近在做相似度检测的项目，由于是公司的实战项目，所以处理的都是中文，自己也算个小白，所以写一个入门的教程吧。这是第一篇，中文词向量的训练。 gensim训练词向量 首先我们为什么要自己训练词向量呢？为什么不直接使用别人训练好的词向量呢。原因也很简单，当我们处理特定领域的数据的时候，很多领域词在其他公共语料里面是没有的，这就必须要求我们能够训练自己的词向量，来处理特定领域的数据。 数据来源于蚂…- 31
- 0
-
深度学习中的优化算法
写在前面 深度学习在很多情况下都涉及优化。 寻找神经网络上的一组参数$\theta$，它能显著地降低代价函数$J(\theta)$，该代价函数通常包括整个训练集上的性能评估和额外的正则化项。 机器学习是一个高度依赖经验的过程，伴随着大量迭代的过程，你需要训练诸多模型，才能找到合适的那一个，所以，优化算法能够帮助你快速训练模型。 深度学习没有在大数据领域发挥最大的效果，我们可以利用一个巨大的数据集来…- 4
- 0
-
深度学习之卷积神经网络
深度学习之卷积神经网络 文章目录 深度学习之卷积神经网络 传统神经网络存在的问题 卷积神经网络构成 2.1 输入层 2.2 隐藏层 2.2.1 卷积层 2.2.2 池化层 padding 2.2.3 全连接层（可无） 2.3 输出层 CNN用于MNIST数据及分类 1. 传统神经网络存在的问题 权值太多，计算量太大 权值太多，需要大量样本进行训练 假设一个传统的神经网络有一个输入层，一个隐藏层层，…- 5
- 0
-
kafka原理和实践（六）总结升华
目录 总结篇 1.官方介绍 2.特点 3.Kafka的设计 4.Kayka的应用场景 5.总结 正文 系列目录 kafka原理和实践（一）原理：10分钟入门 kafka原理和实践（二）spring-kafka简单实践 kafka原理和实践（三）spring-kafka生产者源码 kafka原理和实践（四）spring-kafka消费者源码 kafka原理和实践（五）spring-kafka配置…- 1
- 0
-
RabbitMQ VS Apache Kafka （七）—— RabbitMQ消息路由原语与路由保证
路由保证 RabbitMQ和Kafka都提供给了持续的消息路由保证，两者都提供了最多一次和最少一次的路由保证，此外，Kafka还提供了有限应用场景下的仅一次可靠性路由保证。首先，我们看下这三种路由保证的具体含义： 最多一次：一个消息最多被路由不超过一次，消息可能丢失。 最少一次：消息永远不会丢失，但同一个消息可能会被路由到一个消费者多次。 仅一次：消息路由的理想模式，一个消息只被路由一次。 说消息…- 1
- 0
-
kafka管理监控插件
kafka 监控插件 1.KafkaOffsetMonitor 项目地址： https://github.com/quantifind/KafkaOffsetMonitor KafkaOffsetMonitor是用来实时监控Kafka集群的consumers以及它们在partition中的offset(偏移量)。 You can see the current consumer groups, f…- 2
- 0
-
rocketMq和kafka的架构区别
概述 其实一直想写一篇rocketMq和kafka在架构设计上的差别，但是一直有个问题没搞明白所以迟迟没动手，今天无意中听人点播了一下似乎明白了这个问题，所以就有了这篇对比。 这篇博文主要讲清楚kafka和rocketMq的两个不同点，1、rocketMq的namesvr和kafka的zookeeper对比；2、kafka为什么比rocketMq有更大的吞吐量。如果能够讲清楚上面两…- 0
- 0
-
基于Hadoop生态圈的数据仓库实践——进阶技术（十）
十、杂项维度 本节讨论杂项维度。简单地说，杂项维度就是一种包含的数据具有很少可能值的维度。例如销售订单，它可能有很多离散数据（yes-no这种类型的值），如 verification_ind（如果订单已经被审核，值为yes）credit_check_flag（表示此订单的客户信用状态是否已经检查）new_customer_ind（如果这是新客户的首个订单，值为yes）web_order_flag（…- 1
- 0
-
基于Hadoop生态圈的数据仓库实践 —— 进阶技术（十二）
十二、间接数据源 本节讨论如何处理间接数据源。间接数据源与维度表具有不同的粒度，因此不能直接装载进数据仓库。在这里通过修改进阶技术（八）——“多路径和参差不齐的层次”里的促销源数据说明怎样处理间接数据源。 1CAMPAIGN SESSION,MONTH,YEAR 22016 First Campaign,1,2016 32016 First Campaign,2,2016 42016 First …- 3
- 0
-
Hadoop实战（7）_Apache Hadoop安装和配置Hue
系列目录： Hadoop实战（1）_阿里云搭建Hadoop2.x的伪分布式环境 Hadoop实战（2）_虚拟机搭建Hadoop的全分布模式 Hadoop实战（3）_虚拟机搭建CDH的全分布模式 Hadoop实战（4）_Hadoop的集群管理和资源分配 Hadoop实战（5）_Hadoop的运维经验 Hadoop实战（6）_搭建Apache Hadoop的Eclipse开发环境 配置Hue的主要步骤…- 18
- 0
-
Hadoop项目实战－用户行为分析之应用概述（一）
1.概述 本课程的视频教程地址：《 Hadoop 回顾》 好的，下面就开始本篇教程的内容分享，本篇教程我为大家介绍我们要做一个什么样的Hadoop项目，并且对Hadoop项目的基本特点和其中的难点做有针对性的剖析，完成项目环境的基本配置，以及项目工程和Hadoop插件的相关准备等工作。 本课程主要包含以下课时，其内容如下图所示： 本节为大家分享的是第一节——《 Hadoop 回顾》，下面开始今天的…- 6
- 0
-
Hadoop实战（4）_Hadoop的集群管理和资源分配
系列目录： Hadoop实战（1）_阿里云搭建Hadoop2.x的伪分布式环境 Hadoop实战（2）_虚拟机搭建Hadoop的全分布模式 Hadoop实战（3）_虚拟机搭建CDH的全分布模式 DataNode数据目录 如果有多个挂载点，可以有多个DataNode数据目录。 目前服务器硬件，标准小型机配置：32核、64G(128G)、64T(4T*16盘SAS盘)。通常为了提升磁盘吞吐量，每个盘单…- 12
- 0
-
Hadoop HDFS负载均衡
Hadoop HDFS负载均衡 转载请注明出处：http://www.cnblogs.com/BYRans/ Hadoop HDFS Hadoop 分布式文件系统（Hadoop Distributed File System），简称 HDFS，被设计成适合运行在通用硬件上的分布式文件系统。它和现有的分布式文件系统有很多的共同点。HDFS 是一个高容错性的文件系统，提供高吞吐量的数据访问，非常适合大…- 2
- 0
-
Docker容器跨主机通信之：OVS+GRE
一、概述 由于docker自身还未支持跨主机容器通信，需要借助docker网络开源解决方案 OVS OpenVSwich即开放式虚拟交换机实现，简称OVS，OVS在云计算领域应用广泛，值得我们去学习使用。 OpenVSwich OpenVSwich是一种开源软件，通过软件的方式实现二层交换机功能，专门管理多租赁云计算网络环境，提供虚拟网络中的访问策略、网络隔离、流量监控等。 既然是虚拟交换机，自然…- 20
- 0
-
Docker的4种网络模式
我们在使用docker run创建Docker容器时，可以用--net选项指定容器的网络模式，Docker有以下4种网络模式： · host模式，使用--net=host指定。 · container模式，使用--net=container:NAME_or_ID指定。 · none模式，使用--net=none指定。 · bridge模式，使用--net=bridge指定，默认设置。 下面分别介绍…- 7
- 0
-
Shell脚本控制tomcat的docker容器的创建,删除,启动,关闭
说明: 多个tomcat容器,同时启动和关闭,每个docker容器的网络管理使用pipework控制.此脚本用来管理多个容器的创建,删除,启动和关闭.使用者可自行修改. 1#!/bin/bash 2# chkconfig:2345 11 90 3# description: Docker $Name 4BEGIN=1 5END=4 6Name=api 7Host="$Name"…- 10
- 0
-
Docker Swarm集群
一、Swarm 关键概念 1、Swarm 集群的管理和编排是使用嵌入到 docker 引擎的 SwarmKit，可以在 docker 初始化时启动 swarm 模式或者加入已存在的 swarm 2、Node 一个节点(node)是已加入到 swarm 的 Docker 引擎的实例 当部署应用到集群，你将会提交服务定义到管理节点，接着 Manager管理节点调度任务到 worker 节点，manag…- 3
- 0
-
Kafka、RabbitMQ、RocketMQ等 消息中间件 介绍和对比
文章目录 1、前言 2、概念 2.1、MQ简介 2.2、MQ特点 2.2.1、先进先出 2.2.2、发布订阅 2.2.3、持久化 2.2.4、分布式 3、消息中间件性能究竟哪家强? 3.1、Kafka 3.2、RabbitMQ 3.3、RocketMQ 4、测试 4.1、测试目的 4.2、测试场景 4.2.1、Kafka 4.2.2、RocketMQ 4.2.3、RabbitMQ 4.3、测试结论…- 4
- 0
-
￥优惠劵使用时效：无法使用使用时效：
之前
使用时效：永久有效优惠劵ID：×