【干货】Apache Hive 2.1.1 安装配置超详细过程,配置hive、beeline、hwi、HCatalog、WebHCat等组件 - 雪饼的个人空间 - 开源中国

    在Docker环境成功搭建了Apache Hadoop 2.8 分布式集群,并实现了NameNode HA、ResourceManager HA之后(详见我的另一篇博文:),接下来将搭建最新稳定版的Apache Hive 2.1.1,方便日常在自己电脑上测试hive配置和作业,同样的配置也可以应用于服务器上。以下是Apache Hive 2.1.1的安装配置详细过程1、阅读Apac...
阅读全文

HBase 1.2.6 完全分布式集群安装部署详细过程 - 雪饼的个人空间 - 开源中国

Apache HBase 是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,是NoSQL数据库,基于Google Bigtable思想的开源实现,可在廉价的PC Server上搭建大规模结构化存储集群,利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase海量数据,使用Zookeeper协调服务器集群。Apache HBase官网有。Apa...
阅读全文

HBase 1.2.6 完全分布式集群安装部署详细过程 - 雪饼的个人空间 - 开源中国

Apache HBase 是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,是NoSQL数据库,基于Google Bigtable思想的开源实现,可在廉价的PC Server上搭建大规模结构化存储集群,利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase海量数据,使用Zookeeper协调服务器集群。Apache HBase官网有。Apa...
阅读全文

Druid通过Kafka加载数据 - 今天戴不戴眼镜呢的个人空间 - 开源中国

    Druid如果需要通过Kafka加载实时数据并进行OLAP,需要下载Druid的另一个组建,也就是tranquilitydistribution,下载地址:    tranquilitydistribution提供了Server和Kafka两种通过流来加载数据方式,由于业务环境的因素,对于Server的方式没有做什么研究,感兴趣的伙伴可以前往Druid的官网进行围观。接下来,详细说...
阅读全文

CentOS7上ElasticSearch安装填坑记 - 简书

Apple 注: 本文原载于 ! 下载elastic search 5.3.0```wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch5.3.0.tar.gzmv elasticsearch5.3.0.tar.gz /optcd /opttar xzvf elasticse...
阅读全文

利用ELK搭建Docker容器化应用日志中心 - hansonwang的个人空间 - 开源中国

注: 本文首发于 My 公众号 CodeSheep ,可 长按 或 扫描 下面的 小心心 来订阅 ↓ ↓ ↓ 概述应用一旦容器化以后,需要考虑的就是如何采集位于Docker容器中的应用程序的打印日志供运维分析。典型的比如 收集。本文即将阐述如何利用ELK日志中心来收集容器化应用程序所产生的日志,并且可以用可视化的方式对日志进行查询与分析,其架构如下图所示:...
阅读全文

在浏览器中进行深度学习:TensorFlow.js (二)第一个模型,线性回归 - naughty的个人页面 - 开源中国

笔者在上中介绍了TensorFlow.js中的基本概念,以及机器学习的数学基础,线性代数的基本知识。在这一遍文章里,我们来看一看如何利用TensorFlow.js来构建数学模型,以及进行学习的基本过程。学习的过程基本如下:1. 准备训练数据2. 构建一个模型3. 利用训练数据和模型,进行迭代的学习4. 模型训练完毕,用这个模型对新的数据进行预测(这里我们先略过对模型的验证...
阅读全文

在浏览器中进行深度学习:TensorFlow.js (三)更多的基本模型 - naughty的个人页面 - 开源中国

在中,我们介绍了如果实现一个最简单的线性回归的模型,今天我们来看一下,如何利用同样的思路实现更多的模型。 逻辑回归逻辑回归并非只能实现二分类,我们下面就看一个利用逻辑回归()实现多分类的例子。这个是训练数据:这个是分类的结果。我们可以看到对某些点,蓝色和橙色,分类效果比较好;而对于绿色和红色的点,分类的结果不是很理想。在这里:```function logis...
阅读全文

ElasticSearch笔记系列(8)——简单查询、条件查询、聚合查询 - HappyBKs的Research Center - 开源中国

ES的查询方式可以分为三类:简单查询条件查询聚合查询数据准备====我们先按照前几篇介绍的插入文档的方法准备一些实验数据,然后再来演示如何实现各类查询。我们在我们之前创建的rent索引的community类型下面加入如下文档信息。回忆一下:当时创建的索引及类型如下:```{ "settings":{ "number_of_shards":3, "n...
阅读全文

ElasticSearch5.4.3离线搭建 - AmCoder - 开源中国

1、ElasticSearch简介=================ElasticSearch 是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch 是用Java开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用...
阅读全文