自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(15)
  • 资源 (6)
  • 论坛 (1)
  • 收藏
  • 关注

原创 solrj

应用场景 当安装部署完solr之后,我们可以通过solrj来连接solr,进行新建,删除索引等等操作,达到全文检索的效果。操作步骤1. Solrj的使用1.1什么是solrj solrj是访问Solr服务的java客户端,提供索引和搜索的请求方法,SolrJ通常在嵌入在业务系统中,通过SolrJ的API接口操作Solr服务,如下图: Solrj和图形界面操作的区别就类似于数据库中你使用j

2017-12-19 09:12:59 266587

原创 solr5.4.0

应用场景 在百度中搜索“阿凡达”会出来一系列资料,有文本,图片,电影,链接等等,这就是一个搜索引擎实现的,当然百度有自己的搜索引擎,我们可以不用自己写一个搜索引擎,有现成的比如sorl,lucene,ElasticSearch等等,这里介绍一些solr。1.概述1.1 Solr 是什么? Solr它是一种开放源码的、基于 Lucene Java 的搜索服务器,易于加入到 Web 应用程序中

2017-12-19 08:45:53 268272

原创 Hadoop笔试

Hadoop笔试题一一、选择题(2分每题,共20分)1.下面哪个程序负责 HDFS 数据存储。 A NameNode B Jobtracker C Datanode D tasktracker 2.HDfS 中的 block 默认保存几份?A 3 份 B 2 份 C 1 份 D 不确定 3.下列哪个程序通常与 NameNode 在一个节点启动? A SecondaryNameNod

2017-12-07 23:11:50 275192

原创 docker命令

应用场景 docker使用的时候,有自己一套专业的命令模式,其中有镜像,容器,仓库等等,其中各种命令用法比较容易混淆,这里粗略的整理一下。1. 镜像: # docker pull 镜像名 (下载镜像) # docker run -t -i 镜像名 /bin/bash (利用镜像创建一个容器,在其中运行bash) # docker images (查看镜像,repositor

2017-12-06 11:42:36 307946 1

原创 shipyard

应用场景 如果服务器上有很多镜像和容器,每次查看通过URL,命令行十分不方便,可以通过安装配置shipyard容器管理工具来统一监控管理。操作步骤1. 安装docker按如下步骤操作: # wget http://mirrors.hustunique.com/epel/6/i386/epel-release-6-8.noarch.rpm # rpm -ivh epel-release-6-

2017-12-06 11:29:45 305902

原创 nginx负载均衡

应用场景当一个应用部署在tomcat后,发现访问量越来越多,服务器完全无法承受住压力,导致系统卡顿延时等,此时需要通过nginx技术将应用压力进行平均分配到其他服务器,将多台服务器一起提供资源,通过nginx来协调资源进行负载均衡。操作步骤1. 目标与准备目标:使用docker部署nginx+tomcat,nginx实现负载均衡。 准备: docker主机,192.168.199.32

2017-12-06 11:19:05 308194

原创 tomcat镜像

应用场景 有时候docker公共镜像库中下载下来的镜像,可能不是自己想要的,没办法,自己也可以制作一个自己想要的镜像,然后发布到公共资源镜像中,也可以保存到私有仓库中,以防后期自己也需要使用。操作步骤 试验环境为:windows7系统,内存8G,固态硬盘120G,硬盘450G,ip为192.168.117.66,在windows7系统上,安装VMware,创建两个虚拟机,安装centos7

2017-12-06 11:06:05 303018

原创 jenkins

应用场景 程序员开发应用,开发后需要提交svn,然后从svn拉取代码,进行构建,发布到tomcat中,发布,然后看呈现效果,这样的工作是频繁反复的在进行的,浪费了程序员的大量时间,那么能不能把这些工作自动化呢,只需要程序员更新代码到svn,然后自动的构建,发布,呈现效果,当然是可以的,通过jenkins和docker来实现。操作步骤1. 概述 开发者的工作大概流程是,eclipse编写代码

2017-12-06 09:08:46 342552 14

原创 docker私有仓库

应用场景 docker有公共仓库,相当于在公共仓库中存在着大量的镜像资源,但是如果本地要使用这些镜像,需要手动pull到本地,如果下次再用还需要pull,并且docker的公共仓库是在国外的,这样频繁的pull一个镜像很耗时,而且网路受限,经常容易断掉,很麻烦。所以有两个应对策略,第一个就是使用daocloud加速器,第二个就是本地搭建私有仓库,当从公共仓库中pull下来的镜像,存到本地私有仓库

2017-12-06 09:05:33 312777

原创 docker

应用场景 给你一台笔记本,笔记本的系统是windows的,如果想使用linux系统,那么得在windows上安装虚拟机,然后安装linux系统,一般一台8G内存的笔记本,可以建并启动6-7个1G内存的linux虚拟机,如果再创建并启动虚拟机那么电脑将无法承受,如果用了docker技术,那么就可以建成千上万个docker容器,一个docker容器就相当于一个linux虚拟机,它可以将计算机资源利用

2017-12-05 17:36:29 313814

原创 maven

应用场景 在开发程序过程中,windows端可能需要新建maven项目,通过pom来管理jar包,那么就需要在windows端安装maven工具。操作步骤1. maven下载地址 这里写链接内容maven工具包下载地址2. maven安装 将maven压缩包下载后,解压缩到本地,当前解压到D:\maven目录下 解压完maven后,需要在“环境变量”中,配置M2_HOME,

2017-12-05 15:50:58 313425

原创 SmartBI

应用场景当杂乱无章的数据,经过数据清洗后,得到了想用的数据,但是查看这些数据通过数据库只能看到数据本身,无法看到其中的规律,可以通过数据分析展示工具,图形化展示数据,使数据更形象化的展现在用户面前,更容易看出规律,得出结论,还可以监控实时数据,实时刷新,比如双十一大屏等等。今天就来介绍使用收费数据分析展现工具SmartBI,注意如果要投入生产,是需要购买的。操作步骤1. 概述 SmartBI是广

2017-12-05 15:23:27 314904 1

原创 SmartMining

应用场景 当遇到数据分类,聚类,预测等场景问题,普通的SQL方法无法解决,需要借助算法这件武器,比如聚类算法,分类算法,预测算法等等,但是手动去研究一个算法比较吃力,有没有那种工具,直接拖拉拽的方式,直接将算法利用起来呢?比如免费版的SPSS,SAS等,今天介绍一款收费版的SmartbiMining,仅仅试用,如果真要生产使用,是要购买的,量力而行!操作步骤1. 概述产品下载测试使用地址

2017-12-05 10:32:14 313408

原创 DataV

应用场景 当我们把清理好的数据,放到了数据库中,浏览数据的时候,直接访问数据库,或者通过JDBC连接代码返回数据,很不方便,我们需要通过报表的形式,通过工具连接数据库,然后进行适当的配置,图形化展示数据,使数据清晰明了的展示在面前,更加方便领导查阅。比如天猫,京东双十一的大屏展示,比如公司年度汇总报表等,都需要使用这类工具,今天介绍阿里的一款产品DataV!操作使用1. 访问地址 阿里云D

2017-12-01 14:51:06 327308 1

原创 Impala

应用场景 在使用Hive的过程中,编写了HQL语句,发现HQL执行过程是非常慢的,因为hive采用的是把HQL转化成hadoop的MapReduce任务,然后编译,打包成jar包,分发到各个server上去执行,这个过程会很慢很慢!而impala也可以执行SQL,但是比Hive快很多,而Impala根本不用Hadoop的Mapreduce机制,直接调用HDFS的API获取文件,在内存中快速计算!

2017-12-01 10:24:22 319771

livy-0.5.0-incubating-bin.zip

livy安装包,亲测可用,通过livy来发任务到spark进行执行,更加方便了对spark的操作

2019-02-23

flume+kafka+sparkstreaming

通过flume监控文件,让kafka消费flume数据,再将sparkstreaming连接kafka作为消费者进行数据处理,文档整理实现

2019-02-23

livy-rsc-0.5.0-incubating.jar

livy安装过程需要的包,进行替换livy部署包中jars中的对应的jar包

2019-02-23

presto集成到ambari

presto集成到hdp的操作使用文档,详细描述操作过程,亲测可用

2019-02-23

presto-cli-0.191-executable.jar

presto集成到hdp需要下载的包,亲测,已集成成功,并正常使用。

2019-02-23

phoenix连接hbase驱动包

phoenix连接hbase驱动包,小文件,供大家下载,实现sql操作hbase,简单方便快捷

2018-07-31

徐茂盛的留言板

发表于 2020-01-02 最后回复 2020-01-02

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除