• 欢迎访问VPS岛网站,国外VPS,国内VPS,国外服务器,国内服务器,服务器主机,测评及优惠码,推荐使用最新版火狐浏览器和Chrome浏览器访问本网站 QQ群

标签:大数据

Nginx相关

云计算高端架构师:nginx服务器

云计算高端架构师:nginx服务器
Nginx: 是一个高性能HTTP 和 反向代理 服务器、IMAP、POP3、SMTP 邮件代理服务器。 特点: 高并发响应性能非常好,官方Nginx处理静态文件并发5w/s;负载均衡及反向代理性能非常强;可对后端服务进行健康检查;支持PHP cgi方式和FastCGI方式;可以作为缓存服务器、邮件代理服务器;支持热部署(在线升级)。 部署nginx: yu……继续阅读 »

9个月前 (03-14) 98浏览 0评论0个赞

Apache技术

使用Apache Flume抓取数据(1)

使用Apache Flume抓取数据(1)
使用Apache Flume抓取数据,怎么来抓取呢?不过,在了解这个问题之前,我们必须明确ApacheFlume是什么?一、什么是Apache FlumeApache Flume是用于数据采集的高性能系统 ,名字来源于原始的近乎实时的日志数据采集工具,现在广泛用于任何流事件数据的采集,支持从很多数据源聚合数据到HDFS。最初由Cloudera开发 ,……继续阅读 »

9个月前 (03-03) 89浏览 0评论0个赞

Apache技术

Apache Beam程序向导4

Apache Beam程序向导4
Apache Beam程序向导4今天在集群上实验Beam On Spark的时候,遇到一个坑爹的问题,这个问题总结起来是一个java.lang.NoClassDefFoundError错误,具体错误如下图1所示图1 错误提示该错误提示SparkStreamingContext没有定义,这说明java虚拟机加载进来了SparkStreamingC……继续阅读 »

9个月前 (03-02) 87浏览 0评论0个赞

mysql技术

浅谈MySQL中SQL优化的常用方法

浅谈MySQL中SQL优化的常用方法
1、对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引。 2、应尽量避免在 where 子句中使用!=或<>操作符,否则将引擎放弃使用索引而进行全表扫描。 3、应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索引而进行全表扫描,如: select i……继续阅读 »

9个月前 (02-28) 71浏览 0评论0个赞

mysql技术

深度解析:MySQL加密解密

深度解析:MySQL加密解密
MySQL 数据库内部有多种 加密函数 解密函数被加密的字段的类型需要是 VARBINARY、BLOB 类型 存储AES_ENCRYPT(str,key) : 返回用密钥key对字符串str利用高级加密标准算法加密后的结果,调用AES_ENCRYPT的结果是一个二进制字符串AES_DECRYPT(str,key) : 返回用密钥key对字符串str……继续阅读 »

9个月前 (02-24) 90浏览 0评论0个赞

mysql技术

MySQL环境变量配置

MySQL环境变量配置
1.下载MySQL,下载地址如下http://dev.mysql.com/downloads/installer/2.安装,可能安装版安装的时候会出现各种问题,所以当安装版没救时建议用免安装版,或者直接用免安装版省事。3.免安装版配置(1)打开my-default.ini文件(2)basedir =你的安装目录        datadir ……继续阅读 »

9个月前 (02-22) 88浏览 0评论1个赞

Apache技术

Apache Oozie Installation

Apache Oozie Installation
oozie就是一个workflow协调系统,主要用来管理Hadoop作业(job)。属于web应用程序,由oozie client和oozie server两个组件构成。oozie server运行于java servlet容器(tomcat)中的web程序。由于使用HUE需要oozie的支持,所以先介绍oozie的安装配置,后续增加HUE的安装配置文档。1……继续阅读 »

10个月前 (02-18) 81浏览 0评论0个赞

Apache技术

Apache Tez Installation Guide

Apache Tez Installation Guide
Tez是Apache开源的DAG作业的计算引擎,是为了减小Hive作业的延迟而提出的解决方案,Tez已被Hortonworks用于Hive引擎的优化,经测试,性能提升约100倍。Tez+Hive仍然采用MapReduce计算框架,但对DAG的依赖关系进行了剪裁,并将多个小作业合并成一个大作业,这样不仅作业量减少了,而且写HDFS的次数也会大大减少。Tez具有……继续阅读 »

10个月前 (02-16) 72浏览 0评论0个赞