
大数据
文章平均质量分 62
全栈
从事软件开发工作多年,拥有较为丰富的开发经验,主导多个大型项目的研发工作,丰富的项目经验。
设计软件架构和撰写软件方案等。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
为什么es集群至少需要三个节点
elasticsearch集群graph LR; A(Master Node) --- B(Data Node); A --- C(Data Node); B --- C;Master: 在Elasticsearch中Master仅仅负责维护集群的状态创建或删除索引 跟踪哪些节点是集群的一部分 决定将哪些碎片分配给哪个节点 等集群范围的操作上面的一些集群信息, 是由Master节点进行维护, 但是 Master也会把节点信息, 同步给其他节点, 但是只有m原创 2021-01-13 09:05:43 · 8323 阅读 · 0 评论 -
sqlserver 通过触发器 自动生成报表 数据表 每小时自动生成报表
Create TRIGGER TRIGGER_AUTOCREATEREPORT on [sensor] after updateas begin truncate table test1_report insert into test1_report select MAX(CO2) max_CO2,MAX(CH4) max_CH4, MAX(temperature) max_temperature, MAX(humidity) max_humidity, date.原创 2020-07-15 10:47:58 · 1122 阅读 · 0 评论 -
SQL 大数据查询如何进行优化?
1. 对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索 来看一个Sql: 首先考虑下,如果这个表有100条数据,200条,2万。 这样也许没有问题。但是如果 20万,200万,两千万那?select * from userInfo; 2. 应尽量避免在 where 子句中对字段进行 null 值判断...原创 2020-03-06 00:21:09 · 479 阅读 · 0 评论 -
虚拟机连不上外网终极解决方案 百分百可以上网
废话不多说直接上教程: 第一步设置虚拟机的网络段:我这里使用的网络段为192.1681.1段 一般局域网段第一步 虚拟机-》编辑-》虚拟机网络编辑器 (有人给我说这个找不到。。。不好意思。。下面的不用看了) 选择VMnet8 NAT模式 点击右下角更改设置 看图 点击黄色箭头 NAT设置 弹出右侧的NAT设置栏 填写网关IP段(注意这里的192.168.1.2 这是给...原创 2019-01-06 13:28:35 · 1806 阅读 · 5 评论 -
一键批量下载皮皮虾视频
最近有朋友问能不能批量下皮皮虾的视频 搞了搞可以了 一键批量下载皮皮虾视频 Vxin: hcyvip1原创 2019-02-13 11:22:48 · 2329 阅读 · 5 评论 -
大数据菜鸟实战一:使用flume收集数据到KafKa
最近在学习大数据相关的知识,实在记性不好了。都说好记性不如烂笔头这是真的啊!!!!1. 安装flume ,kafka这里不多说,主要演示下怎么实现使用flume收集文件到KafKa.2.进入到flume 下的Conf下编写配置文件:hcytest1.properties 文件内容如下:LogAgent.sources = mysourceLogAgent.channe...原创 2019-08-05 22:05:28 · 918 阅读 · 0 评论 -
KafKa安装和启动
环境配置Java: JDK 1.8(推荐)或者JDK 1.7(jdk-7u51或者更新版本)单机版下载Kafka安装文件kafka_2.10-0.10.0.1.tgzKafka版本:kafka_2.10-0.10.0.1地址:百度网盘或者Kafka官网(https://www.apache.org/dyn/closer.cgi?path=/kafka/0.10.0.1/...原创 2019-08-08 14:19:59 · 740 阅读 · 0 评论 -
codis redis集群 搭建
codis redis集群github开源地址Codis官方开源地址Codis官方中文文档准备工作下载Codis 最新安装包 codis3.2.2-go1.9.2-linux.tar.gz下载组件Zookeeper 最新安装包 zookeeper-3.4.9.tar.gz下载 Java JDK jdk-8u111-linux-x64.tar.gz1.安装Java ...原创 2019-08-09 14:23:35 · 512 阅读 · 0 评论 -
Hbase创建表。查询表。Java API 实现
需求:直接上代码:package hbase_test;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.*;import org.apache.hadoop.hbase.client.*;import org.apache.hadoop.hbase.util.Byte...原创 2019-08-14 23:28:05 · 3388 阅读 · 0 评论