weixin_44527643的博客

原创 HIVE总结

namenode: 管理元数据，保证客户端可以拿到一个完整的文件。3. 与namenode和datanode通讯。2. 切分文件成block块（128M）snn: 辅助namenode。1. 不是顶替namenode。2. 与datanode通讯。datanode: 存储数据。1. 与client通讯。client： 客户端。1. 接收客户端的请求。2. 辅助管理元数据。

原创 大数据HIVE

可以让用户创建一个外部表，在建表的同时指定一个指向实际数据的路径（LOCATION）.Hive 创建内部表时，会将数据移动到数据仓库指向的路径；在删除表的时候，内部表的元数据和数据会被一起删除,而外部表只删除元数据,不删除数据.指定加载数据路径(指定在hdfs上的位置).针对的extetnal外部表，要指定存储路径，不指定也没事，默认路径。在大数据中，最常用的一种思想就是分治，分区表实际就是对应hdfs文件系统上的的独立的文件夹，该文件夹下是 该分区所有数据文件。如果相同名字的表已经存在，则抛出异常；

原创 大数据hdfs

广义： 指的是Hadoop的生态圈，有很多的大数据组件构建而成，包括：Linux，zookeeper，Hadoop，hive，hbase，redis，elk,kafka，java,scala,python,impala,kudu,spark,flink。狭义： 指的就是Hadoop这个组件里面的3个组件，MapReduce，hdfs，yarn。resourcemanager: 接收客户端的任务，分配任务，管理资源。2.x: 更加稳定，因为MapReduce的压力减轻了。数据存储问题，还会自动备份。

原创 centos7.6 部署nuxt项目

npm run build复制这四个文件到nginx/html/项目名称 下安装nodejs,并进入目录下载依赖npm install启动与访问项目npm run start开启另一个窗口使用curl http://localhost:3000如果有html代码返回则无问题ctrl+c结束项目运行后台启动项目nohup npm run start &配置nginx代理server { # 博客门户客户端listen 80; # 端口号server_name blo

原创 Centos7.6下源码安装nginx-1.20.1

Centos7.6下源码安装nginx-1.20.1下载安装包并上传至/usr/localhttp://nginx.org/en/download.html解压文件tar -zxvf nginx-1.20.1.tar.gz配置cd /usr/local/nginx-1.20.1/./configure --prefix=/usr/local/nginx --with-stream --with-http_ssl_module --with-stream_ssl_preread_modu

原创 Linux centos8 安装 redis-6.2.0 并设置开机启动

一、下载Redis-6.2.0https://download.redis.io/releases/redis-6.2.0.tar.gz二、把redis-6.2.0.tar.gz 移动到/usr/local/下使用以下命令解压tar tar -zxvf redis-6.2.0三、解压完毕后进入redis-6.2.0目录输入make四、开启守护进程模式通过 /daemonize 查找到属性，默认是no，更改为yes即可。 (通过/关键字查找出现多个结果则使用 n字符切换到下一个即可，查

原创 failed to push some refs to

原创 获取MD5，发布版SHA1 以及处理'keytool' 不是内部或外部命令，也不是可运行的程序 或批处理文件。

一、二、一直按照要求填写、最后会生成一个keystore类型的文件三、win+r 输入 cmd 进入命令行输入：keytool -list -v -keystore然后把生成的keystore 拖进命令行窗口完整命令效果图...

原创 求助！Android Build failed with an exception.

**FAILURE: Build failed with an exception.Where:Initialization script ‘C:\Users\雎山月\AppData\Local\Temp\Demo_main__.gradle’ line: 20What went wrong:A problem occurred configuring project ‘:app’...

原创 ViewPage+tabWidget

xml<TabHost xmlns:android="http://schemas.android.com/apk/res/android" xmlns:app="http://schemas.android.com/apk/res-auto" xmlns:tools="http://schemas.android.com/tools" android:layou...

原创 日期选择器，单选框，多选框（自定义title）对话框

**日期选择器，单选框，多选框（自定义title）对话框**单选、多选对话框：可通过调用setSingleChoiceItems()或setMultiChoiceItems()设置对话框。final String items[] = {“男”, “女”, “未知性别”, “其他”};final AlertDialog.Builder radioBuilder = new AlertD...

原创 NormalDiglog，DiyDiglog，PopupWindow

NormalDiglog，DiyDiglog，PopupWindowDemo public class MainActivity extends AppCompatActivity { @Override protected void onCreate(Bundle savedInstanceState) { super.onCreate(savedInst...