- 博客(28)
- 收藏
- 关注
RSS订阅转载 存储过程语法
存储过程：https://blog.csdn.net/weixin_33709364/article/details/92417839
2021-01-07 13:04:23
114
转载 GL-总账
EBS总账(GL)模块常用表select * from gl_sets_of_books 总帐select * from gl_code_combinations gcc wheregcc.summary_flag=‘Y’ 科目组合select * from gl_balances 科目余额select * from gl_je_batches 凭证批select * from gl_je_headers 凭证头select * from gl_je_lines 凭证行select *
2020-12-08 10:09:52
559
原创 http 转译
:替换为%3A+URL 中+号表示空格 %2B空格 URL中的空格可以用+号或者编码 %20/ 分隔目录和子目录 %2F? 分隔实际的 URL 和参数 %3F% 指定特殊字符 %25#表示书签 %23& URL 中指定的参数间的分隔符 %26= URL 中指定参数的值 %3D...
2020-10-14 16:56:18
503
转载 docker命令
docker 的导入与导出参考地址：https://blog.51cto.com/13520761/24760271）导出容器 [root@localhost ~]# docker export d9d6240dffe1 > /tmp/ubuntu.tar2）导入容器快照（从快照文件中导入为镜像，以下实例将快照文件ubuntu.tar导入到镜像test/ubuntu:v1） [root@localhost ~]# docker import /tmp/ubuntu.tar te
2020-10-10 10:54:37
69
原创 springboot整合elasticsearch启动时报错
先贴下报错信息***************************APPLICATION FAILED TO START***************************Description:An attempt was made to call a method that does not exist. The attempt was made from the following location: org.springframework.boot.autoconfigu
2020-05-27 10:48:40
799
原创 SpringBoot中Cache缓存的使用
今天学习了一个项目的caheManage+spring data redis ,太棒了！SpringBoot中Cache缓存的使用：https://blog.csdn.net/weixin_36279318/article/details/82820880
2020-05-03 16:24:36
163
转载 Redis常用命令
一、基本操作命令redis默认为 16个库 默认自动使用 0号库1. 检测Redis服务运行是否正常redis >ping #返回 PONG，表示redis服务运行正常2.查看当前数据库中 key的数目：dbsize3. 切换库命令：redis> select dbNum #例如：切换到5号数据库 则输入 select 54.删除当前库的数据：flushdb。...
2020-04-24 09:39:45
231
转载 Git命令
查看、添加、提交、删除、找回，重置修改文件git help <command> # 显示command的help git show # 显示某次提交的内容 git show $id git co -- <file> # 抛弃工作区修改 git co . # 抛弃工作区修改 git add <file> # 将工作文件修改提交到本地暂存区 g...
2020-04-23 13:33:33
102
原创 zookeeper管理kafka中offset
之前参考过一篇论文，忘记出处了，有作者看到，请联系我import com.cpic.spark.KafkaPropertiesimport org.apache.curator.framework.CuratorFrameworkFactoryimport org.apache.curator.retry.ExponentialBackoffRetryimport org.apache.k...
2020-04-20 09:53:27
1174
转载 mybatis设置
<settings> <setting name="cacheEnabled" value="true"/> <setting name="lazyLoadingEnabled" value="true"/> <setting name="multipleResultSetsEnabled" value=...
2020-04-16 14:28:45
170
原创 Zookeeper 节点的简单练习
1.启动zkServer.shsh zkServer.sh2.启动zkCli.sh3.创建节点传建节点命令：create -s -e path data-s 有序节点 ~~~~~~~~~~~~~~~~~~ 对应 一般节点-e 临时节点 退出连接后就会消失 ~~ 对应 持久化节点4.查看数据5.查看节点信息...
2020-04-14 15:06:50
97
转载 @Transient
在实际开发过程中，我们常常会遇到这样的问题，这个类的有些属性需要序列化，而其他属性不需要被序列化，打个比方，如果一个用户有一些敏感信息（如密码，银行卡号等），为了安全起见，不希望在网络操作（主要涉及到序列化操作，本地序列化缓存也适用）中被传输，这些信息对应的变量就可以加上transient关键字。换句话说，这个字段的生命周期仅存于调用者的内存中而不会写到磁盘里持久化。transient使用小结...
2020-04-11 22:32:09
95
原创 Scala语言的简单练习
巩固下基础，练习下mapforeachzippartitionfindflatmap ： map后将结构展开flatten ：将结构展开object ScDemo3App { def main(args: Array[String]): Unit = { val list = List(1,2,3,4,5,6,7,8,9)// list.map(x =&...
2020-04-11 14:23:22
272
转载 Centos7开机之后连不上网ens33mtu 1500 qdisc noop state DOWN group default qlen 1000
解决、先停止网卡，设置disable，然后启动，发现网卡启动了[root@es1 es]# systemctl stop NetworkManager[root@es1 es]# systemctl disable NetworkManagerRemoved symlink /etc/systemd/system/multi-user.target.wants/NetworkManager....
2020-04-10 09:33:31
1513
转载 Cmder--Windows系统神器
参考文章：https://www.jianshu.com/p/5b7c985240a7贴下快捷键Tab 自动路径补全Ctrl+T 建立新页签Ctrl+W 关闭页签Ctrl+Tab 切换页签Alt+F4 关闭所有页签Alt+Shift+1 开启cmd.exeAlt+Shift+2 开启powershell.exeAlt+Shift+3 开启powe...
2020-04-04 14:36:05
265
原创 Spark测试代码时，去掉无用的日志
废话不多说import org.apache.log4j.{Level, Logger}import org.apache.spark.internal.Loggingobject SomeTest extends App with Logging { Logger.getRootLogger.setLevel(Level.WARN) }继承Logging这样打印的就是我...
2020-03-31 17:07:10
707
转载 Scala中Option/Some/None
https://www.jianshu.com/p/95896d06a94d为了让所有东西都是对象的目标更加一致，也为了遵循函数式编程的习惯，Scala鼓励你在变量和函数返回值可能不会引用任何值的时候使用Option类型。在没有值的时候，使用None，这是Option的一个子类。如果有值可以引用，就使用Some来包含这个值。Some也是Option的子类。def showCapital(x: ...
2020-03-31 16:41:23
188
原创 YARN的执行流程概述
流程：1.ResourceManager接收Client的执行请求，并为此请求在指定的NodeManager上分配一个Container，运行ApplicationMaster2.AplicationMaster再向ResourceManager申请资源，ResourceManager返回资源3.ApplicationManager在其他的NodeManger上执行task，并对其进行监控...
2020-03-29 15:37:17
261
原创 为什么要使用HIVE
记录一下1.简单、容易上手（提供了类似SQL查询语言HQL）2.为超大数据集设计的计算/存储扩展能力（MR计算，HDFS存储），（ps:这部分处理的速度较慢)3.统一的元数据管理（可与Presto/Impala/SparkSQL（这三个SQL-on-Hadoop）等共享数据）最重要的是第三条，元数据中包括表的字段，类型、分区、等等...
2020-03-29 15:19:06
249
原创 HBase安装概述
1.修改conf/hbase-env.sh# export JAVA_HOME=/usr/java/jdk1.6.0/export JAVA_HOME=/root/hadoop/app/jdk1.8.0_241/# Tell HBase whether it should manage it's own instance of Zookeeper or not. export HBASE...
2020-03-29 09:19:36
116
原创 虚拟机hadoop安装配置概述
hadoop1.修改配置文件/etc/hadoop 下hadoop.env 文件修改jdk# The java implementation to use.export JAVA_HOME=/root/hadoop/app/jdk1.8.0_241core-site.xml<configuration> <property> <name&...
2020-03-28 17:43:54
126
原创 java调用虚拟机中集群的kafka遇到的一些问题
说下我遇到的一个问题，在虚拟机里使用kafka-console-consumer.sh 和 kafka-console-producer.sh 都没有问题。然后在idea中写了一个demo 消费的信息总是没有。原因是：在server.properties 中listeners=PLAINTEXT://hadoop001:9092这里用的是hadoop001，linux的机器名将这里的h...
2020-03-28 15:57:01
140
原创 Flume启动命令
方便日常查询，先记录：bin/flume-ng agent \--conf ./conf/ \-f conf/file_memory_avro.conf \-Dflume.root.logger=DEBUG,console \-n agent1-Dflume.root.logger=DEBUG,console 是将日志打印到控制台上，方便查看，也可以配置日志的路径...
2020-03-26 17:04:04
677
转载 Kafka常用命令
方便日常使用：1.kafka启动: ./kafka-server-start.sh ../config/server.properties & 2.创建topic: ./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic tes 3....
2020-03-25 14:23:37
93
转载 Linux 修改主机名 和 ip 映射关系
Linux 修改主机名 和 ip 映射关系1.修改主机名vim /etc/sysconfig/networkNETWORKING=yesHOSTNAME=hadoop2.修改主机名和IP的映射关系vim /etc/hosts192.168.0.2 hadoop001
2020-03-23 10:49:42
502
原创 spark对空值null的处理
spark对空值的处理方法： dff.show()val map = Map("age"->30l)dff.na.fill(map).show()对指定的列进行空值填充这是原本的打印信息：±—±------+| age| name|±—±------+|null|Michael|| 30| Andy|| 19| Justin|±—±------+这是...
2020-03-22 10:42:39
5565
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人