- 博客(178)
- 收藏
- 关注
RSS订阅转载 mybatis-plus-generator 模板生成代码
maven: <dependencies> <dependency> <groupId>com.baomidou</groupId> <artifactId>mybatis-plus-generator</artifactId> ...
2019-09-11 10:56:00
341
转载 百度云 2G 4核 服务器拼团链接
拼团链接如下:https://cloud.baidu.com/campaign/ABCSale-2019/index.html?teamCode=P3D6DV8T转载于:https://www.cnblogs.com/yako/p/11465754.html
2019-09-05 14:24:00
298
转载 大数据平台的服务内容以及猛犸大数据平台近期的思考【摘录】
猛犸大数据平台经过去年一年的快速发展，已成为公司内多个产品的大数据开发工具的首选，作为一个当初定位为开发门户的这样一个平台网站，以调度管理为核心，将公司内已有的大数据工具进行了整合，提供了可视化的操作界面、统一的用户权限管理机制。洞悉原油开发流程的用户可以在猛犸上找到很熟悉的感觉，DS接入，MR任务的上传与调度控制，HIVE的查询等等。随着用户不断反馈，猛犸也在不断的进化，越来越多的组...
2019-07-18 11:51:00
449
转载 正则表达式
为什么使用正则表达式？典型的搜索和替换操作要求您提供与预期的搜索结果匹配的确切文本。虽然这种技术对于对静态文本执行简单搜索和替换任务可能已经足够了，但它缺乏灵活性，若采用这种方法搜索动态文本，即使不是不可能，至少也会变得很困难。通过使用正则表达式，可以：测试字符串内的模式。例如，可以测试输入字符串，以查看字符串内是否出现电话号码模式或信用卡号码模式。这称为数据验证。替...
2018-11-22 17:41:00
166
转载 区块链特点
三大特点：1.去中心化(每一个节点都是同等的,只有计算能力的差异，没有地位的差异)2.公开性，所有人可见(所有节点都拥有区块链上所有的数据)3.不可撤销，不可篡改(难度较大,需要控制全网51%以上的计算能力)阮老师的入门贴：http://www.ruanyifeng.com/blog/2017/12/blockchain-tutorial.html...
2018-10-23 23:16:00
984
转载 Cygwin & MinGW
Cygwin:虚拟环境MinGW:工具类TO:....转载于:https://www.cnblogs.com/yako/p/9791403.html
2018-10-15 15:48:00
90
转载 Kafka中的zookeeper-shell.sh
连接 zookeeperbin/zookeeper-shell.sh 127.0.0.1:2181常用命令connect host:portget path [watch]ls path [watch]set path data [version]rmr pathdelquota [-n|-b] pathquit printwat...
2018-09-17 10:17:00
241
转载 mapPartitions
rdd.mapPartitions{ partition =>if (!partition.isEmpty) {// Some setup code herepartition.map(item => {val output =yourfunction(item)if (!partition.hasNext){// Some cleanup cod...
2018-09-11 15:23:00
80
转载 Kafka 副本失效
Kafka源码注释中说明了一般有两种情况会导致副本失效：follower副本进程卡住，在一段时间内根本没有想leader副本发起同步请求，比如频繁的Full GC。follower副本进程同步过慢，在一段时间内都无法追赶上leader副本，比如IO开销过大。FYI:https://yq.aliyun.com/articles/293714转载于:https:...
2018-08-31 15:22:00
186
转载 JVM Scan
1.jmap -histo pid|head -1002.jstat -gcutil pid cycle3.jmap-heap pid转载于:https://www.cnblogs.com/yako/p/9548370.html
2018-08-28 15:12:00
49
转载 记住，永远不要在MySQL中使用“utf8”编码[转载]
记住，永远不要在MySQL中使用“utf8”编码原创：无明、Adam聊聊架构6月15日最近工作中我遇到了一个 bug，我试着通过 Rails 在以“utf8”编码的 MariaDB 中保存一个 UTF-8 字符串，然后出现了一个离奇的错误：Incorrect string value: ‘\xF0\x9F\x98\x83 <…’ for column ‘sum...
2018-07-25 10:17:00
59
转载 MySQL 5.6 在线主从复制
设:主库为master,从库为slave1.备份主库数据(全库)，且记录下 master_log_file,master_log_pos，用于后面设置slave时指定 备份脚本: mysqldump --socket=/home/data/mysql/mysql.sock --single-transaction --master-data=2 -uroot -pro...
2018-07-11 11:14:00
72
转载 ambari 2.6.2 安装 hdp 2.6.5.0 遇到的问题
1.hive-client 无法安装一直报错(symlink target already exists and it is not a symlink.)，hive-client 已经存在且不是符号连接，查看确实如此试了很多种办法，比如重新安装，比如手动删除，手动连接，都没有奏效DO: 最后通过查看错误日志，拿到执行报错的脚本(ambari-python...
2018-07-10 13:49:00
729
转载 Mysql 断电数据损毁恢复
error log:Database page corruption on disk or a failed处理:/etc/my.cnf 设置innodb_force_recovery = 6再次启动即可。后续需要处理： checktable,处理有问题的表。转载于:https://www.cnblogs.com/yako/p/9267668....
2018-07-05 12:22:00
144
转载 centos6.7 安装 virtualBox 再安装 centos 7
Tag: 黄色为自己实际情况需要设置的部分，绿色部分为虚拟机名称（自定义）1.创建虚拟机VBoxManage createvm --name centos7 --ostype Linux26_64 --register --basefolder /home/virtualbox/VBoxManage list ostypes(查看支持的操作系统类型)2.创建磁盘V...
2018-07-04 19:09:00
98
转载 ambari
1.python 不正常，不可用 无法install ,文件名过长2.无法连接注册(IOERROR failed due to EOF occurred in violation of protocol) /etc/ambari-agent/conf/ambari-agent.ini security 增加下面的配置 force_https_p...
2018-07-03 18:17:00
72
转载 Hbase 维护
停止 regionserver :./graceful_stop.sh host转载于:https://www.cnblogs.com/yako/p/9245108.html
2018-06-29 19:48:00
63
转载 hbase copyTable
参考：https://yq.aliyun.com/articles/176546执行：hbase org.apache.hadoop.hbase.mapreduce.CopyTable --new.name="default:cheat.20180501_superid_ua_analysis" "cheat:20180501_superid_ua_analysis"异常：...
2018-06-27 15:16:00
67
转载 Phoenix 4.8
From v4.8.0 onwards, user can enable to map it’s schema to the namespace so that any table created with schema will be created in the corresponding namespace of HBase.Earlier, every table (with...
2018-06-26 20:44:00
61
转载 记录
ps -ef|grep defunctguicemetrics-core转载于:https://www.cnblogs.com/yako/p/8996559.html
2018-05-05 22:39:00
68
转载 IDEA 及 Gradle 使用总结
自动编译组件目前Android开发的主流开发工具是 Eclipse 和 IDEA目前主流的自动化打包工具时 ant，maven，gradle。maven工具中有自己的依赖仓库维护，很多开源支持包在上面都有维护（国内的除外）gradle是近年来发展起来自动化构建应用，解决 ant 构建上的繁琐代码，并且也支持读取maven的配置形式，依赖maven的支持包结构...
2018-04-15 13:25:00
147
转载 西蒙布朗-C4模型
关于 C4 模型的一些解释C4 模型是来自 software architecture for developers 一书的定义，指的是 Context 上下文场景、Container 容器、Component 组件和 Classes 类（或者 Code 代码），意思指一个软件架构是由这些模型呈树形结构组成。关注代码仍然是大多数软件开发生命周期中关注的焦点，这是有一定道理，因为代...
2018-02-23 12:03:00
146
转载 Linux 让进程在后台可靠运行的几种方法
nohup忽略 hang up 信号setsid使得父进程为1(init)&使得父进程为1(init)disown可以对已经启动的进程进行忽略hang up 处理screen使所有后续启动的进程的父进程都是1(init)转载于:https://www.cnblogs.com/yako/p/8446924.html...
2018-02-13 16:39:00
91
转载 IntelliJ IDEA For Mac 快捷键
根据官方pdf翻译：https://www.jetbrains.com/idea/docs/IntelliJIDEA_ReferenceCard_Mac.pdf在 IntelliJ IDEA 中有两个 Mac 版本的快捷键，一个叫做：Mac OS X，一个叫做：Mac OS X 10.5+目前都是用：Mac OS X 10.5+有两套的原因：https://in...
2018-02-13 15:32:00
64
转载 硬盘容量是否受限制【是】
一般情况下硬盘容量主要受三部分影响：1.主板（支持BIOS 还是 UEFI，以及硬盘接口数量--SATA）2.操作系统 (支持MBR 还是 GPT 分区格式，以及分区的数量限制)3.文件系统（支持多大的量，比如 NTFS限制在256TB,EXT4限制在1EB,单个文件限制在16TB）转载于:https://www.cnblogs.com/yako/p/8283563...
2018-01-14 16:18:00
361
转载 Parquet 格式文件，查看Schema
需要社区工具：parquet-tools-1.6.0rc3-SNAPSHOT.jar git project:https://github.com/apache/parquet-mr/tree/master/parquet-tools?spm=5176.doc52798.2.6.H3s2kL查看结构：java -jar parque...
2017-11-24 10:26:00
780
转载 Hadoop Gateway 部署
1.集群的 hadoop-current hive-current spark-currentcopy 到 gateway 机器2.集群的 hadoop-conf hive-conf spark-confcopy 到 gateway 机器3.集群的 yarn.sh ...
2017-10-25 16:07:00
340
转载 java 命令--备忘
java -Djava.ext.dirs=/tmp/spark-sample/lib/ -cp ./spark-sample-1.0.jar com.sample.StartLauncher转载于:https://www.cnblogs.com/yako/p/7719388.html
2017-10-23 22:10:00
59
转载 整理下常用硬件性能参数
首先列下秒以内的时间单位换算1 秒 = 1000 毫秒(ms)1 毫秒 = 1000 微妙(μs)1 微妙 = 1000 纳秒(ns)1 纳秒 = 1000 皮秒(ps)-------------------------------华丽分割线-----------------------------------SATA磁盘寻道时间 10 ms 和磁盘转速...
2017-10-10 23:12:00
140
转载 python 脚本备份 mysql 数据库到 OSS
脚本如下： 1 #!/usr/bin/python 2 ########################################################### 3 ########################################################## 4 5 # Import required python lib...
2017-10-10 16:58:00
102
转载 pip 更换国内源
centos 下 没有找到 pip.conf操作如下：进入主目录：cd ~创建 .pip 目录： mkdir .pip进入.pip 创建 pip.conf 文件：cd .pip/ touch pip.conf编辑 pip.conf 写入新的源配置，写入 douban源,保存即可，文件内容如下：[global]trusted-host = pypi.dou...
2017-10-08 17:35:00
78
转载 记录闭包和立即执行函数
闭包：http://www.runoob.com/js/js-function-closures.html立即执行函数：IIFE(Immediately Invoked Function Expression)http://benalman.com/news/2010/11/immediately-invoked-function-expression/#iife...
2017-09-30 13:37:00
71
转载 Django 中文乱码问题&富文本显示
1.起源：从后台管理添加中文对象，正常，但是再次点击编辑的时候，抛出异常，显示编码问题。解决：在项目的manage.py 的文件头部添加 importsys reload(sys) sys.setdefaultencoding('utf8')确认有效。2.正常富文本连着标签内容一起显示出来，需要将富文本放入如下代码中，就可以显...
2017-09-12 07:58:00
127
转载 mysql exceeded the 'max_questions' resource 记录
最近Hive Meta的 Mysql 常报错'user' has exceeded the 'max_questions' resource (current value: 10000) 解决：调高 max_questions 设置，直接修改user 表，然后刷新权限 flush privileges.探究：max_questions/max_updates每...
2017-07-12 11:44:00
828
转载 Linux 命令 su 和 sudo 比较
su ： 可以用来切换到任何用户，但是要求输入目标用户的密码 比如：su - su - root (等价 su -) su - user su root 与 su - root 的区别在于，后者不切换环境，只是赋予用户身份sudo ： 需要在/etc/sudoers 中进行相应的配置，切换执行时，只需要输入自己的密码。 ...
2017-07-06 12:53:00
54
转载 python virtualenv
主要用来启动一个独立的python 运行环境，好处在于可以独立安装相关版本软件包，避免不同程序因依赖不同版本的某一程序而导致的冲突。入门步骤：1.安装 pip install virtualenv2.创建 virtualenv 【env目录】3.激活 进入 env目录 source Scripts/activate(Linux) Sc...
2017-06-16 14:59:00
45
转载 Linux 操作系统常用的三种流012
Linux 操作系统常用的三种流：0 标准输入流1 标准输出流2 标准错误流通常在写脚本启动程序，写log时候，会出现如下写法：nohup commod > log.txt 2>&1 &解释：表示通过nohup 启动服务 > log.txt 表示 标准输出流写入到 log.txt 文件 2&g...
2017-05-27 17:02:00
247
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人