- 博客(12)
- 资源 (7)
- 收藏
- 关注
RSS订阅原创 离线升级idea
3、使用管理员账户执行下载后的jar包， 例如 java -jar IC-233.11799.300-233.13135.103-patch-win.jar。2、 将下载后的jar包复制到idea安装目录。1、下载升级用的jar包。windows系统下载。
2024-01-03 09:25:40
471
1
原创 windTerm—Xshell、SercureCRT等替代品
最常用的ssh工具， 莫过于SercureCRT、Xshell，但是这两个都收费，某些场景下不好使用。免费的有putty, 但是这个太简陋了，用起来不舒服。finalShell、eclecterm 、tabby 这三个很炫酷，但安装包和占用内存都较高， moboxterm 也很优秀，但是没有多窗格操作， 这里推荐windTerm...
2022-07-07 11:59:03
2583
1
原创 新版vscode-sever使用jdk1.8运行java程序的方法
新版vscode-server的java插件最低只支持jdk11, 然鹅，我期望它能使用jdk1.8运行我的代码，与线上JDK环境保持一致，这就需要进行配置，使vscode使用jdk1.8运行java程序。首先 按快捷键 “ctrl + ,” 打开settings 然后执行如下步骤：1、点击 "remote[$YOUR_CODE_SERVER_IP]" 页签， 2、搜索框输入 Java: home 点击Extensions中的“Java”3、找到Java>Jdt>Ls>Java:Home 这条配置4、 点击
2022-06-24 13:55:07
1477
转载 让spark 2.3, 2.4版本显示执行过程进度条的方法
原文如下原文地址 https://jaceklaskowski.gitbooks.io/mastering-apache-spark/spark-sparkcontext-ConsoleProgressBar.htmlConsoleProgressBarConsoleProgressBar shows the progress of active stages to standard ...
2019-01-30 07:34:26
3543
1
原创 pip命令不能使用，报错 from pip._internal import cmdoptions ImportError: cannot import name cmdoptions
问题描述win10安装xgboost 的时候发现pip命令不能使用，报错内容如下： from pip._internal import cmdoptions ImportError: cannot import name cmdoptions 此问题为pip损坏所致执行pip --version 命令仍然报出此错误解决方法：参照官网 https://packagi...
2018-11-09 07:14:48
2690
1
原创 Centos7 离线安装mysql 5.6详细步骤
首先说明下 ：1） Centos7将默认数据库mysql替换成了Mariadb，如果想继续使用mysql 需要卸载Mariadb 再安装mysql2） mysql 5.7版本的密码问题搞得人很头疼，所以干脆选择mysql5.6了一、安装MySQL1、下载安装包 mysql-5.6.36-linux-glibc2.5-x86_64.tar.gz 下载地址https://dev.
2017-06-07 10:54:29
19833
7
原创 Spark开发中遇到的问题及解决方法
1、数据来源于HDFS，处理完成后同样写回HDFS的时候，遇到了HDFS的权限问题，提交程序的用户为root ，而root对HDFS没有写权限，这时可以通过伪造程序的使用者的方法解决： val conf = new SparkConf().setAppName("TestLogic") .set("fs.default.name","hdfs://udh-cluster-4:8020"）
2017-04-07 16:28:46
1692
转载 zookeeper原理（转）
ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等。Zookeeper是hadoop的一个子项目，其发展历程无需赘述。在分布式应用中，由于工程师不能很好地使用锁机制，以及基于消息的协调机制不适合在某些应用中使用，因此需要有一种可靠的、可扩展的、分布式的、可配置的协调机制来统一系统的状态。Zookee
2017-01-12 17:39:48
442
原创 Storm框架创建二级Bolt报错org.apache.storm.generated.InvalidTopologyException
记录一下这个我遇到的这个问题：topologyBuilder.setSpout("SumSpout", new SumSpout()); topologyBuilder.setBolt("bolt1",new PingCounter()).shuffleGrouping("SumSpout");topologyBuilder.setBolt("bolt2", new PingCounter
2016-11-27 10:21:01
5515
原创 一些好用的网站收藏
流程图制作网站 https://www.processon.com/柱状图、折线图、圆饼图等数据展示图制作网站 http://echarts.baidu.com/
2016-11-20 16:22:13
396
转载 大数据框架对比：Hadoop、Storm、Samza、Spark和Flink
简介大数据是收集、整理、处理大容量数据集，并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限，但这种计算类型的普遍性、规模，以及价值在最近几年才经历了大规模扩展。在之前的文章中，我们曾经介绍过有关大数据系统的常规概念、处理过程，以及各种专门术语，本文将介绍大数据系统一个最基本的组件：处理框架。处理框架负责对系统中的数据进行计算，
2016-11-20 16:18:33
1205
转载 Linux下安装Redis的步骤
Linux下安装Redis的步骤： （注：一定严格按照步骤进行操作，否则容易出现未知问题）安装C语言编译环境 yum -y install cpp binutils glibcglibc-kernheaders glibc-common glibc-devel gcc make解压： 解压安装用的tar包 ： tar -zxvfredis-3.2.5.tar.gz /opt/ 进入
2016-11-20 14:58:53
454
xgboost windows依赖jar包 用于 spark等计算
2019-07-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人