- 博客(77)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 miniconda3安装及使用
miniconda安装 - 简书https://www.cnblogs.com/zhangxingcomeon/p/13801554.htmlPython- 解决PIP下载安装速度慢_pip下载慢_Renaissance5K的博客-CSDN博客
2023-03-02 10:32:49
774
原创 配置Docker容器ssh服务端实现远程ssh登录
1. ubuntu系统#安装ssh server和 clientRUN DEBIAN_FRONTEND=noninteractive apt-get install -y openssh-server openssh-client#此步骤主要目的是修改sshd_config配置文件，把配置文件中的”PermitRootLogin without-password”加一个”#”号...
2020-02-19 20:39:11
1255
原创 Java byte[]与short[]之间转换
直接上代码：import java.nio.ByteBuffer;import java.nio.ByteOrder;import java.util.Arrays;import org.apache.log4j.Logger;public class CommonUtil { private static Logger logger = Logger.getLogger(Co...
2018-07-26 09:46:55
10279
原创 html页面跳转及参数传递
1. 第一个html页面代码 // table点击事件 $('#table').on('click-row.bs.table', function (e, row, $element, field) { if(field == "scene_name" || field == "scene"){ var index = $('#table').bootstrapTable('get
2017-08-26 15:08:06
4344
原创 GET请求jsonp示例
众所周知GET请求可以用jsonp的方式解决跨域问题，下面会给出一个jsonp请求的示例。1.后台接口 @Path("getscene") @MClientHandler public ContentResult getSceneTable() { HttpServletRequest request = beat.getRequest(); HttpServletRespon
2017-08-26 14:49:51
3639
原创 bootstrap table通过ajax获取后台数据展示在table
1. 背景bootstrap table 默认向后台发送语法的dataType为 json，但是为了解决跨域问题我们需要将dataType改为jsonp，这时就需要修改bootstrap table获取后台数据的方式，采用$('#table').bootstrapTable('load', data);方法。修改前和修改后代码分别如下所示。2.修改前代码 <table id="t
2017-08-26 14:38:18
45528
8
原创 射线法判断地图上点是否在多边形内
1. 射线法介绍在地图应用上，我们会经常需要判断一个点是否位于多边形区域内，这里介绍下采用射线法如何实现。算法思想：从待判断的点向某一个方向引射线，计算和多边形交点的个数，如果个数是偶数或者0，则点在多边形外，如果是奇数，则在多边形内，如下图：这里有两种情况需要特殊处理：1） 射线经过顶点：当射线经过顶点时，判断就会出现异常情况。2） 点在边上：这种
2016-03-31 12:16:35
7006
原创 vs 2008下配置openCV
1.去官网下载openCV: http://opencv.org/ ,选择自己需要的版本。 因为我的项目里面用到的是2.3.1，所以选择下载2.3.1版本的。#pragma comment( lib, "opencv_core231d.lib" )#pragma comment( lib, "opencv_imgproc231d.lib" )2. 将下载的压缩包解压到自己的目
2014-12-06 11:59:15
711
转载 SHELL模拟多线程脚本
其实这个脚本并没有实现多线程，shell也根本不可能实现多线程。此脚本的作用无非是限制几乎同时放入后台执行的进程数量而已，从而达到在提高脚本执行效率的同时又不明显增加负载的作用。原始脚本如下：#!/bin/bashSEND_THREAD_NUM=13tmp_fifofile="/tmp/$$.fifo"mkfifo "$tmp_fifofile"ex
2014-07-28 12:19:03
3700
1
原创 vim中安装scala插件
通过Vundle工具来安装，首先得安装Vundle一、 Vundle安装1. Set up Vundle2. Configure Plugins
2014-05-15 10:15:37
7865
转载 Hive内置数据类型
Hive的内置数据类型可以分为两大类：(1)、基础数据类型；(2)、复杂数据类型。其中，基础数据类型包括：TINYINT,SMALLINT,INT,BIGINT,BOOLEAN,FLOAT,DOUBLE,STRING,BINARY,TIMESTAMP,DECIMAL,CHAR,VARCHAR,DATE。下面的表格列出这些基础类型所占的字节以及从什么版本开始支持这些类型。数据类型
2014-03-10 09:44:25
89517
3
原创 sqoop的使用
sqoop作用： 用于将hdfs上的数据导到关系数据库中，或将关系数据库中的数据导入到hdfs上，本文以mysql为例一、安装从官网上下载http://mirrors.hust.edu.cn/apache/sqoop/1.4.4/， 我安装的hadoop版本为1.0.2所以下载的sqoop为：sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz将sqoop-1.4.
2014-01-16 15:14:22
2473
原创 使用XManager连接CentOS .
第一步：用XShell连接CentOS，进行配置：1.打开 /etc/inittab文件，将 runlevel 变为5 即id:5:initdefault: 如果原来就是5则不用修改。2.编辑/etc/gdm/custom.conf,内容如下：[security]AllowRemoteRoot=true[xdmcp]Port=177Enable=true然后重启桌面
2013-11-07 15:26:10
1225
原创 Java小记
1. instanceof 关键字instanceof是Java的一个二元操作符，和==，>，举个例子： 比如我们写了一个处理账单的系统，其中有这样三个类： public class Bill {//省略细节} public class PhoneBill extends Bill {//省略细节} public class GasBill extends
2013-11-06 16:30:46
771
原创 Cassandra Query Language (CQL) v2.0
http://cassandra.apache.org/doc/cql/CQL.html
2013-10-18 14:45:05
1068
原创 cassandra调优
1.配置脚本文件cassandra-env.shMAX_HEAP_SIZE #java 堆总大小，cassandra是运行在java环境下的，java heap size 是cassandra运行起来后内存的总大小HEAP_NEWSIZE #heap size 初始化值java gc 配置： JVM_OPTS="$JVM_OPTS -XX:CMSInitiatingOccupan
2013-09-21 12:56:18
5009
1
原创 spark参数配置调优
SPARK配置参数的两个地方：1. $SPARK_HOME/conf/spark-env.sh 脚本上配置。 配置格式如下：export SPARK_DAEMON_MEMORY=1024m2. 编程的方式（程序中在创建SparkContext之前，使用System.setProperty（“xx”，“xxx”）语句设置相应系统属性值)，即在spark-shell下配置如：scal
2013-09-19 22:52:07
32861
转载 Java 命令行模式下编译 MapReduce 程序
不使用 eclipse 这些工具，直接使用 java 命令在命令行下编译 mapreduce 程序。首先需要设置CLASSPATH环境变量:将/root/hadoop/hadoop-0.20.1/hadoop-0.20.1/hadoop-0.20.1-core.jar和lib下的commons-cli-1.2.jar添加进入环境变量，export CLA
2013-09-12 21:55:50
903
转载 hadoop hdfs文件系统常用命令
hadoop常用命令： hadoop fs 查看Hadoop HDFS支持的所有命令 hadoop fs –ls 列出目录及文件信息 hadoop fs –lsr 循环列出目录、子目录及文件信息 hadoop fs –put test.txt /user/sunlightcs 将本地文件系统的test.t
2013-09-11 14:50:28
1644
原创 spark从hdfs上读取文件运行wordcount
1.配置环境说明hadoop配置节点：sg202(namenode SecondaryNameNode) sg206(datanode) sg207(datanode) sg208(datanode)spark配置节点：sg201(Master) sg211(Worker)2.从hdfs上读取文件并运行wordcounta. 登录hadoop的主节点sg202 将要进行word
2013-09-11 14:31:33
60978
3
原创 CentOS上安装spark standalone mode
1.安装JDK（已经安装好）2.安装scala 2.9.3Spark 0.7.2 依赖 Scala 2.9.3, 我们必须要安装Scala 2.9.3.下载 scala-2.9.3.tgz 并 保存到home目录(已经在sg206上）.$ tar -zxf scala-2.9.3.tgz$ sudo mv scala-2.9.3 /usr/lib$ sudo vim /et
2013-09-04 16:36:35
9053
原创 MySQL数据库my.cnf配置文件注释详解
[client] port = 33096socket = /home/mysql/mysql/tmp/mysql.sock [mysqld] !include /home/mysql/mysql/etc/mysqld.cnf #包含的配置文件 ，把用户名，密码文件单独存放 port = 3309 socket = /home/mysql/mysql/tmp/mysql.s
2013-06-20 15:21:56
1353
原创 Mongodb分片配置
一、 部署环境、1. 结构图 2. 节点分配一共使用了三个节点Sg206(172.16.48.206 root/201314) ： shard11、shard32、config、mongosSg207(172.16.48.207 root/201314) ： shard21、shard12、config、mongosSg208(172
2013-06-18 09:28:55
1283
原创 mongodb常用命令
1. 超级用户相关：1. #进入数据库adminuse admin2. #增加或修改用户密码db.addUser('name','pwd')3. #查看用户列表db.system.users.find()4. #用户认证db.auth('name','pwd')5. #删除用户db.removeUser('name')
2013-06-03 09:04:43
661
原创 mongodb集群错误解决
1. 报错：> db.csptest2.drop()Fri Feb 22 08:48:24 uncaught exception: drop failed: {"errmsg" : "exception: Error locking distributed lock for chunk drop. :: caused by :: 13651 error
2013-05-24 16:57:14
2851
原创 局域网内Linux服务器时间同步
1.将一台能够上网的服务器作为时间服务器： # /usr/bin/rdate -s time-b.timefreq.bldrdoc.gov //将时间服务器与互联网时间服务器同步 # /etc/init.d/ntpd start //启动时间服务器 # vi /etc/cron.weekly/rdateweekly.sh //设置计划任务，每周同步一次时间 ------------
2013-05-24 16:51:49
1050
原创 python函数
1.sleepPython 编程中使用 time 模块可以让程序休眠，具体方法是time.sleep(秒数)，其中“秒数”以秒为单位，可以是小数，0.1秒则代表休眠100毫秒。# 例1：循环输出休眠1秒import timei = 1while i <= 3: print i # 输出i i += 1 time.sleep(1) # 休眠1秒
2013-05-07 09:51:50
775
原创 cassandra 1.2节点数据负载均衡
http://www.datastax.com/docs/1.2/initialize/token_generation#calculating-tokens-for-the-murmur3partitioner
2013-04-28 14:49:50
1797
原创 cassandra 1.0.x常用命令
首先使用cassandra-cli 进入命令行：$ bin/cassandra-cli -host 192.168.0.1011.创建keyspaceCREATE KEYSPACE usertable with placement_strategy = 'org.apache.cassandra.locator.SimpleStrategy' and strategy_options =
2013-04-27 17:06:16
3218
转载 Centos配置国内yum源
网易（163）yum源是国内最好的yum源之一 ，无论是速度还是软件版本，都非常的不错，将yum源设置为163yum，可以提升软件包安装和更新的速度，同时避免一些常见软件版本无法找到。V9zz的云主机就将yum源设置为163的yum，具体设置方法如下：1，进入yum源配置目录cd /etc/yum.repos.d2，备份系统自带的yum源mv CentOS-Base.repo Ce
2013-04-10 08:53:23
658
原创 单物理机安装OceanBase
http://code.taobao.org/p/OceanBase/wiki/quickstart/1. 配置过程中到make j2步会报错：echo -n 'const char* svn_version() { const char* SVN_Version = "' > svn_version.cppmake: *** No rule to make target `svn_d
2013-04-09 15:13:13
1950
转载 cassandra插入数据时报cannot parse 'jsmith' as hex bytes
cassandra版本是1.2.3语句如下：set User['jsmith']['first'] = 'John';报错：cannot parse 'jsmith' as hex bytes解决办法： set User[ascii('jsmith')][ascii('first')]=ascii('John'); 使用ascii()这个函数将字体串转换成ascii插入。同时在查询时也需要使用as
2013-03-28 10:21:05
1269
3
原创 Cassandra集群配置
1、基本配置首先需要准备3台或以上的计算机。下面假定有3台运行 Linux 操作系统的计算机，IP地址分别为 192.168.0.100, 192.168.0.101 和 192.168.0.102。 系统需要安装好 Java 运行时环境，然后到这里下载 0.7 版本的 Cassandra 二进制发行包。挑选其中的一台机开始配置，先展开 cassandra 发行包：$ tar -z
2013-03-28 09:00:53
8473
原创 MongoDB集群配置
一、mongodb分布式应用原理MongoDB集群包括一定数量的mongod（分片存储数据）、mongos（路由处理）、config server（配置节点）、clients（客户端）、arbiter（仲裁节点：为了选举某个分片存储数据节点那台为主节点）。1、shards：一个shard为一组mongod，通常一组为两台，主从或互为主从，这一组mongod中的数据时相同的，具体可见
2013-03-27 10:44:34
8846
转载 存入Hbase的方法
1、通过mapreduce的方式存入hbase，只有map，其实reduce阶段也是一样的代码如下：import java.io.IOException; import org.apache.commons.logging.Log; import org.apache.commons.logging.LogFactory; import org.apache.hadoo
2013-03-21 09:34:40
938
转载 zookeeper安装
一、安装需求安装java 1.6及hadoop 0.20.x二、安装zookeeper1、下载zookeeperwget http://mirror.bit.edu.cn/apache//zookeeper/zookeeper-3.4.3/zookeeper-3.4.3.tar.gz（本次安装3.4.3版本）其他版本下载地址（最好使用stable版本）：http://zoo
2013-03-18 16:50:17
808
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人