- 博客(459)
- 收藏
- 关注
RSS订阅原创 ImportError: cannot import name ‘backend‘ 问题排查
cannot import name 'backend'
2024-03-06 13:57:54
445
原创 mysql slave 使用replicate_wild_ignore_table忽略多张表同步
replicate-ignore-db参数有问题，有些情况下不会忽略，详细情况如下面的博客描述，忽略多个库需要在从库的 /etc/my.cnf 中的[mysqld] 下面添加。
2022-10-20 18:51:24
1561
原创 unable to import 'smart_open.gcs', disabling that module 错误解决
python安装gensim==3.5.0 版本后，import gensim 报错unable to import 'smart_open.gcs', disabling that module，网上查询后解决办法是pip install smart_open==1.10.0 ，但是安装命令报错：AttributeError: '_NamespacePath' object has no a...
2020-04-27 11:52:41
1307
原创 mvn deploy 子项目下载时仓库找不到父项目
使用这个命令deploy子项目的话，父项目不会deploymvn clean package deploy -pl aaa,bbb直接在pom.xml里配置子项目时会自动去下载父项目的pom文件，仓库中没有父项目文件会报错，需要用下面的命令把父项目也deploy到仓库mvn clean package deploy -pl .,aaa,bbb...
2019-07-30 15:56:19
1562
转载 打开tcp_tw_recycle引起的一次投诉分析
转自https://www.cnblogs.com/jdonson/p/4760166.html打开tcp_tw_recycle引起的一次投诉分析背景:我们有个基于oauth2.0协议给第三方授权以及信息的业务，年前对接入层、业务层做了次迁移。业务架构简单介绍下:lvs接入---> nginx ---> tomcat问题:迁移完第1天，接到好几个合作商的投...
2019-07-03 18:02:17
384
转载 ES集群服务器CPU sys 负载瞬间飚高分析
转载https://elasticsearch.cn/article/348ES集群服务器CPU负载瞬间飚高分析Elasticsearch| 作者well| 发布于2017年11月01日 |预计阅读时间：12分钟| 阅读数：9404分享到：QQ空间新浪微博微信QQ好友印象笔记有道云笔记先观察了下集群系统资源的使用情况，发现网络、磁盘、内存等都没有什么迹象，唯独 CPU 负...
2019-06-17 16:13:58
943
原创 记录一次搭建redis cluster步骤
官方资料https://redis.io/topics/cluster-tutorial ，首先下载redis，http://download.redis.io/releases/redis-4.0.6.tar.gztar zxvf redis-4.0.6.tar.gzcd redis-4.0.6makemake报错 GCC diagnostic not allowed inside functi...
2018-02-05 22:07:28
423
转载 hbase报租约过期，regionserver自动关闭-namenode.LeaseExpiredException
http://blog.sina.com.cn/s/blog_7f83b8fb0102v88q.htmlhbase报租约过期，regionserver自动关闭-namenode.LeaseExpiredException (2014-12-22 11:09:06)转载▼标签： it 租约 过期分类： 成长之路现象：1、报错的regionserver自动关闭2、regionserver上的错误是：（
2018-01-19 11:06:16
1322
1
转载 Keepalived两节点出现双VIP的情况 一．现象 安装有keepalived的两节点服务器10.11.4.186/187，主要做高可用，设定VIP10.11.4.185。 首先启动10.1
https://www.cnblogs.com/netonline/archive/2017/10/09/7642595.htmlKeepalived两节点出现双VIP的情况一．现象安装有keepalived的两节点服务器10.11.4.186/187，主要做高可用，设定VIP10.11.4.185。首先启动10.11.4.186的keepalived服
2017-12-28 12:10:43
2657
原创 hadoop distcp 报错 Caused by: java.io.IOException: Got EOF but currentPos = xxx < filelength = xxx
我们在cdh4版本的hadoop上使用 distcp 把数据从cdh5版本的hadoop拷到cdh4，命令如下 hadoop distcp -update -skipcrccheck hftp://cdh5:50070/xxxx hdfs://cdh4/xxx当文件非常大会有这样的报错，2017-12-15 10:47:24,506 INFO execute.BulkLoadHb
2017-12-15 14:33:00
1691
转载 批量修改MYSQL的存储过程或者函数所有者的对象
http://www.cnblogs.com/jgglg/archive/2012/08/17/mysql.html批量修改MYSQL的存储过程或者函数所有者的对象use mysql;//此处是数据库自身创建的系统数据库名字是mysqlUPDATE proc set `definer`='新所有者名称' where `definer`='旧所有者名称';
2017-03-27 11:34:58
2325
转载 springmvc controller和servlet中文乱码问题
http://tydldd.iteye.com/blog/2071869springmvc controller和servlet中文乱码问题博客分类： javaweb 一、第一种方法通过tomcat配置和spring编码过滤器解决中文乱码1、修改tomcat配置文件server.xml Xml代码 修
2017-03-14 14:37:37
1496
原创 struts升级到2.3.32报错SEVERE: Error filterStart解决方法
由于struts低版本有漏洞，公司要求升级到2.3.32，pom.xml中修改过版本后，运行tomcat报错SEVERE: Error filterStart，网上查了有很多说法，都不成功，最后发现localhost.2017-03-09.log 这个日志中有报错：java.lang.NoSuchFieldError: VERSION_2_3_0 at org.apache.st
2017-03-09 14:26:46
3750
1
转载 MySql DATE_FORMAT函数用法
http://blog.163.com/very_apple/blog/static/277592362013283291394/在mysql中，DATE_FORMAT(date, format) 函数根据format字符串格式化date值。%M 月名字(January……December) %W 星期名字(Sunday……Saturday) %D 有英语前缀的月份的日期(
2017-01-12 10:10:13
8750
转载 cassandra 报错 unable to create new native thread
http://itindex.net/detail/45000-cassandra-节点-down在对集群做压力测试的时候，发现有节点down机，错误信息如下。google后查明原因，由于Linux "max user processes( nproc )"所致，我操作系统的是CentOS 6 64bit，修改方法如下：错误信息ERROR [Thread-2
2017-01-09 17:03:20
1176
转载 svn备份一般采用三种方式
http://www.cnblogs.com/itech/archive/2011/10/11/2206988.html备份策略==============svn备份一般采用三种方式：1）svnadmin dump 2)svnadmin hotcopy 3)svnsync. 注意，svn备份不宜采用普通的文件拷贝方式（除非你备份的时候将库暂停），如cop
2017-01-06 15:51:45
21599
5
转载 hadoop 2.0 bug EOFException on zero-length file
https://issues.apache.org/jira/browse/HADOOP-9692当sequencefile 有大小为0的文件时，会报异常：sequencefile reader throws EOFException on zero-length file, stacktrace as shown:Caused by: java.io.EOFEx
2016-12-14 15:51:27
862
转载 Linux 各种查看网卡流量的方法
http://blog.chinaunix.net/uid-21855486-id-3762505.htmlhttp://jasonyong.blog.51cto.com/47753/174197 Linux 查看网卡流量 我的系统式RHEL5. 在linux下，查看网卡流量的方法有很多。下面先记录几个，和他们的大概用法。已被以后之需。 一：i
2016-10-28 10:23:14
16342
转载 Linux内核 TCP/IP、Socket参数调优
http://www.cnblogs.com/pangguoping/p/5830328.html/proc/sys/net目录 所有的TCP/IP参数都位于/proc/sys/net目录下（请注意，对/proc/sys/net目录下内容的修改都是临时的，任何修改在系统重启后都会丢失），例如下面这些重要的参数：参数（路径+文件）
2016-10-20 13:55:19
4223
转载 ruby SSL_connect returned=1 errno=0 state=SSLv3 read server certificate B:
使用gem update遇到这个问题，原来是ruby没有包含SSL证书，所以Https的链接被服务器拒绝。解决方法很简单，首先在这里下载证书(http://curl.haxx.se/ca/cacert.pem), 或者在浏览器里把这个文件内容复制，服务器创建一个新文件cacert.pem，内容粘贴进去，然后再环境变量里设置SSL_CERT_FILE这个环境变量，export SSL
2016-04-28 16:01:52
5032
2
原创 利用nginx的http转发功能做内网yum源
内网服务器无法连接外网yum源，所以找一台跳板机，利用nginx的http转发功能做内网yum源,例如跳板机IP 192.168.0.45内网机IP 192.168.0.41在跳板机上部署nginx，在配置文件中添加server { listen 9180; server
2016-04-27 16:54:22
5548
1
原创 linux 安装pip
从pip官网 https://pypi.python.org/pypi/pip 下载pip的源代码#解压tar -zxvf pip-1.5.5.tar.gz cd pip-1.5.5#安装python setup.py install这个时候会报错说少了setuptoolswget "https://bootstrap.pypa.io/ez_setup.
2016-04-12 15:30:21
527
原创 pure-ftpd 虚拟用户连接报错Sorry, invalid address given
启动命令增加一个参数--dontresolve ./pure-ftpd -j -lpuredb:/usr/local/pureftp/etc/pureftpd.pdb --dontresolve &
2015-11-26 16:51:33
506
转载 Storm高级原语（三） — Trident topology
http://www.dataguru.cn/article-5579-2.html摘要: 问题导读1、Trident是什么？2、如何使用Trident的API来完成大吞吐量的流式计算？3、如何使用stream作为输入并计算每个单词的个数？Trident是在storm基础上，一个以实时计算为目标的高度抽象。 它在提供处理大吞吐量数 ...问题导读
2015-10-14 16:58:08
608
转载 JAVA正则表达式：Pattern类与Matcher类详解(转)
java.util.regex是一个用正则表达式所订制的模式来对字符串进行匹配工作的类库包。它包括两个类：Pattern和Matcher Pattern 一个Pattern是一个正则表达式经编译后的表现模式。 Matcher 一个Matcher对象是一个状态机器，它依据Pattern对象做为匹配模式对字符串展开匹配检查。 首先一个Pattern实例订制了一个所用语法与PERL的类似的正则表达式经编
2015-09-22 18:05:38
444
转载 Flume-ng+Kafka+storm的学习笔记
http://blog.csdn.net/zxcvg/article/details/18600335
2015-07-17 14:59:16
564
转载 Storm-0.9.0.1安装部署 指导
http://www.aboutyun.com/thread-6854-1-1.html可以带着下面问题来阅读本文章：1.Storm只支持什么传输2.通过什么配置，可以更改Zookeeper默认端口3.Storm UI必须和Storm Nimbus部署在同一台机器上，UI无法正常工作为什么2.Storm-0.9.0.1大概经过几个步骤Twitter Stor
2015-07-15 18:05:34
694
转载 Storm 配置说明
什么是Storm?Storm是twitter开源的一套实时数据处理框架，基于该框架你可以通过简单的编程来实现对数据流的实时处理变换。Storm的配置文件一般存放在$STORM_HOME/conf下，通常名为storm.yaml，它符合yaml格式要求。配置项详解:以下是从storm的config类中搜集的所有storm支持的配置项(Based storm 0.6.0
2015-07-15 18:02:31
452
转载 HDFS HA-Quorum Journal Manager
http://www.binospace.com/index.php/hdfs-ha-quorum-journal-manager/?utm_source=tuicool1、背景HDFS HA，即NameNode单点故障问题，一直是关系到HDFS稳定性最为重要的特性。之前Hadoop0.23初探系列文章中，介绍了HDFS的Federeation概况、配置与部署的情况，以及有关H
2015-07-13 15:03:03
749
转载 zookeeper原理（转）
ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等。Zookeeper是hadoop的一个子项目，其发展历程无需赘述。在分布式应用中，由于工程师不能很好地使用锁机制，以及基于消息的协调机制不适合在某些应用中使用，因此需要有一种可靠的、可扩展的、分布式的、可配置的协调机制来统一系统的状态。Zookee
2015-07-13 14:59:30
603
转载 zookeeper使用和原理探究（一）
zookeeper介绍zookeeper是一个为分布式应用提供一致性服务的软件，它是开源的Hadoop项目中的一个子项目，并且根据google发表的论文来实现的，接下来我们首先来安装使用下这个软件，然后再来探索下其中比较重要一致性算法。 zookeeper安装和使用zookeeper的安装基本上可以按照 http://hadoop.apache.org/zookeeper/doc
2015-07-13 14:58:27
482
转载 Kafka设计解析（三）：Kafka High Availability （下）
http://www.infoq.com/cn/articles/kafka-analysis-part-3?utm_source=infoq&utm_medium=related_content_link&utm_campaign=relatedContent_articles_clk Kafka是由LinkedIn开发的一个分布式的消息系统，使用Scala编写，它以可水平扩展和
2015-07-13 14:57:01
682
转载 Kafka设计解析（二）：Kafka High Availability （上）
http://www.infoq.com/cn/articles/kafka-analysis-part-2?utm_source=infoq&utm_medium=related_content_link&utm_campaign=relatedContent_articles_clk Kafka在0.8以前的版本中，并不提供High Availablity机制，一旦一个或多个B
2015-07-13 14:56:13
498
转载 Kafka剖析（一）：Kafka背景及架构介绍
http://www.infoq.com/cn/articles/kafka-analysis-part-1/Kafka是由LinkedIn开发的一个分布式的消息系统，使用Scala编写，它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。InfoQ一直在紧密关注Kafka的应用以及发展，“K
2015-07-13 14:55:21
847
转载 大数据架构：flume-ng+Kafka+Storm+HDFS 实时系统组合
个人观点：大数据我们都知道hadoop，但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理，hadoop还是比较适合的，但是对于实时性比较强的，数据量比较大的，我们可以采用Storm，那么Storm和什么技术搭配，才能够做一个适合自己的项目。下面给大家可以参考。可以带着下面问题来阅读本文章：1.一个好的项目架构应该具备什么特点？2.本项目架构是如何保证数据准确性的？3
2015-07-13 14:52:42
641
转载 用Apache Kafka构建流数据平台
近来，有许多关于“流处理”和“事件数据”的讨论，它们往往都与像Kafka、Storm或Samza这样的技术相关。但并不是每个人都知道如何将这种技术引入他们自己的技术栈。于是，Confluent联合创始人Jay Kreps发布了《流数据平台构建实战指南》。他结合自己过去五年中在LinkedIn构建Apache Kafka的经验，介绍了如何构建一个公司范围的实时流数据中心。他们将该实时流数
2015-07-13 14:48:14
910
原创 zookeeper 入门讲解实例 转
转 http://www.blogjava.net/BucketLi/archive/2010/12/21/341268.htmlzookeeper使用和原理探究（一）zookeeper介绍zookeeper是一个为分布式应用提供一致性服务的软件，它是开源的Hadoop项目中的一个子项目，并且根据google发表的<The Chubby lock service for loos...
2015-07-07 17:58:40
105
原创 用Apache Kafka构建流数据平台
http://www.infoq.com/cn/news/2015/03/apache-kafka-stream-data?utm_source=infoq&utm_medium=related_content_link&utm_campaign=relatedContent_articles_clk 近来，有许多关于“流处理”和“事件数据”的讨论，它们往往都与像Kaf...
2015-07-07 14:43:10
139
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人