• 等级
  • 213602 访问
  • 108 原创
  • 9 转发
  • 16696 排名
  • 25 评论
  • 59 获赞

iptables: No chain/target/match by that name.

问题描述 重设宿主机网关、重启宿主机 network . docker 容器处于运行状态,同网段机器不能访问 . 宿主机执行开放端口命令,提示如下: [root@localhost ~]# /sbin/iptables -A INPUT -p tcp --dport 8686 -j ACCEPT iptables: No chain/target/match by that name. 解...

2018-11-09 18:06:21

docker镜像基础: helloworld.war包镜像(上)

写在前面 基于 helloworld.war 包,制作 helloworld 镜像 熟悉 dockerfile 编写 验证 commit 提交镜像失败问题 cp web项目至容器后,不能commit生成最新镜像(volume导致) 实验素材 helloworld.war jdk-8u31-linux-x64.tar.gz apache-tomcat-8.0.53.tar.gz cen...

2018-11-04 18:07:50

简单Web 项目(基础): helloworld

写在前面 简单Web项目, helloworld, 由于网速等问题,非Maven(下载jar 包太慢,另,大财小用) 用于制做 Docker镜像 测试Web项目,具体制作过程将后续出系列文章 另,虽简单,但是真心找了很久! 废了很大劲,没找到直接可利用的 ! 代码框架 Myeclipse 2017 具体目录结构如下图: 访问效果 GitHub链接 helloworld 源代码下...

2018-11-04 15:50:30

CentOS 7: Restarting network (via systemctl): Job for network.service failed

写在前面 本机: 无线网络 虚拟机: 桥接网络 虚拟机与主机网络不通。 解决思路尝试 重新设置"虚拟机设置 – 网络适配器 – 桥接模式" 重启虚拟机电脑 重启虚拟机网络 重启失败, 具体提示信息如下图所示: ...

2018-11-03 17:01:10

Docker(一) Standard_init_linux.go:190: exec user process caused “exec format error

写在前面 最近需要将公司 Web项目 制成Docker镜像,大四实习时接虽触过(可以吹牛的水平),仅限于皮毛而已. 开始后续采坑工作. 问题记录 run.sh 具体内容 source /etc/profile sh /data1/apache-tomcat-7.0.91/bin/catalina.sh run 即, 通过脚本使 java 环境变量生效。 如果有更好的实现方式(不用写脚...

2018-10-21 16:51:18

Error:could not open '...jvm.cfg' (高效)

eclipse 运行报错 错误提示如下 原因分析 提示路径下的 jre (java运行环境) 文件夹不存在,eclipse 找不到配置下的jre,抛出异常。 解决方法 复制 JDK 路径下的 jre 文件夹 粘贴到 错误提示 路径即可。 例如,本例中,将D:\Program Files\Java\jdk1.8.0_112 路径下的 jre 复制到D:\Program Files路径...

2018-10-15 15:04:16

Error in loadNamespace(i, c(lib.loc, .libPaths()), versionCheck = vI[[i]]) : 'digest'

α 写在前面 如何利用R语言进行有效数据分挖掘 eclipse + StatET 实际开发中感觉有些繁琐 R语言开发工具之eclipse+StatET Jupyter + R 推荐 Jupyter 安装 R内核 β 问题描述 基于Jupyter,R语言开发过程中,通过 install.packages('xxxx') 命令安装某些包后,R内核启动失败。 具体异常如下所示...

2018-10-10 15:20:42

Python性能优化技巧(一)

写在前面 运行环境 jupyter 最近在处理大数据量问题,强化下Python性能优化方面的能力。 个人总结便于后续掌握与使用,仅供参考。 后续待更( 深入学习 ) … 1. 循环之外能实现逻辑,不放在循环内处理 [2.22倍] : a = range(10000) size_a = len(a) %timeit -n 1000 for i in a: k = len(a) %ti...

2018-10-08 17:43:02

jupyter启动闪退,错误日志(windows)

闪退问题 : Windows 安装Anaconda 后,总是不能正常启动,总是异常闪退。 卸载后重新安装,启动失败。 使用管理员权限,启动失败。 注释: 当然,如果可以打印错误日志,那问题就很容易解决了。 另,我这里不是启动路径引起的问题(大多数网文提供的答案是路径问题)。 附,该问题遗留了几个月时间,一时也想不到好的解决方法。 异常查找 : 在 Anaconda Prompt...

2018-09-28 10:26:54

gpx文件解析 Demo

GPX (the GPS Exchange Format) WHAT IS GPX? GPX (the GPS Exchange Format) is a light-weight XML data format for the interchange of GPS data (waypoints, routes, and tracks) between applications and W...

2018-07-13 00:49:00

ERROR: Can't get master address from ZooKeeper; znode data == null when using Hbase shell(单机版,HBase)

HBase实验 学习HBase 基础语法。 百度了很多 CSDN, 然而并没有解决我的问题。 文章记录HBase 单机版实验过程,并配置Web UI界面 安装过程 apache.hbase.1.2.6 下载解压至Linux hbase-site.xml 配置 <configuration> <property> <nam...

2018-04-17 23:20:15

hadoop文件上传下载(java实现工具类HDFSUtil)

HDFSUtil HDFS 基础开发,待补充、重构、优化 实验环境 hadoop 伪分布式环境 将eclipse根目录下local.txt文件上传至HDFS 将HDFS系统中local.txt文件下载至eclipse根目录下 代码 package Utils; import java.io.BufferedInputStream; import java.io.File...

2018-04-16 00:01:43

KettleDatabaseException: Error occurred while trying to connect to the datab

Kettle(ETL)工具使用 熟悉大数据日常开发工具. Kettle 一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,数据抽取高效稳定。 ETL : EXTRACT(抽取)、TRANSFORM(转换)、LOAD(加载)的简称,实现数据从多个异构数据源加载到数据库或其他目标地址,是数据仓库建设和维护中的重要一环。 使用版本 Version 7.1 ...

2018-04-15 12:56:47

org.apache.spark.sql.AnalysisException: cannot resolve '`id`' given input columns

场景描述 Spark 获取MySQL数据并持久化入 json、parquet文件过程记录分析 解析异常 具体原因待分析 Exception in thread "main" org.apache.spark.sql.AnalysisException: cannot resolve '`id`' given input columns: [ id, name, age, sex];; '...

2018-04-14 22:59:47

Hadoop实战-MR倒排索引(三)

场景描述 通过切入具体示例代码,解决问题,从而积累 Hadoop 实战经验。 倒排索引,源于实际应用中需要根据属性的值来查找记录,通过倒排索引,可以根据单词快速获取包含这个单词的文档列表。 实验数据 输入 tom,LittleApple jack,YesterdayOnceMore Rose,MyHeartWillGoOn jack,LittleApple John,MyHea...

2018-04-11 22:58:11

master: ssh: connect to host master port 22: Connection refused

场景描述 本地 SecureCRT 连接虚拟机中伪分布式式Hadoop 环境,进行中,突然断电、断网,虚拟机 IP 地址更改(与本机不在同一网段)。 修改无线连接,恢复至同一网段 SecureCRT 连接 虚拟机服务器 失败 本机 ping 虚拟机IP 不通(未知主机) 虚拟机 ping 本机IP 不通(未知主机) 关闭虚拟机,重启电脑 重启 Hadoop服务器 异常信息 ...

2018-04-11 21:24:14

Hadoop实战(二),org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray

场景描述 探索Hadoop开发经验,从而进一步理解Haddoop源码设计及核心思想 实验环境 伪分布式 hadoop 2.6.4 实验内容 打印HDFS目录信息 在HDFS中新建文件 写入中英文数据 代码实现 具体包、配置不在详述 . package hadoop; import java.io.IOException; import java.io.InputStrea...

2018-04-10 00:05:43

Call to xx/xx:9000 failed on connection exception( hadoop )

场景描述 基于eclipse + hadoop开发过程中,eclipse不能访问远程hadoop服务器文件系统,本地 CMD 窗口 Telnet 失败。 失败提示 1 : 本地Windows CMD窗口提示 telnet remote_hadoop_ip 9000 # 测试端口连通性 # 正在连接x.x.x.x...无法打开到主机的连接。 在端口 9000: 连接失败 失败提...

2018-04-09 22:45:18

MySQL分库分表面试知识总结

场景分析 Web开发工作,亦或是海量数据开发工作,学习分库、分表、分区等知识都是很有必要的 。 面试的时候,也有可能也会被问到。不过作为一个有经验的Coder,不熟悉分库、分表技术确实有些 low。 基础概念 分表,能够解决单表数据量过大带来的查询效率下降的问题; 分库,面对高并发的读写访问,当数据库master服务器无法承载写操作压力时,不管如何扩展slave服务器,此时都没...

2018-04-09 00:04:51

jupyter pyspark 开发环境搭建(在线、离线)

应用场景 在Jupter中,使用 Python语言进行数据分析是一种潮流/趋势。 如何在 Jupyter 中引入 Spark ,从而进行大数据清洗、挖掘等是值得研究的问题。 技术方案的选择有很多,然由于多方面原因终究要探索出适合自己的~ 实现方案 方案 1 利用 Apache Toree 在Jupyter 中引入 Spark, 从而建立Scala,PySpark,SparkR...

2018-04-07 18:28:51

kngines

人各有命,脚下的路如果不是自己的选择,那么旅程的终 点在哪儿也没人知道,你会走到哪儿,会碰到谁,都不一定。而我也正在踏上一条不知道终点的路程,因为在那一天我………… ...展开 收起
关注
  • 计算机软件/大数据研发工程师
  • 中国 浙江省 杭州市
奖章
  • 持之以恒