1 TKE_aoliao

尚未进行身份认证

我要认证

暂无相关简介

等级
TA的排名 15w+

vmware container容器

容器:应用程序的开发由于容器的出现发生了巨大的变化在数据中心,传统应用程序通过现代应用程序功能和模型得到了增强。但是传统的应用程序开发与现代的应用程序开发是不同的。传统应用程序的开发: 大而全(身份验证 安全 加密 负载均衡 高可用 网络通信等)瀑布式开发:瀑布式开发周期需要6到12个月才能交付一个产品,周期相对较长,所以需求有变化的风险,此外,最初的需求可能会被误解,但是这种误解可能只有在项目结束时才会被意识到移交给运营团队:当产品准备好投入生产时,就移交给运营团队,运营团队从那时开始部署和管

2020-05-29 22:35:11

vmware-container

容器:应用程序的开发因为容器的出现发生了巨大的变化,传统的应用程序的开发时大而全,身份验证 安全加密 负载均衡等等app都要做容器出现之后作为现代应用程序的开发基于容器开发:云原生应用程序 CAN(cloud native application)微服务:功能1 服务1 功能2 服务2 不同的team负责不同模块的开发,一个应用环境分成六个模块开发 运行环境不同 把运行环境都...

2020-04-27 17:31:38

streaming 时钟统计单词 java开发

要求:统计单词,每10秒钟输出一个统计结果:思考:几个spout?几个bolt?BoltA去识别时钟 如果是B 每10s就输出 这不需要如果A去识别时钟,A中的task的前后顺序不一定一样代码实现:package streaming;import org.apache.commons.collections.map.HashedMap;import org.apache...

2020-04-27 17:20:21

streaming API Java 二次开发-2

ack机制满足的要求:1.spout一定要指定messageid 如果没有,无法识别,每个环节都带有tupleid 哪一些id进行异或 通过messageid2.bolt在发送消息的时候一定要是锚定的方式 将收到的tupleid 和发出去的tupleid 进行异或3.acker进程必须有spout开启ack和不开ack:不启用:Collector.emit(new Value...

2020-04-27 17:08:14

streaming API java开发-1

streaming组件流程Worker的启停:如果死掉了就死掉了 自动重试 不是自己 而是nimbus通过zookeeper接受worker的心跳得知1.客户端提交任务jar包给nimbus2.nimbus上交给zookeeper3.supervisor 得知有任务之后从zookeeper下载 到nimbus上下载jar包4.启动worker 向zookeeper注册5....

2020-04-27 17:03:20

HBase API java二次开发

几个重要HBase API类和数据模型之间的对应关系java类HBase数据模型HBaseAdmin HBaseConfiguration数据库HTable表(Table)HTableDescriptor列表(CF)Put Get Scanner列表修饰符1.HBaseAdmin作用:提供了一个接口来管理HBase数据库表信息,它提供的方法包...

2020-04-27 16:39:08

模型评估与优化-2

损失函数的概念损失函数(Loss function):是用来估量模型的预测值与真实值的不一致程度,是一个非负实值函数。损失函数越小,模型的鲁棒性就越好。0-1损失函数:该损失函数的意义就是,当预测错误时,损失函数值为1,预测正确时,损失函数值不考虑预测值和真实值的误差程度,也就是只要预测错误,预测错误差一点和差很多都一样。Note: 由于相等这个条件太过严格,因此我们可以放宽条件,即满足...

2020-04-18 11:40:00

模型评估和优化-1

数据集划分数据集(dataset):在机器学习任务中使用的一组数据。数据集中每一个数据称为一个样本。反映样本在某方面的表现或性质的事项或属性称为特征。训练集(training data):训练过程中使用的数据集。数据集中每个训练样本称为训练样本。从数据中学得模型的过程称为学习 (训练)。测试集(testing data):学得模型后,使用其进行预测的过程称为测试,使用的数据集称为测试集,每...

2020-04-18 11:13:20

mapreduce API--- join 案例

join案例两张表:Province:----><1,a#beijing>1 beijing2 hangzhou3 shaoxing4 wenzhou5 tianjing6 taizhou7 henan8 wuhanData1 2010 1964<1, b#2010 1962> <1,b#2010,2399>1 2010 2399...

2020-04-15 20:14:34

mapreduce java API 二次开发[wordcount]

shell端执行mapreduce1.准备数据,这个数据必须存储在hdfs上,并不是linux目录上的数据2.mapreduce程序Wordcount---->词频统计/export/servers/hadoop-2.6.0-cdh5.14.0/share/hadoop/mapreduce/mr-examples(有很多的jar包)3.将mapreduce程序提交到yarn上面去运...

2020-04-15 13:12:41

vmware资源管理-2

task manager要监视来宾操作系统中的性能,请使用您熟悉的工具,如Windows任务管理器。Windows任务管理器帮助您度量来宾操作系统中的CPU和内存使用。您在来宾操作系统中使用工具进行的度量反映了来宾操作系统的资源使用情况,而不一定反映了虚拟机本身(VMware)的资源使用情况VMware Tools中的Perfmon DLL提供了虚拟机处理器和内存对象来访问虚拟机中的主机统...

2020-04-13 22:16:32

vmware 资源管理-1

内存虚拟化基本概念把内存层级分三个层级客户操作系统虚拟内存由操作系统呈现给应用程序(不是真实的物理内存)客户操作系统物理内存由vmkernel提供给虚拟机,这个内存空间具有与客户操作系统提供给应用程序的虚拟内存地址空间相同的属性。真实的物理内存,虚拟机实际开销的物理内存(VMM欺骗虚拟机 以最小的内存运行最多的虚拟机 内存回收)由vmkernel管理的主机内存提供了一个连续的,可寻址的...

2020-04-13 21:59:27

【数据预处理】离散化,等频划分

数据样例1.统计出每列数据中的最大值,最小值,中位数,平均数以及四分位数2.定义一个函数,对col5列信息离散化,小于等于100的为A类,小于等于1000的为B类,大于1000的为C类3.定义一个函数,对col5列进行等频划分import xlrdimport pandas as pdimport numpy as np#样例数据所在位置file_name='F:\\hcie1....

2020-04-11 18:23:12

HDFS java API 二次开发

文章目录HDFS读写流程API java实现HDFS读写流程1.客户端通过调用 DistributedFileSystem 的create方法,创建一个新的文件。2.DistributedFileSystem 通过 RPC(远程过程调用)调用 NameNode,去创建一个没有blocks关联的新文件。创建前,NameNode 会做各种校验,比如文件是否存在, 客户端有无权限去创建等。...

2020-04-11 13:46:44

vsphere update manager

About vSphere Update ManagerVsphere update manager (绑定在venter server上)支持esxi主机,虚拟机硬件,vmware tools和虚拟设备的集中,自动化补丁和版本的管理:(虚拟化环境里面重要的组件的统一升级管理 )Vsphere update manager 通过以下方式降低安全风险:减少漏洞的数量(汽车轮胎 慢慢瘪了没气了...

2020-04-08 22:04:06

特征选择--wrapper,Embedded

wrapper定义Wrapper:包装法,根据目标函数(通常是预测效果评分),每次选择若干特征,或者排除若干特征。包装法需要结合后续选择的机器学习算法,一起选择出能使最终算法达到较高性能的特征子集。根据目标函数,每次选择部分特征,或者排除部分特征。常用包装法:递归特征消除法:简称RFE,使用一个基模型来进行多轮训练,每轮训练后,移除若干权值系数的特征,再基于新的特征集进行下一...

2020-04-06 11:07:54

vmware storage -2

文章目录VMFS datastores过度使用数据存储管理增加VMFS数据存储的大小删除或卸载VMFS 数据存储多路径算法NFS存储NFS v3 and NFS v4.1配置ESXI主机身份验证和NFS kerberos凭证卸载NFS数据存储NFS多路径VSANVMFS datastores访问块级存储时使用VMFS或vsphere虚拟卷数据存储:VMFS针对存储和访问大型文件进行了优化...

2020-04-05 14:02:11

vsphere DRS

文章目录DRS介绍Vsphere DRS集群先决条件DRS集群自动化级别设置vSphere DRS集群设置:预测DRS其他集群设置:交换文件位置vSphere DRS集群设置:虚拟机关联vSphere DRS集群设置:DRS组VM-Host关联规则VM host -关联规则:优先VM-Host关联规则:RequiredvSphere DRS集群设置:vm级自动化向集群添加主机查看DRS集群信息维护...

2020-04-05 11:36:08

关联算法,特征算法python实现

利用python对数据关联分析,实现Apriori算法def apriori(D, minSup): '''频繁项集用keys表示, key表示项集中的某一项, cutKeys表示经过剪枝步的某k项集。 C表示某k项集的每一项在事务数据库D中的支持计数 ''' #先求出1项集合及其支持计数,注意此处C1是字典,key为项集,value是计数 ...

2020-03-31 18:44:12

vsphere高可用

减少计划停止时间,放置计划外的停止时间,维护业务的连续性**计划类停止时间:**设备的硬件的维护,旧的服务器淘汰,服务器的硬件升级,有些组件可以支持热插拔,但有些是不支持的,比如说主板损坏,得停机,进行维护更换,vsphere的高可用可以减少停机非计划的停机:对于esxi主机或者使用vcenter server 通过共享存储 使用多个网口绑定 冗余网络链路(一条上行链路出现故障,可以通...

2020-03-31 11:43:10

查看更多

勋章 我的勋章
  • 签到新秀
    签到新秀
    累计签到获取,不积跬步,无以至千里,继续坚持!
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv3
    勤写标兵Lv3
    授予每个自然周发布7篇到8篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。