vip9850的博客

原创 eclpse下j2ee项目 tomcat 报 Initializing Spring root WebApplicationContext 项目无法启动

场景：j2ee项目 tomcat 启动报Initializing Spring root WebApplicationContext项目中某个Mapper.xml文件中把实体的类引用错误，或者项目中有多余的未清理的掉的Mapper.xml 两个冲突...

原创 读书笔记-1.3.mysql单条记录存储内容大小限制

1.show VARIABLES like '%max_allowed_packet%'； 查看mysql默认设置的大小，max_allowed_packet 就是限制大小的那一条记录5.6默认 4m2.更改设置：使用命令 set global max_allowed_packet = 2*1024*1024*10或是在mysql配置文件my.cnf里:设置max_al...

原创 读书笔记-数据集合的可用性五个表现

数据集合的可用性可以从数据的一致性、准确性、完整性、时效性及实体同一性五个方面进行考察。数据的一致性：指数据信息系统中各相关数据信息之间相容、不产生矛盾。雄性行为却是哺乳数据的准确性：指数据信息系统中每个数据表示现实物体的精准程度。数据的完整性：指数据集合包含的数据完全满足对数据进行各项操作的要求。数据的时效性：是指在不同需求场景下数据的及时性和有效性。对应用系统...

原创 读书笔记-Iass、Pass、SasS 、DaaS

IaaS公司提供的场外服务器，存储和网络硬件。PaaS：Platform-as-a-Service(平台即服务)PaaS公司在网上提供各种开发和分发应用的解决方案，比如虚拟服务器和操作系统。SaaS：Software-as-a-Service(软件即服务)SaaS云服务，比如：我们平时使用的苹果手机云服务，网页中的一些云服务等。DaaS是Data-as-a-servic...

转载 存储方案 ：HBase对比HDFS

HBase对比HDFSHbase与HDFS对比总结一下：什么时候选用Hbase，什么场景使用HDFS进行存储？1. 对于经常需要修改原有的数据的场景使用Hbase进行存储；2. 对于性能要求不高且只需要支持单条数据查询或者小批量数据进行查询，两者均可；3. 对于需要经常进行全表扫描进行大批量的查询的选择HDFS；那么有没有一种存储方式既能满足实时的更新，又能满足大量的数据分...

转载 Spark的分布式运行模式 Local，Standalone, Spark on Mesos, Spark on Yarn, Kubernetes

Spark的分布式运行模式 Local，Standalone, Spark on Mesos, Spark on Yarn, KubernetesLocal模式 Standalone模式 Spark on Mesos模式 Spark on Yarn Kubernetes模式Local模式Standalone模式的单机版，Master和Worker分别运行在一台机器的不同进程...

原创 Eclipse STS 安装时，提示缺少javaw.exe

转载 idea import project 和open 区别

前言：每次接手老项目，都得从git或svn下载下来，但是如果之前的项目不是用idea写的怎么办，可是你又习惯啦idea,那你必须把项目在idea上跑起来，那是用import还是用open呢,如何抉择，这篇文章就是针对这种情况分析的正文：1.首先如果你没有把svn或git集成idea,直接下来的项目，那这种情况，他并不属于idea模型的项目，所以这时候要选择导入项目--import。...

原创 块存储读书笔记

1外部存储请求（对象 文件。。）到达操作系统，操作系统通过阵列控制层控制多个存储设备。操作系统层通过文件系统规则，过滤掉不同硬件设备的差异性。EXT1、。。EXT4系列文件系统和XFS文件系统，Btrfs文件系统是Linux操作系统下的文件系统。这些文件系统的共同特点是：通过文件系统内部能够辨识的一个文件索引结构规范对下层的硬件设备结构进行封装，以便起到屏蔽和代理操作下层硬件结构的目的。...

原创 Hbase rowkey设计 与实际使用 

Hbase 设计 相同IO特性的Column放在一个Column Family会更高效 时间序列数据： 以时间作为key 和value作为列 （可以设置不同相关度的数据 为一个列簇） 1 减少行数，用更宽的行（数据量一定的情况更宽的行可以减少行数，因为你可能两张表各存储1亿，这样检索两亿，但要是放到一张表，它就只用检索...

原创 3.4缓存_进程内缓存EhCache

EhCacheEhCache 是一个纯Java的进程内缓存框架，具有快速、精干等特点，是Hibernate中默认CacheProvider。Ehcache是一种广泛使用的开源Java分布式缓存。主要面向通用缓存,Java EE和轻量级容器。它具有内存和磁盘存储，缓存加载器,缓存扩展,缓存异常处理程序,一个gzip缓存servlet过滤器,支持REST和SOAP api等特点。...

原创 3.3缓存_redis

1缓存，作用，高性能和高并发2常见的缓存问题:3 redis是单线程工作模型 nio异步模型 redis的线程模型文件事件处理器的结构包含4个部分：多个socket，IO多路复用程序，文件事件分派器，事件处理器（命令请求处理器、命令回复处理器、连接应答处理器，等等）。 2）文件事件 3）文件事件处理器连接redis，socket关联连接应答处理器写redis，...

原创 3.2 缓存_nginx

正向代理&反向代理 正向代理 （1）访问原来无法访问的资源，如google （2） 可以做缓存，加速访问资源 　　（3）对客户端访问授权，上网进行认证 　　（4）代理可以记录用户访问记录（上网行为管理），对外隐藏用户信息 反向代理 ...

原创 3.1缓存_cdn

3 cdn之所以快靠的是多节点、多线路、用缓存； 多节点，也就是多服务器，这样让用户没必要直接向源站请求资源，而是向最近的服务器请求就行了； 多线路，避免了跨线路互联不互通的尴尬； 缓存，cdn服务器会从源站拉取资源并缓存到内存中，当用户访问的时候直接从内存中取出来，这样就比从硬盘中去出来快了不少；其次cdn服务器知道源站资源发生变化后，会...

原创 1.1消息队列学习笔记

（1）为什么使用消息队列啊？核心的有3个：解耦、异步、削峰（2）消息队列有什么优点和缺点啊？优点：解耦、异步、削峰缺点：增加系统复杂度；增加系统故障率；某个消费者失败会有数据一致性问题。如何保证消息队列的高可用啊？kafka：多个broker组成，每个broker是一个节点；每个topic是一类消息，分为多个partition在不同的broker上，...

原创 2.1搜索引擎提炼2

（1）es的分布式架构原理能说一下么（es是如何实现分布式的啊）？ （2）es写入数据的工作原理是什么啊？es查询数据的工作原理是什么啊？ （1）es写数据过程 1）客户端发送请求到node，node成为coordinating node（协调节点） 2）coordinating node，对document进行路由，将请求...