- 博客(102)
- 资源 (13)
- 收藏
- 关注
RSS订阅原创 我曾走在崩溃的边缘：俞敏洪亲述新东方创业发展之路 -- 读书笔记
读完这本书后，启发很大，尤其说的只要坚持做正确的事情，好的结果自然会来。人生就是一场马拉松，起起伏伏很正常，关键是要坚持做正确的事情，从绝望中寻找希望。这本书，是在微信阅读app上阅读的。
2024-03-10 15:32:34
407
1
原创 美国生活经济学 -- 读书笔记
一直听朋友同事讲，美国生活的制度，自己本身没有接触过，所以也特别好奇和中国的与众不同，以及为什么这么多人移民美国，读完这本书后，会有一个更深刻的认识。本书是在微信阅读app上阅读的。出国的目的本就不该纯粹是为了赚钱（如果单为赚钱的话，去非洲、东南亚赚大钱的机会比欧美要多得多，国内前20年更多。出国的目的，就是在人生旅途中看不同的风景，享受的是精彩的过程。
2023-10-28 21:39:51
155
原创 Understanding Cascade Left Joins and Writing Complex Queries
Understanding Cascade Left Joins and Writing Complex Queries。
2023-07-15 16:54:30
250
原创 ＜＜编写可读代码的艺术＞＞ 读书笔记
本书作者重点强调了代码的可读性对于软件开发的重要性，并提供了许多实用的建议和技巧，以帮助读者编写更加易于理解和维护的代码。此外，作者还提供了一些常见的代码陷阱和错误，并指出如何避免这些问题。
2023-04-01 22:40:12
156
原创 在运行在M1的ubuntu虚拟机上安装Mediawiki
Mediawiki已经成为我日常工作记录笔记的重要的工具，用它建立知识树很方便，并且search也很快，要想把mediawiki 跑起来，要setup一个VM，然后在VM上用docker 将mediawiki setup。最近开始转向arm架构的M1 Macbook了，不得不说M1的续航，性能确实用起来很丝滑。192.168.64.8 是我的虚拟机IP。因为底层系统架构从x86到ARM，所以之前的虚拟机不能在M1上直接用，并且docker image也必须用arm64版本的，一切都要从头开始。
2023-02-05 10:48:45
660
原创 MAC M1重启后自动启动虚拟机
笔者在M1通过UTM setup了一个虚拟机，虚拟机开机的时候会自动启动我设置的服务，那如何让M1重启后自动启动虚拟机呢？因为M1上virtualbox 不支持，我用的UTM去setup的虚拟机，具体过程详见。最后重启Mac后，虚拟机自动启动。创建自启动plist文件。
2023-02-05 10:31:11
508
原创 读Go语言精进之路
Go语言中接口与实现之间是隐式的，实现者仅需实现接口方法集中的全部方法，便算是自动遵守了契约，实现了该接口。接口的方法数量尽量控制在1~3个。接口越小，抽象度越高，被接纳度越高易于实现和测试。契约职责单一，易于复用组合。
2023-01-12 17:26:57
499
原创 用Tinyproxy搭建自己的proxy server
Tinyproxy 是一个轻量级，跨平台，开源的，同时支持http/https两种方式代理。
2022-12-03 23:35:17
2423
原创 Tableau 入门系列之各种图形绘制
Tableau 是一个可视化分析平台，它改变了我们使用数据解决问题的方式，使个人和组织能够充分利用自己的数据。Tableau提供了非常丰富的图表，通过及其强大的功能，使得数据的可视化极其容易。Tableau，至少是我遇到最强大的可视化平台。
2022-12-01 23:17:35
2303
2
原创 一文搞定通过UTM 在MAC M1 上安装centos/ubuntu VM
自从买入Macbook M1 之后，在MAC上安装centos虚拟机一直是想尝试的事情。最近，virtualbox 的最新的beta 版本说是已经支持在m1上运行，结果今天测试了一下发现并不work。然后就折腾其他方案，终于work了。本文描述的是通过UTM + centos9 实现在Mac M1上启动centos VM。
2022-11-03 14:59:58
2664
原创 大数据入门之Sqoop
用于在Hadoop和传统的数据库(Mysql, Postgresql)进行数据的传递。可以通过Hadoop的MapReduce把数据从关系型数据库中导入到Hadoop集群。传输大量结构化或半结构化数据的过程完全是自动化的。sqoop的导入进程是一个自动生成出来的java class，因此它的很多组件都可以自定义，比如导入的格式、文本的格式、到出的格式等等。
2022-10-05 15:25:37
695
原创 大数据入门之 Hadoop,HDFS,Hbase,Hive
Hadoop：是泛指大数据生态，实际上基本包括 存储(HDFS) + 计算(MapReduce);HDFS: Hadoop分布式文件系统，主要是解决存储的问题;Hbase: 基于Hadoop的高性能nosql数据库;Hive: 最常用的数据仓库;
2022-10-03 23:00:29
4253
2
原创 思考的技术- 读书笔记
我只是想提醒大家，不管选择什么样的人生，在新世界里，懒于求知的人将没有生存的空间。世上没有毁于用脑过度的人。比别人多花两倍时间思考的人，就可以拥有十倍于别人的收入。比别人多花三倍时间思考的人，就能比别人多赚百倍的利润。个人思考： 思考力的差距，决定了收入，越是深入思考，越能带来超额的收益。培养孩子，一定是不能只培养成一个会考试，不会思考的人，拥有独立思考的能力是非常重要的。如书名《思考的技术》一样，全书一直围绕如何思考进行论述。
2022-09-18 21:49:49
535
原创 宏观经济学通识课-读书笔记
学习宏观经济学可以帮助研判宏观大势，辨识经济周期，避免损失。研判宏观大势主要看历史趋势、发展阶段、地缘政治、国家体制和机制、人力资本、自然禀赋与文化。这种判断需要我们集中 注意力在主旋律上，而不是短期插曲上，我们应从当下热点事件中 识别出会影响大趋势的事件。辨识经济周期非常重要，但难在如何辨识。学习宏观经济学可以让我们注意到一些关键数据，同时理解那些重大事件是如何影响整体经济的，以及这种影响的整个链条是如何衔接的。
2022-09-04 23:14:42
1118
原创 比亚迪唐DMI购车经验分享
提车后，在市区开过也开过高速，总体而言，还是比较符合预期。高速上，馈电油耗在7左右。平时，在家附近开开，基本是纯电，我是用ECO模式，纯电是真省钱。吐槽的点是，过减速带，比较晃。第三排座椅，因为没有空调，夏天比较热。......
2022-07-24 22:57:01
3473
原创 Angularjs ng-table的使用(可以加button)以及angularjs学习资料
题记：现在做的这个项目，前端框架用的是angularjs，所以就又学习起来了。说下最近的近况，最近小论文已经写完了，但是还没有找老师看，想尽快投出去，另外工作现在网易应该是跪了，其他的还没开始投起来，发现华为在济南有研发岗位，争取可以到济南研发岗，另外也希望公司这边可以留下，现在每天在公司code，都没有时间好好准备一面试，一定要在有空的时候，好好看下java的设计模式，多线程，文件流以及网络方面
2022-05-29 23:39:15
462
原创 Modbus协议简单总结
1.Modbus协议简介MODBUS是法国MODICON(莫迪康)公司最先倡导的一种通讯规约，经过大多数公司的实际应用，逐渐被认可，成为一种标准的通讯规约，只要按照这种规约进行数据通讯或传输，不同的系统就可以通讯。目前，在RS232/RS485通讯过程中，更是广泛采用这种规约。当在Modbus网络上通信时，此协议决定了每个控制器须要知道它们的设备地址，识别按地址发来的消息，决定要产生何种行
2022-05-29 23:35:32
2003
原创 用Vercel建站GitHub Pages 并配置DNS
通过vercel解决国内访问GitHub Pages 慢以及baidu不能爬github pages的问题。
2022-05-29 14:10:12
2322
2
原创 hexo + github pages 创建你的个人博客
欢迎访问: https://shufanhao.github.io为什么要创建自己的博客自己的博客是写在CSDN，shu-frank的专栏。但为什么还要自己setup blog 呢？有一个自己定制的Website不爽么。学习下Hexo + github pages可以写点防止被墙的文章。hexo参考Stunhexo 安装创建 github pages 和创建普通的 github 仓库没太大区别（记住仓库名称是 username.github.io）。以下安装基于 mac。安装 n
2022-05-02 23:12:28
173
原创 如何高效处理分析大文件
题记：我们可能会遇到需要对一个很大的文件的某一行进行去重，排序，或者对两个文件进行合并等。本文主要测试了几种不同的方案，并进行比较。场景: 对4百万数据的CSV文件进行去重测试环境：MacBook ProIntel Core i9 16GB Memory测试文件:# total lines$ wc -l test.csv42013405 test.csv$ ls -lh test.csv-rw-r--r--@ 1 haofan staff 448M Nov 6 22:.
2021-11-07 17:19:17
1809
原创 Mac 定时自动发送邮件
文章目录WhyHow1. 在automator中创建application2. 创建calender 自动定时发送email3. 自行测试ReferWhy工作中，有时需要发送固定格式的email，每次人工做，比较繁琐，本篇博客描述了一种可以自动定时发送email的方式。下面例子中用的Mac自带工具有：automatormailcalendarHow1. 在automator中创建application关于Mac 自带的automator不懂的，自行百度。打开automator 并且
2020-09-20 21:51:19
5237
原创 Spinnaker 初探
1 Spinnaker 是什么Spinnaker 是 Netflix 的开源项目，是一个持续交付平台，它定位于将产品快速且持续的部署到多种云平台上。Spinnaker 通过将发布和各个云平台解耦，来将部署流程流水线化，从而降低平台迁移或多云品台部署应用的复杂度，它本身内部支持 Google、AWS EC2、Microsoft Azure、Kubernetes和 OpenStack 等云平台，并且...
2019-12-09 17:27:17
390
原创 理解k8s 网络模型
TODO 翻译：比较好的文章：https://sookocheff.com/post/kubernetes/understanding-kubernetes-networking-model/
2019-06-17 19:36:45
525
原创 Container Runtime 如何用CNI
翻译：https://karampok.me/posts/container-networking-with-cni/TODO：
2019-06-02 21:34:33
1444
原创 K8S Runtime CRI OCI contained dockershim 理解
在docker/k8s时代，经常听到CRI, OCI，contained和各种shim等名词，看完本篇博文，您会有个彻底的理解。典型的K8S Runtime架构从最常见的Docker说起，kubelet和Docker的集成方案图如下：当kubelet要创建一个容器时，需要以下几步：Kubelet 通过 CRI 接口（gRPC）调用 dockershim，请求创建一个容器。CRI 即容器...
2019-06-02 21:33:04
6881
6
原创 详解一次完整的数据包传输过程 -- 层层递进
文章目录例子 PC1 发送http请求到ServerStep1： PC1封装数据包Step 2: 数据到达集线器Step3: 数据到达R1Step4: 数据到达R2Step5: 交换机处理Step6: 服务器处理反向传输总结题记：本文主要是摘自CCNA指南中讲的，再加上自己的理解，详细阐述一次完整的数据传输过程。之前在考CCIE的时候也看过，后来有些忘记，特总结记录。重要：封装报文是从上层...
2019-05-11 22:50:47
34655
17
原创 可伸缩的Web系统架构和分布式系统 （译）
文章目录1 分布式系统设计的原则2 基本的Web系统2.1 例子：图片托管应用程序2.2 服务拆分2.3 Redundancy最近对高可用架构有些兴趣，看了下相关资料，总结下。1 分布式系统设计的原则Avilability。 需要对关键模块做redundancy，快速的恢复对于部分系统，和优雅的降级当问题出现时。Performance。访问Web的速度。Reliability。对数据的...
2019-04-27 21:58:02
1157
原创 高可用架构中 LVS,Keepalived,HAProxy解析以及实战
文章目录LVS1 什么是LVS2 怎么用3 原理3.1 后端调度算法3.2 如何实现题记：在工作中有时会碰到LVS, Keepalived, HAproxy, Nginx。有时候用到了只是会用某项技术，但是并没有把他们融会贯通。此篇博文特意总结下。LVS参考: http://www.zsythink.net/archives/21341 什么是LVSLVS是一种基于TCP/IP的负载均衡...
2019-04-27 12:31:42
4131
原创 高可用架构中 VIP/ Secondary IP(辅助IP)/ alias IP
文章目录概述Secondary ipalias ip容器网络的应用总结概述在之前工作中遇到的HA的case，大部分还是通过在Linux上设置Secondary IP或者alias ip来向外暴露VIP(virtual IP)的方式提供北向的HA功能。这样保证某一个server down掉之后，还可以通过VIP来访问服务。前提条件是要有某种机制可以发现某个server down掉，并在另一台se...
2019-04-22 23:23:00
2513
原创 如何用Kubernetes建立CDN
文章目录用户越多，问题就越多解决方案：内容分发网络(CDN)CDN服务商的问题kubeCDN架构设计解决的问题开发的挑战Terraform 代码重构ExternalDNS的问题kubeCDN的改进不同云服务商的支持多地域的自动伸缩预定义区域列表总结趁着假期，翻译了一篇文章，已经发表在dockerone。kubeCDN：基于Kubernetes的自托管CDN。GitHub: https://g...
2019-04-06 22:40:15
807
原创 查看host/container veth pair 关系
1 问题背景容器中的eth0实际上和外面host上的某个veth是pair关系，然后通过bridge，如docker0 实现在一个host上容器间通信。但是有没有一个办法可以知道host上的vethxxx,到底是和哪个container eth0 是pair关系呢 ？2 实现思路2.1 思路1容器里面，查看 # cat /sys/class/net/eth0/i...
2019-03-16 10:31:56
5061
2
原创 K8S kube-proxy ipvs 原理分析
1 在k8s 设置ipvs模式1.1 Perquisites1.2 修改kube-proxy 启动参数2 ipvs kube-proxy原理分析2.1 集群内部通过cluster ip访问到Pod2.2 集群外部通过node ip 访问到Pod2.3 总结Refer1 在k8s 设置ipvs模式因为iptables的效率比较低，在k8s v1.11中已经release 了ipvs。本文将描述...
2019-02-24 16:47:03
7717
原创 K8S kube-proxy iptables 原理分析
文章目录Precondition什么是 Kube ProxyKube Proxy 原理搭建一个GuestBook 例子分析iptables1. 创建iptables实现外方通过nodePort访问2. 分析k8s的 iptables2.1 集群内部通过cluster ip 访问到Pod2.2 集群外部通过node ip 访问到PodReferPrecondition要理解这篇文章之前，需要先对...
2019-01-29 17:12:02
4860
6
原创 Cassandra 分页 读取数据
文章目录为什么要分页方案选择TokenJPAPagingState参考为什么要分页如果一个查询得到的记录数太大，一次性返回回来，那么效率非常低，并且很有可能造成内存溢出，使得整个应用都奔溃。所以，在数据量比较大的时候，分页还是非常有必要的。方案选择TokenCassandra 提供了Token 函数 来记录上次查询的最后一条数据，但是它需要多个primary key, 不适合我们项目。所...
2018-10-23 18:25:41
3410
原创 Linux alarm signal (SIGALRM) to detach process isAlive
题记最近做项目遇到的问题，程序跑了多个process，每个process都是相互独立的，为了解耦，类似于微服务的架构，我们要求系统可以detach 到 主线程跑飞，死循环等其他bug 问题，最初的设计方案是：每个process 都会给每一个monitor的process 去发送keep alive 消息，由monitor去收集每个module的keep alive消息，然后去判断是否process...
2018-06-09 11:20:49
744
原创 Go 实现 nginx log 读取 分析 写入InfluxDB 并用Grafana 显示
参考：慕课网https://www.imooc.com/learn/982 1. 系统结构用Go实现文件读取，并且将log 分析并写入InfluxDB，最后用通过配置Grafana 显示log file –>log process –> influxdb –> grafana监控需求：某个协议下的某个请求在某个请求方法的QPS和响应时间和流量2. Go 接收Go 并发执行 将复杂的任务拆分，通过
2018-05-01 23:04:17
2762
原创 Kubernetes 内部组件工作原理
翻译自:https://blog.heptio.com/core-kubernetes-jazz-improv-over-orchestration-a7903ea92ca原作者：Joe Beda (Dad of two. CTO of Heptio. Started Google Compute Engine, Kubernetes and Google Container Engine.) ...
2018-04-22 00:04:01
4504
AngularJs Tooltips
2015-12-06
angularjs ng-table demos
2015-09-11
mongodb使用-增删改查、colleciton关联、_id作为主键实现update
2015-07-24
jquery实现json数据填充到table表格中并且实现remove add 数据
2015-07-08
android下用java调用c/c++实现jni
2014-12-26
海思MPP移植到eclipse下实现在eclipse下用海思交叉编译器实现编译工程
2014-12-01
android service 通过broadcast通知activity
2014-08-29
基于LPC1768的远程数据采集
2014-02-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人