- 博客(11)
- 收藏
- 关注
RSS订阅原创 如何准备Google Associate云工程师认证考试？
负载均衡：1： 谷歌负载均衡按照地区分成global & region按照外部和内部流量LB可以分为：HTTPS load balancing, SSL Proxy, TCP proxy Network TCP/UDP LB(外部）；和Intern TCP/UDP LB（内部）。谷歌的LB针对全球的LB可以使用谷歌的premier tier network（谷歌自主拥有光网）如果是regional LB可以考虑使用standard tier network(就是谷歌和其他服务商共享网路）
2020-06-21 12:13:51
1165
翻译 利用谷歌云DATAFLOW产品把BUCKET中的JSON文件转化为CSV
在这篇文章中我们把一个JSON文件要转化为CSV文件，使用工具是GCP DATAFLOW和PYTHON。首先我们需要创建一个服务账户SERVICE ACCOUNT，这个服务账号代表程序运行我们起名叫做“DATAFLOW WORKER“角色，还需要输出成一个JSON文件备用。The JSON file from the created Service Account is import to operate from local terminal rather than cloud Shell. S.
2020-06-11 09:00:15
391
原创 谷歌云GCP上托管Kubernetes集群部署web前后端任务报告-系列1
谷歌云GCP上托管Kubernetes集群部署web前后端任务报告-系列1谷歌云介绍（1）谷歌云托管Kubernetes集群 GKE和应用案例（2）部署步骤了解运行中的集群从github上下载配置yaml文件部署controller & service创建后台控制器pod部署谷歌云介绍（1）谷歌云托管Kubernetes集群 GKE和应用案例第一步: 看一下界面长相？从控制台点击Kubernetes Engine–>Clusters打开了集群控制面板 Dashboard，可以看到目前
2020-06-10 11:15:30
1012
转载 转载:python脚本在crontab中执行的几个坑
转载:python脚本在crontab中执行的几个坑转载地址：http://flyer0126.iteye.com/blog/2388142工作中遇到的小问题，随手记录一下。最近写了一个数据同步python任务脚本，手动执行正常，但配到crontab中无法运行，折腾半天终于搞好了，大笑一、绝对路径问题crontab中python命令使用绝对路径，如：Python代码 收藏代码*/5...
2020-01-18 11:57:31
218
原创 如何利用python来执行Athena批处理任务？
#!/usr/bin/env python3import boto3#Function for executing athena queriesdef run_query(query, database, s3_output):client = boto3.client(‘athena’)response = client.start_query_execution(QueryStri...
2019-12-10 21:50:44
625
转载 MySQL查看数据库表容量大小
reference：https://www.php.cn/mysql-tutorials-401945.htmlhttps://www.cnblogs.com/rxbook/p/9168500.htmlMySQL查看数据库表容量大小【https://blog.csdn.net/fdipzone/article/details/80144166】1.查看所有数据库容量大小selectt...
2019-12-09 20:26:09
105
原创 vertica数据库用python客户端（vertica-python）和原生vertica JDBC连接下的速度区别
vertica在使用的时候主要是要在数据库内使用，但是如果假设必须出现需要用python来获得数据的时候的话，就会涉及到数据IO的问题，数据要从数据库移动到python端，如果是处理大数据的话这个成本是非常高的。下面就给个例子说明我的调查结果，只说结论就不上截图了。数据量连接方式数据传输速率（MB/s）1.344 百万数据表DBeaver+vertica官方JDBC4...
2019-11-23 19:06:57
1209
原创 如何利用aws亚马逊基础设施（负载均衡+弹性IP)在EC2实例上部署非HTTPS的Apache web服务
背景介绍：这个文章的目的是要利用aws基础设施如EC2实例，弹性IP，负载均衡和S3在EC2上安装Apache webserver并且还需要在实例EC2上挂载一个EBS卷保证实例提供服务的页面资源必须是存放在挂载的EBS卷而不是EC2启动自带的volume。需要的资源如下：亚马逊账户并且有资源创建权限的 EC2实例T2.micro一个，EIP弹性IP资源一个，ALB应用负载均衡器，EBS卷...
2019-10-13 10:29:26
1076
翻译 国外原创机器学习面试最基本的41个问题
Q1- bias and variance之间的关系?More reading:Bias-Variance Tradeoff (Wikipedia)Bias的原因通常是由于错误或者过分简单的假设造成学习算法的误差. 这些bias导致的模型无法足够拟合数据. 这样就无法得到比较高的准确度(accruacy) 也无法有效generalize泛化模型从训练数据到测试数据.Variance...
2019-10-10 16:21:07
166
转载 衡量机器学习模型的三大指标：准确率、精度和召回率 (F1 Score 原始文献)
我个人一直认为一个学科和知识的来源最重要,可以直接溯源的知识来的最可靠!所以在归纳和总结别人的资料之前,先把机器学习中重要指标之一的F1 score的来源给出: 1992年美国????????空军下属科研集团公司SAIC的科学家Nanch Chinchor的论文中给出MUC-4 results论文如下所示:连接来源：http://mp.weixin.qq.com/s/rXX0Edo8jU3kjUUfJ...
2019-10-10 10:29:49
3349
转载 配置kubectl在Mac(本地)远程连接Kubernetes集群
配置kubectl在Mac(本地)远程连接Kubernetes集群转载：https://www.cnblogs.com/wubolive/p/11225486.html集群部署在云服务器的ECS上，但是有时需要本地原创连接集群，这就需要通过ApiServer的外网地址去访问集群，但是～/.kube/config下的地址又都是内网，所以可以使用如下方式解决：Mac安装kubectlbrew ...
2019-09-26 09:33:27
2583
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人