9 数据架构师

尚未进行身份认证

我要认证

腾讯数据架构师,云原生,大数据,人工智能架构相关。腾讯内推可联系微信号。

等级
TA的排名 107

mac电脑开发环境配置

macOS安装Homebrew主要思路为,替换brew的镜像源。1.先把https://raw.githubusercontent.com/Homebrew/install/master/install 文件下载下来(使用浏览器打开,另存为也可以),把文件命名为install.txt接下来,修改install.txt文件:应该在第7行左右,(记住这里的原来的url,后面你可能需要还原回来)...

2020-08-23 23:42:41

kubeflow kfserving 详解

github 官方地址 https://github.com/kubeflow/kfservingkfserving 内部使用的是knative。封装了一层InferenceService的k8s自定义资源,来实现knative中serving的services,route,configurations,revisionknative 创建管理网络部分certificates kcert networking.internal.kn

2020-06-27 20:05:53

kubeflow fairing详解

官方git地址:https://github.com/kubeflow/fairingbackendsbackends为k8s集群,可以是local,也可以是各种云的k8s服务。buildersbuilders为构建镜像的模块。append为在原有镜像层的基础上添加一层封装cluster 为在k8s集群中构建镜像azurestorage_context 微软存储服务cos_context ibm的存储服务gcs_context 谷歌云存储minio_context 是一个对象存储服务(可

2020-06-27 19:20:00

Istio 组件详解

1. istio 组件构成以下是istio 1.1 官方架构图:虽然Istio 支持多个平台, 但将其与 Kubernetes 结合使用,其优势会更大, Istio 对Kubernetes 平台支持也是最完善的, 本文将基于Istio + Kubernetes 进行展开.如果安装了grafana, prometheus, kiali, jaeger等组件的情况下, 一个完整的控制面组件包括以下pod:% kubectl -n istio-system get podNAME

2020-06-26 19:49:38

Knative详解

Knative 主要由 Build、Serving 和 Eventing 三大核心组件构成。Knative 正是依靠这三个核心组件,驱动着 Knative 这艘 Serverless 巨轮前行。下面让我们来分别介绍一下这三个核心组件。buildKnative Build 是基于现有的 Kubernetes 能力之上,提供的一套标准化、可移植、可复用的容器镜像构建方式。通过在 Kubernetes 上运行复杂的构建任务,Knative Build 使你不必再单独开发和重复这些镜像构建过程, 从而通过系统化

2020-06-26 19:10:34

腾讯股票接口、和讯网股票接口、新浪股票接口、雪球股票数据、网易股票数据

腾讯股票接口:分时图 http://data.gtimg.cn/flashdata/hushen/minute/sz000001.js?maxage=110&0.28163905744440854五天分时图 http://data.gtimg.cn/flashdata/hushen/4day/sz/sz000002.js?maxage=43200&visitDstTim...

2017-11-04 10:55:25

js排序算法详解-归并排序

全栈工程师开发手册 (作者:栾鹏) js系列教程5-数据结构和算法全解js排序算法详解-归并排序归并排序其实可以类比二分法,二分法其实就是二等分的意思,简而言之就是不断和新序列的中间值进行比较。归并排序似乎有异曲同工之妙,什么意思呢,就是将一个原始序对等分为两部分,然后不断地对等分新的序列,直至序列的长度为1或者2,那么想,如果一个序列为1,那就没有比较的意义了,它本身就是之最,如果是两个呢,那

2017-09-21 20:16:08

开源媒体标注系统cvat

github地址: https://github.com/opencv/cvat安装方法git clone https://github.com/opencv/cvat.gitcd cvatdocker-compose build # 构建前后端镜像,如果构建中有网络访问不到,注意关闭代理docker-conpose up -d # 启动docker exec -it cvat bash -ic 'python3 ~/manage.py createsuperuser' #

2020-05-28 23:39:05

SQLAlchemy 基础知识 - (autoflush 和 autocommit)(relationship 和 backref)(flask migrate迁移数据)

SQLAlchemy 基础下面是一段官方 SQLAlchemy 使用示例,我们从这个例子出发,认识 SQLAlchemy。from sqlalchemy import create_enginefrom sqlalchemy import Column, Integer, Stringfrom sqlalchemy.ext.declarative import declarative_ba...

2020-04-18 16:43:05

iptable详解概念

分享一个朋友的人工智能教程。零基础!通俗易懂!风趣幽默!还带黄段子!大家可以看看是否对自己有帮助:点击打开docker/kubernetes入门视频教程(腾讯内推)联系微信更多iptable系列文参考(转载于):http://www.zsythink.net/archives/tag/iptables/防火墙相关概念此处先描述一些相关概念。从逻辑上讲。防火墙可以大体分为主机防火墙和网络...

2020-04-18 16:28:19

时间序列分析预测

全栈工程师开发手册 (作者:栾鹏) python数据挖掘系列教程时间序列中常用预测技术,一个时间序列是一组对于某一变量连续时间点或连续时段上的观测值。参考:https://blog.csdn.net/u010414589/article/details/496226251. 移动平均法 (MA)1.1. 简单移动平均法设有一时间序列y1,y2,…, 则按数据点的顺...

2020-04-09 22:52:15

java生成和识别二维码

全栈工程师开发手册 (作者:栾鹏) java教程全解本文使用两种方式生成和识别二维码。方法1:使用日本公司的qrcode需要引入的包qrcode_swetake.jar qrcode.jar测试代码public static void main(String[] args){ Mail sendmail = new Mail(); ...

2020-04-09 22:46:34

安卓应用间的数据共享:ContentProvider、ContentResolver全解

全栈工程师开发手册 (作者:栾鹏) 安卓教程全解安卓应用间的数据共享:ContentProvider、ContentResolver全解ContentProvider用于应用程序向系统公开数据,ContentResolver用于查询这些数据。Uri代表要操作的数据源,Android上可用的每种资源 - 图像、视频片段等都可以用Uri来表示。URI一般由三部分组成:访问

2020-04-09 22:39:27

安卓Notification通知栏全解

全栈工程师开发手册 (作者:栾鹏) 安卓教程全解安卓通知栏是提醒用户信息有效手段,也是通过用户的行为触发事件服务的方式。Notification允许在当前应用程序不活动或不可见时向用户发送信号。创建通知栏有使用Notification直接创建何使用Notification.Builder创建两种方法1、使用Notification直接创建通知栏private

2020-04-09 22:37:30

python爬虫案例——知乎数据采集

全栈工程师开发手册 (作者:栾鹏) python教程全解首先你需要了解python数据挖掘库urllib、urllib2、cookie的知识。参考http://blog.csdn.net/luanpeng825485697/article/details/78383884cookie模拟登陆知乎需要设置cookie模拟登陆状态,需要设置http头,满足知乎服务器的检测

2020-04-09 22:36:46

python数据挖掘系列教程——PySpider框架应用全解

全栈工程师开发手册 (作者:栾鹏) python教程全解python数据挖掘系列教程——PySpider框架应用全解。PySpider介绍pyspider上手更简单,操作更加简便,因为它增加了 WEB 界面,写爬虫迅速,集成了phantomjs,可以用来抓取js渲染的页面。支持多线程爬取、JS动态解析,提供了可操作界面、出错重试、定时爬取等等的功能PySpider

2020-04-09 22:34:19

python基础系列教程——Python的安装与测试:python解释器、PyDev编辑器、pycharm编译器

全栈工程师开发手册 (作者:陈玓玏) python教程全解白手起家,从头开启python的开发环境搭建。一. 如何安装Python在https://www.python.org/下载安装包。下载下来一个exe文件,直接双击运行。选择Install Now,立即安装。配置环境变量:右键开始——控制面板——系统——高级系统配置——环境变量。找...

2017-09-02 18:46:57

微服务架构系列文章、精品教程

架构系列文章大全

2019-08-02 18:21:34

airflow时区问题

pip安装apache-airflow 的修改方式1、在airflow家目录下修改airflow.cfg,设置default_timezone = Asia/Shanghai2、进入airflow包的安装位置,也就是site-packages的位置,以下修改文件均为相对位置修改airflow/utils/timezone.py在 utc = pendulum.timezone(‘UTC...

2020-03-26 13:12:29

ubuntu系统下hbase数据库的安装和使用,hbase配置文件详解

安装首先从http://www.apache.org/dyn/closer.cgi/hbase/下载稳定版安装包,我下的是hbase-1.2.6-bin.tar.gz2.解压放在/usr/local的目录下3.修改权限sudo chown -R luanpeng hbase-1.2.6/4.修改文件夹的名称为hbase5.在~/.bashrc下添加,之后source一下...

2020-03-14 16:17:37

查看更多

勋章 我的勋章
  • 专栏达人
    专栏达人
    授予成功创建个人博客专栏的用户。专栏中添加五篇以上博文即可点亮!撰写博客专栏浓缩技术精华,专栏达人就是你!
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 1024勋章
    1024勋章
    #1024程序员节#活动勋章,当日发布原创博客即可获得
  • 勤写标兵Lv3
    勤写标兵Lv3
    授予每个自然周发布7篇到8篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。