- 博客(15)
- 资源 (7)
- 收藏
- 关注
RSS订阅原创 03 Dask源码剖析-Dask的数据模型-Array
Dask源码剖析是一个专栏，更多章节请点击文章列表查看。后续我会更新更多内容上来。文章目录Collection：ArrayArray的创建from_array加载Collection：Array前面我们了解了Bag数据模型。通过阅读Bag的源码我们大概熟悉了Dask的数据模型的套路。操作有加载，有计算，都是先转成Delayed，并按照逻辑构建成Graph。真正的计算得到结果需要执行compute提交到集群或在本地执行，并且dask很智能的会graph进行优化。本节我们看下Array数据结构。从源
2020-07-19 12:47:42
639
原创 02 Dask源码剖析-Dask的数据模型-Bag
Dask源码剖析是一个专栏，更多章节请点击文章列表查看。后续我会更新更多内容上来。文章目录Collection：BagCollection：Bag对于Bag数据模型，其实从Dask官方进行的用户调研情况来看，这种数据模型较其他数据模型使用的情况是最少的：但是Bag是较为简单的数据模型，对于理解其他数据模型，比如DataFrame、Array，我认为是有帮助的。所以咱们本节就先了解一下Bag。...
2020-07-12 12:24:19
753
原创 01 Dask源码剖析-Dask的数据模型-Delayed
文章目录Dask的数据模型概述DelayedDask的数据模型概述在阅读代码前，给大家一些小建议：15个小技巧包括：了解作者开发项目的目的先熟练的使用项目阅读官方文档理解项目中的概念了解项目技术背景没必要读最新版本的代码不需要读完所有的源码版本间比较阅读自顶向下梳理自底向上归纳先做减法，再做加法从接口找关系画图辅助阅读设计模式辅助阅读debug只是辅助那么对于Dask，咱们先用一个关键技巧，阅读官方文档，捋一捋Dask的数据模型：Dask官方文档链接在官方文档首页
2020-07-02 17:38:48
1329
1
原创 00 Dask源码剖析-环境准备
文章目录Dask 介绍前期准备搭建阅读环境配置一个python环境新建文件夹并克隆项目安装依赖库配置启动入口环境测试Dask 介绍Dask是一款用于分析计算的灵活并行计算库。Dask由两部分组成：调度：针对计算优化的动态任务调度。这与Airflow，Luigi，Celery或Make类似，但针对交互式计算工作负载进行了优化。数据结构：“大数据”集合， 像并行数组，数据框和列表一样，它们将通用接口（如NumPy，Pandas或Python迭代器）扩展到大于内存或分布式环境。 这些并行集合运行在动态任
2020-06-30 17:22:42
633
翻译 [译]Dask vs Celery
文章目录最大的不同：worker的状态和通讯Hello WorldCeleryDask结果比较简单任务依赖关系CeleryDask.distributed原文链接：Dask and Celery本文比较了两个Python分布式任务处理系统Dask.distributed和Celery。免责声明:对比技术真的不好把握。我比较偏向于Dask，从而可能Celery的正确实践方法不了解。请记住这一...
2020-06-21 08:21:02
878
1
转载 欢迎使用CSDN-markdown编辑器
欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl
2015-07-15 23:37:05
301
原创 国内Android源码下载
最近开始学习Android ROM制作，于是，照着《深入理解Android内核设计思想》《Android深度探索(卷1):HAL与驱动开发》上介绍的内容，去下载Android源码。遇到一个严重的问题，Google无法访问。在网上发现清华大学的镜像非常不错，于是整理一下用清华镜像作为源下载Android源码的方法。
2015-04-19 08:02:26
592
原创 VR眼镜探究
最近看到网上暴风魔镜2卖的很火，先是股票连着涨停，然后是获得1000W美元的融资。于是脑子一抽筋，花了99大洋买了个暴风魔镜体验了一把。 总体感觉，暴风魔镜2就像网上说的那样，还是很有诚意的。有一个镜架，可以把手机装入。然后通过中间的隔离板把手机屏幕分成两个部分。从而实现立体的效果。怀着激动的心情把手机放进去，体验了一下游戏、视频，全景图片等功能，还有一个“偷窥”功能，估计以后会做成增强现实的功能
2015-04-18 20:56:34
852
原创 从今天开始，整理每日所学
说起来惭愧，工作接近编码接近三年了，做过C#，JAVA，Flex，Erlang，到现在感觉什么都没有掌握。总结起来好像什么都不会，大概是因为没有整理领悟的原因吧。打算从今天开始，把工作中、业余研究的技术知识，逐渐发布到CSDN上，一来作为日后复习使用，而来也为别人提供一点借鉴，少走弯路。
2015-04-18 20:01:44
372
转载 欢迎使用CSDN-markdown编辑器
使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键
2015-04-14 09:28:36
499
原创 对控制台EXE程序的自动运行问题——以6S模型6s.exe为例
当下，有许多优秀的程序是能够方便的从网上获得的，但是程序的作者当时解决问题时的思路可能和我们要解决问题的思路并不一样，我们并不能直接拿来使用。这时我们就要取其精华去其糟粕。本文以6S模型(气溶胶计算模型)为例，如何在自己的应用中方便调用别人的EXE来计算。 首先讲解一下6S模型,它是由Fortran语言编写的并编译生成的EXE文件,他需要多个参数输入:1 输入卫星的几何条件(Geometr
2012-01-21 09:58:32
3155
10
转载 VC程序中实现控件的动态生成与响应
动态控件是指在需要时由Create()创建的控件，这与预先在对话框中放置的控件是不同的。 一、创建动态控件： 为了对照，我们先来看一下静态控件的创建。 放置静态控件时必须先建立一个容器，一般是对话框，这时我们在对话框编辑窗口中，从工具窗口中拖出所需控件放在对话框中即可，再适当修改控件ID，设置控件属性，一个静态控件就创建好了，当对话框被显示时，其上的控件也会显示。
2010-08-02 16:42:00
317
转载 MFC单文档程序添加消息映射和消息响应函数的问题
我按照《MFC Windows 应用程序设计》写了一个创建按钮控件的实例，首先是在资源头文件中创建资源ID；然后在视类头文件中声明CButton类的数据成员和消息响应函数的定义；然后在视类源文件中添加消息映射和实现消息响应函数。添加按钮类数据成员和WM_CREATE消息映射我都是用类向导添加的（MFC ClassWizard -> Messages -> WM_CREATE）。但是响应点击
2010-07-26 20:45:00
2275
转载 无需路由 XP用无线网卡建立局域网
<br />使用无线网卡组建临时网络，就是在不使用无线路由器的前提下，经过对无线网卡的简单设置后，开启无线网卡的点对点连接功能，组成一个小型无线局域网。这样只要宿舍内有一台电脑能上网，其他电脑就能共享上网了，同时各个电脑间还能互传文件，方便用户使用。<br /> 组建无线对联网络的方法很多，自方便的的设置方法是通过Windows XP自带的无线设置向导实现无线互联，设置方法也非常简单。<br />1.电脑主机设置<br /> 设置时首先先将一台电脑作为主机，还要确保这台电脑通过“本地连接”或“拨号上网”
2010-07-01 13:43:00
527
Data Science with Python and Dask.zip
2020-07-18
ArcGIS Runtime SDK for WPF 破解
2013-05-17
CityEngine 2012破解
2013-05-09
Google Earth .net 控件
2012-04-22
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人