2 贪狼切

尚未进行身份认证

暂无相关简介

等级
TA的排名 2w+

Graphx中pregel详解及具体应用分析(以最短路径为例)

SparkPregel参数说明Pregel是个强大的基于图的迭代算法,也是Spark中的一个迭代应用aggregateMessage的典型案例,用它可以在图中方便的迭代计算,如最短路径、关键路径、n度关系等。然而对于之前对图计算接触不多的童鞋来说,这个api还算是一个比较重量组的接口,不太容易理解。Spark中的Pregel定义如下:defpregel[A:ClassTag](...

2019-06-06 09:11:23

scala中List的常见操作

参考自:https://blog.csdn.net/xianpanjia4616/article/details/84930779https://blog.csdn.net/hguo11/article/details/81585158Scala列表类似于数组,它们所有元素的类型都相同,但是它们也有所不同:列表是不可变的,值一旦被定义了就不能改变,其次列表具有递归的结构(也就是链接表结构)...

2019-05-24 22:46:01

scala中常见MAP操作

先感谢大佬,转载以备自己使用原文:https://blog.csdn.net/xianpanjia4616/article/details/80947616Map(映射)是一种可迭代的键值对(key/value)结构。所有的值都可以通过键来获取。Map中的键都是唯一的。Map也叫哈希表(Hashtables)。Map有两种类型,可变与不可变,区别在于可变对象可以修改它,而不可变...

2019-05-24 22:26:22

win7下IDEA maven scala环境配置及wordcount遇到的坑

IDEAmavenscala环境配置自己折腾了两天。看了网上环境配置的文档和慕课的视频教程,被弄得迷迷糊糊的。这里自己梳理一下,希望对大家有所帮互助。环境安装可以参考着两个网站:https://blog.csdn.net/chengyuqiang/article/details/77925606https://www.jianshu.com/p/32b74feb55e2其中,第二个网...

2019-05-18 19:13:12

Python中取整的几种方法小结

Python中取整的几种方法小结参考自:https://www.jb51.net/article/102248.htm这篇文章主要介绍了Python中取整的几种方法,其中包括向下取整、四舍五入取整、向上取整以及分别取整数部分和小数部分。分别都给出了示例代码,相信对大家的理解和学习具有一定的参考借鉴价值,需要的朋友可以参考借鉴。前言对每位程序员来说,在编程过程中数据处理是不可避免的,很多时候...

2019-04-18 09:30:14

python间进制转换(二进制、八进制、十进制,十六进制)

参考自:http://www.cnblogs.com/zhy128/p/8278577.htmlPython中实现的进制间的转换。在python中可以使用Python的内置函数进行进制间的转换。bin():其他进制转二进制oct():其他进制转八进制int():其他进制转十进制hex():其他进制转十六进制二进制、八进制、十六进制的形式二进制:以“0b”开头,如:0b111为十进制...

2019-04-17 09:57:46

python实现二叉树及其遍历(前序、中序、后序、层序)

树是数据结构中非常重要的一种,主要的用途是用来提高查找效率,对于要重复查找的情况效果更佳,如二叉排序树、FP-树。另外可以用来提高编码效率,如哈弗曼树。代码:用python实现树的构造和几种遍历算法,虽然不难,不过还是把代码作了一下整理总结。实现功能:树的构造递归实现先序遍历、中序遍历、后序遍历堆栈实现先序遍历、中序遍历、后序遍历队列实现层次遍历#coding=utf-...

2019-03-25 16:08:53

python中利用numpy求解多项式以及多项式拟合

构建一个二阶多项式:x^2-4x+3多项式求解>>>p=np.poly1d([1,-4,3])#二阶多项式系数>>>p(0)#自变量为0时多项式的值3>>>p.roots#多项式的...

2019-01-14 11:30:47

python写爬虫的时候,使用selenium的Webdriver遇到的坑

第一个坑:‘chromedriver’executableneedstobeinPATH.Pleaseseehttps://sites.google.com/a/chromium.org/ch解决办法:(我直接用的第二个办法)第一个解决方法:你去下载一个chromedriver然后放在指定文件夹并且加入PATH环境变量。结果是,我把chromedriver放进了chrome...

2018-12-16 11:44:03

python按照指定格式(列数)逐行构建数组

在机器学习与深度学习的数据预处理环节,经常会遇到将所有训练集格式化为二维数组的形式,一行一样本,一列一特征。借助python可以逐行构建数组。importnumpyasnpdata=np.float32([]).reshape(0,3)#加入有3个特征fes=[1,2,3]data=np.append(data,np.asarray(fes).resha...

2018-11-06 22:11:10

词袋模型(视觉词袋模型BOVW)详解

转自 https://blog.csdn.net/tiandijun/article/details/51143765 引言最初的Bagofwords,也叫做“词袋”,在信息检索中,Bagofwordsmodel假定对于一个文本,忽略其词序和语法,句法,将其仅仅看做是一个词集合,或...

2018-11-06 22:00:29

LeetCode第一题,求两个数的和(python实现)

给定一个整数数组和一个目标值,找出数组中和为目标值的两个数。你可以假设每个输入只对应一种答案,且同样的元素不能被重复利用。示例:给定nums=[2,7,11,15],target=9因为nums[0]+nums[1]=2+7=9所以返回[0,1]解答:deftwoSum(self,nums,target):"""...

2018-10-15 19:10:12

windos中查看gpu信息,以及NVIDIA-SMI命令详解

1  NVIDIA-SMI介绍        nvidia-smi简称NVSMI,提供监控GPU使用情况和更改GPU状态的功能,是一个跨平台工具,它支持所有标准的NVIDIA驱动程序支持的Linux发行版以及...

2018-10-08 14:15:10

用python统计一段文本中各个单词出现的频率

在之前的博客中实现了—–python中统计列表list、dataframe以及Series中的不重复元素及其相应个数这篇博客作为他的姊妹篇,用python统计一段文本中各个单词出现的频率。偷个懒直接上图片,代码木有自己敲。...

2018-09-13 16:29:19

scikit-learn中用gridsearchcv给随机森林(RF)自动调参

全文参考1:http://scikit-learn.org/stable/auto_examples/model_selection/grid_search_digits.html#parameter-estimation-using-grid-search-with-cross-validation全文参考2:http://scikit-learn.org/stable/modules/...

2018-08-25 12:35:08

python中利用pandas进行简单绘图

Series和DataFrame都有一个用于生成各种类图表的plot方法。默认情况下,他们所生成的是线形图。importpandasaspdimportnumpyasnps=pd.Series(np.random.rand(10).cumsum(),index=np.arange(0,100,10))%matplotlibinline#在jupyternot...

2018-08-24 11:58:33

python/keras中用Grid Search对神经网络超参数进行调参

原文:HowtoGridSearchHyperparametersforDeepLearningModelsinPythonWithKeras作者:JasonBrownlee翻译:刘崇鑫责编:周建丁(zhoujd@...

2018-08-23 10:39:09

python中用Grid Search对SVM进行调参

转自:https://blog.csdn.net/aliceyangxi1987/article/details/73769950...

2018-08-23 10:27:22

python中dataframe的拼接操作——merge、join、concat实例详解

merge 通过键拼接列pandas提供了一个类似于关系数据库的连接(join)操作的方法<Strong>merage</Strong>,可以根据一个或多个键将不同DataFrame中的行连接起来语法如下merge(left,rig...

2018-08-13 12:09:41

django中的render函数参数详解与实例

hello.html文件代码如下:HelloWorld/templates/hello.html文件代码:<h1>{{hello}}</h1>HelloWorld/HelloWorld/view.py文件代码:#-*-coding...

2018-08-04 18:26:19

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。