- 博客(40)
- 资源 (4)
- 收藏
- 关注
RSS订阅转载 machine learning cooks
https://www.leiphone.com/news/201703/3H0dNkZBn214tiGX.html
2018-08-20 19:02:09
169
转载 Linux源码安装步骤
https://www.cnblogs.com/benwu/articles/8436209.htmlLinux上几乎所有的软件都经过了GPL授权，因此几乎所有的软件都会提供源码。 而一个软件要在Linux上执行，必须是二进制文件，因此当我们拿到软件源码后，需要将它编译成二进制文件才能在Linux上运行。软件编译过程将源码编译成可供Linux运行的二进制文件一共需要两步： 1. 使用gcc编译器将...
2018-07-16 15:32:52
572
转载 Hadoop和Sparkd的区别与联系
http://www.techweb.com.cn/network/system/2016-03-09/2292838.shtml对Hadoop与Spark孰优孰劣这个问题，最准确的观点就是，设计人员旨在让Hadoop和Spark在同一个团队里面协同运行。直接比较Hadoop和Spark有难度，因为它们处理的许多任务都一样，但是在一些方面又并不相互重叠。比如说，Spark没有文件管理功能，因而必须...
2018-07-07 12:15:38
1430
原创 eclipse的安装scala插件
踩了几个坑采用在线方式安装scala插件，结果安装失败，eclipse还打不开了，mmp*1然后删除了eclipse的安装目录，试图重新安装，安装失败，mmp*2以为是注册表的原因，win+R regedit 找不到eclipse mmp*3到C盘用户目录下删除所有eclipse相关的文件及文件夹，重新安装终于成功了最后，用离线的方式安装scala，解决 ...
2018-07-06 19:59:57
851
转载 虚拟机ubuntu连不上网
https://blog.csdn.net/qi_yue_yu/article/details/52694252首先参考第三项 “检测网络” 检查是否能ping通主机一 、设置NAT网络ubuntu版本：ubuntu-16.04-desktop-amd64.iso设置虚拟机不能联网是很痛苦的，这里我就ubuntu的NAT上网问题就个人经验讲一下，其他的桥连接等没有使用就没有经验了。1.查看/设置下...
2018-07-05 21:35:22
45441
4
转载 Linux命令中特殊符号
http://blog.chinaunix.net/uid-16946891-id-5088144.html在shell中常用的特殊符号罗列如下：# ; ;; . , / \ 'string' | ! $ ${} $? $$ $* "string" * ** ? : ^ $# $@ `command` {} [] [[]] () (()) || && {xx,yy,zz,...}~...
2018-07-05 17:15:02
3377
转载 Linux samba配置共享目录
转载自：https://www.cnblogs.com/windysai/p/6131317.htmlsamba原理：在linux机器上共享一个目录出来，让windows通过网上邻居去访问 （i）共享一个不需要输入用户名和密码就能访问的目录（可读不可写）一、打开配置文件：vim /etc/samba/smb.conf 1、修改security的验证方式为share （默认是user）securit...
2018-07-05 09:20:52
35256
1
转载 Linux bashrc和profile的用途和区别
转载自：http://www.ttlsa.com/linux/linux-bashrc-and-profile/使用终端ssh登录Linux操作系统的控制台后，会出现一个提示符号（例如：#或~），在这个提示符号之后可以输入命令，Linux根据输入的命令会做回应，这一连串的动作是由一个所谓的Shell来做处理。Shell是一个程序，最常用的就是Bash，这也是登录系统默认会使用的Shell。bash...
2018-07-04 20:59:27
553
转载 Hadoop hdfs上传文件错误
转载 https://www.cnblogs.com/likui360/p/6558749.htmlHadoop出现错误：WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable，解决方案安装Had...
2018-07-02 22:21:27
1535
原创 大数据java基础-面向对象之设计原则
声明：鄙人一直学习和使用的都是c语言，所以对面向对象的理解非常浅薄，该文内容都是个人理解和观点，如有错误，欢迎大家指正六大设计原则里氏原则覆盖是个垃圾特性，请尽量避免利用子类对父类进行扩展的时候，尽量不要修改父类原有的特性依赖倒置原则把面向对象编程理解成面向接口编程，或者说是面向抽象类编程当使用一个具体类的时候，就要考虑是否会对该类进行扩展，显然用抽象类和接口更易于扩展接口隔离原则单一全责原则接口...
2018-06-23 16:11:08
325
原创 大数据java基础-面向对象之类图基本概念
类之间的几种关系继承 Inheritance：父类和子类的一种关系实现 Implementation：类与接口的关系依赖 Dependence：类与类之间最弱的一种关系，通常表现为函数参数、函数返回、局部变量调用被依赖的类聚合 Aggreagtion：has-a组合 Combination：contains-a关联 Association：关联、...
2018-06-23 15:44:34
343
转载 大数据java基础-Collection
转载自：https://www.cnblogs.com/taiwan/p/6954135.htmlCollection来源于Java.util包，是非常实用常用的数据结构!!!!!字面意思就是容器。具体的继承实现关系如下图，先整体有个印象，再依次介绍各个部分的方法，注意事项，以及应用场景。 ------------------------------------------------------...
2018-06-23 14:02:39
212
转载 大数据java基础-泛型
转载自：http://www.importnew.com/24029.html泛型基础泛型类我们首先定义一个简单的Box类：12345public class Box { private String object; public void set(String object) { this.object = object; } public String get() { ret...
2018-06-23 12:09:45
246
原创 大数据java基础-类和接口
接口与类的区别：接口不能用于实例化对象。接口没有构造方法。接口中所有的方法必须是抽象方法。接口不能包含成员变量，除了 static 和 final 变量。接口不是被类继承了，而是要被类实现。接口支持多继承。...
2018-06-22 17:34:22
444
转载 大数据java基础-异常
http://www.cnblogs.com/lulipro/p/7504267.html简介程序运行时，发生的不被期望的事件，它阻止了程序按照程序员的预期正常执行，这就是异常。异常发生时，是任程序自生自灭，立刻退出终止，还是输出错误给用户？或者用C语言风格：用函数返回值作为执行状态？。Java提供了更加优秀的解决办法：异常处理机制。异常处理机制能让程序在异常发生时，按照代码的预先设定的异常处理逻...
2018-06-22 15:25:14
274
原创 Windows 强制删除文件及文件夹命令
一、删除文件或目录CMD命令rd/s/q 盘符:\某个文件夹 （强制删除文件文件夹和文件夹内所有文件）del/f/s/q 盘符:\文件名 （强制删除文件，文件名必须加文件后缀名）二、删除文件或目录BAT命令1、新建.BAT批处理文件输入如下命令，然后将要删除的文件拖放到批处理文件图标上即可删除。DEL /F /A /Q RD /S /Q ...
2018-06-22 13:46:17
27481
4
转载 大数据java基础--main
https://www.cnblogs.com/yaqi007/articles/2129189.htmlmain 方法可以省略 public ? static ? 返回值可以是 int ? 形参可以省略吗? 可以在main 中调用 main 方法吗? 首先Java规定了main()方法必须是公共的，以便于外部程序对主方法的访问，因为程序都是从main()方法起始的，并且main()方法也...
2018-06-22 10:59:52
157
转载 Linux的环境配置文件----.bashrc文件
https://www.cnblogs.com/testlife007/p/6548698.html.bashrc文件主要保存个人的一些个性化设置，如命令别名、路径等。也即在同一个服务器上，只对某个用户的个性化设置相关。它是一个隐藏文件，需要使用ls -a来查看。 .bash_history 记录之前输入的命令 .bash_logout 当你退出时执行的命令 .bash_pro...
2018-06-22 10:02:32
1828
转载 Ubuntu下 hadoop的安装与配置
转载自：https://www.cnblogs.com/87hbteo/p/7606012.html一、准备1.1创建hadoop用户$ sudo useradd -m hadoop -s /bin/bash #创建hadoop用户，并使用/bin/bash作为shell$ sudo passwd hadoop #为hadoop用户设置密码，之后需要连续输入...
2018-06-21 23:32:27
8823
2
原创 ubuntu查看是否安装某个软件&防火墙的启动和关闭
转载自：https://www.linuxidc.com/Linux/2015-03/115605.htm如果你正在管理Debian或者Ubuntu服务器，你也许会经常使用dpkg 或者 apt-get命令。这两个命令用来安装、卸载和更新包。在本篇中，让我们看下如何在基于DEB的系统下检查是否安装了一个包。要检查特定的包，比如firefox是否安装了，使用这个命令：dpkg -s firefox示...
2018-06-21 20:05:42
1617
转载 大数据工程师成长之路
则是在一起自学吧看到的“大数据工程师成长之路”系列课程，https://www.17zixueba.com/forum.php?mod=viewthread&tid=459学习路线可以参考该课程体系学习思路指引： 如果有编程背景这是最好的了，会节省很多学习时间，更容易理解。因为大数据环境比较复杂，并不像学习编程软件一样，机器安装一下，跟老师敲几行代码就可以了，但大数据可就要麻烦多...
2018-06-21 16:32:32
2571
1
转载 用python写MapReduce函数——以WordCount为例
转载自：https://www.cnblogs.com/kaituorensheng/p/3826114.html阅读目录1. Python MapReduce 代码2. 在Hadoop上运行python代码3. 利用python的迭代器和生成器优化Mapper 和 Reducer代码4. 参考 尽管Hadoop框架是用java写的，但是Hadoop程序不限于java，可以用python...
2018-06-21 09:29:22
539
转载 搭建完全分布式的hadoop
转载自：https://www.cnblogs.com/laov/p/3421479.html用于测试，我用4台虚拟机搭建成了hadoop结构我用了两个台式机。一个xp系统，一个win7系统。每台电脑装两个虚拟机，要不然内存就满了。 1、安装虚拟机环境 Vmware，收费产品，占内存较大。 或 Oracle的VirtualBox，开源产品，占内存较小，但安装ubuntu过程...
2018-06-20 19:53:00
211
转载 mapreduce原理
转自http://p-x1984.iteye.com/blog/702486Map-Reduce框架的运作完全基于<key,value>对，即数据的输入是一批<key,value>对，生成的结果也是一批<key,value>对，只是有时候它们的类型不一样而已。Key和value的类由于需要支持被序列化（serialize）操作，所以它们必须要实现Writable...
2018-06-20 15:58:11
3752
转载 基于Hadoop 的分布式网络爬虫技术学习笔记
http://blog.csdn.net/zolalad/article/details/16344661基于Hadoop 的分布式网络爬虫技术学习笔记 一、网络爬虫原理Web网络爬虫系统的功能是下载网页数据，为搜索引擎系统提供数据来源。很多大型的网络搜索引擎系统都被称为基于 Web数据采集的搜索引擎系统，比如 Google、Baidu。由此可见 Web 网络爬虫系统在搜索引擎中的重要性。网页中...
2018-06-20 13:39:55
4269
转载 Python的比较is 和 ==
转自：https://www.cnblogs.com/kiko0o0/p/8135184.html在 Python 中会用到对象之间比较，可以用 ==，也可以用 is 。但是它们的区别是什么呢？is 比较的是两个实例对象是不是完全相同，它们是不是同一个对象，占用的内存地址是否相同。莱布尼茨说过：“世界上没有两片完全相同的叶子”，这个is正是这样的比较，比较是不是同一片叶子（即比较的id是否相同，这...
2018-06-15 14:31:37
183
原创 对象-关系数据库
想象CAD中的一个复杂部件，它可能由成千上万个不同的零件组成，要是用关系模型中的表来表达，得用多少张表啊？而描述这种复杂的部件，正好是高级程序设计语言的强项。个人理解：利用面向对象编程语言描述对象关系，而不需要用数据库的表关系表示，因为这样会极其复杂...
2018-06-11 18:55:27
949
原创 正则表达式必知必会总结
快速过了一遍正则表达式必知必会，初步总结，不全，仅供参考，错误的地方还望大家不吝指正学习的时候可以用正则表达式式在线测试工具：http://tool.oschina.net/regex/建议大家有时间还是阅读《正则表达式必知必会》总结已经非常精炼了，大概2小时左右就可以过一遍一. 字符匹配1. 匹配数字 \d ; 匹配非数字 \D2. 匹配空白字符 \s ;匹配非空白字符 \S3. 匹配单个字符...
2018-06-09 15:49:10
705
转载 网络爬虫的User-Agent和Proxy
转载自：https://blog.csdn.net/u012195214/article/details/78889602&http://blog.csdn.net/c406495762/article/details/60137956一，User-Agent是什么 有一些网站不喜欢被爬虫程序访问，所以会检测连接对象，如果是爬虫程序，也就是非人点击访问，它就会不让你继续访问，所以为了...
2018-06-07 19:55:19
3475
转载 python中的None
None是一个特殊的常量。None和False不同。None不是0。None不是空字符串。None和任何其他的数据类型比较永远返回False。None有自己的数据类型NoneType。你可以将None复制给任何变量，但是你不能创建其他NoneType对象...
2018-06-06 20:31:31
466
原创 TD-LTE峰值速率计算方法
本帖最后由 猫咪老师 于 2014-6-20 11:43 编辑 http://www.txrjy.com/thread-776022-1-1.html近日见到一道题，被人问起怎么计算，我想了一个简单的大概估算方面。1、下述哪个选项是LTE系统cat3 UE在20M带宽内，上下行...
2018-06-05 09:46:53
8490
原创 pywinauto小试牛刀
#encoding = utf-8from pywinauto import Applicationapp=Application().start("Notepad.exe")app['Notepad'].print_control_identifiers()app['Notepad'].menu_select(u'帮助(H)->关于记事本(A)')app[u'关于"记事...
2018-06-04 21:04:42
683
原创 PyQt4 设置TextEdit背景
先简单做个分享，有时间再补一个完整的用例self.textEdit = QtGui.QTextEdit(slef)1.设置背景颜色self.textEdit.setStyleSheet("background:blue")2.设置背景图self.textEdit.setStyleSheet("background-image:url(timg.jpg)")3.设置文字背景颜色self.textEd...
2018-05-29 21:16:34
4254
原创 github源码阅读辅助插件octotree
先放效果图：下载地址：https://www.crx4chrome.com/crx/1392/安装方法：1、在chrome搜索栏中输入chrome://extensions，然后在左侧的功能中选择“扩展程序”。2、拖动我们已经下载的octotree chrome插件至扩展程序界面。3、弹出“要添加octotree吗”，点击“添加扩展程序”按钮即可进行添加4、可以看到左上角有个三角符，有的电脑因为f...
2018-05-27 08:53:18
1244
原创 将python文件打包成可执行文件
1. 各种打包工具的对比如下(来自文章Freezing Your Code)：SolutionWindowsLinuxOS XPython 3LicenseOne-file modeZipfile importEggspkg_resources supportbbFreezeyesyesyesnoMITnoyesyesyespy2exeyesnonoyesMITyesyesnonopyInstal...
2018-05-10 19:33:01
575
36.413中文
2017-09-27
9488驱动程序（初始化）
2016-12-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人