lu952450497的专栏

原创 Spark环境安装

0. Hive源码包下载mirror.bit.edu.cn/apache/spark/1. 集群环境Master 172.16.11.97Slave1 172.16.11.98Slave2 172.16.11.992. 下载软件包#Masterwget http://mirror.bit.edu.cn/apache/spark/spark-1.6.3/s...

原创 Hadoop2.0环境安装

0. Hadoop源码包下载http://mirror.bit.edu.cn/apache/hadoop/common1. 集群环境操作系统CentOS6.9集群规划Master 172.16.11.97Slave1 172.16.11.98Slave2 172.16.11.992. 关闭系统防火墙及内核防火墙#Execute in Master...

原创 Flume环境安装

0. 软件版本下载http://mirror.bit.edu.cn/apache/flume/1. 集群环境Master 172.16.11.97Slave1 172.16.11.98Slave2 172.16.11.992. 下载软件包#Masterwget http://mirror.bit.edu.cn/apache/flume/1.6.0/apa...

原创 Kafka环境安装

0. Kafka源码包下载http://mirror.bit.edu.cn/apache/kafka/1. 集群环境Master 172.16.11.97Slave1 172.16.11.98Slave2 172.16.11.992. 下载软件包#Masterwget http://mirror.bit.edu.cn/apache/kafka/0.10....

原创 Hive 环境安装

0. Hive源码包下载http://mirror.bit.edu.cn/apache/hive/1. 集群环境Master 172.16.11.97Slave1 172.16.11.98Slave2 172.16.11.992. 下载软件包#Masterwget http://mirror.bit.edu.cn/apache/hive/hive-1.2...

原创 Hbase环境安装

0. 软件版本下载http://mirror.bit.edu.cn/apache/hbase/1. 集群环境Master 172.16.11.97Slave1 172.16.11.98Slave2 172.16.11.992. 下载软件包#Masterwget http://archive.apache.org/dist/hbase/0.98.24/hb...

原创 Zookeeper环境安装

0. zookeeper源码包下载http://mirror.bit.edu.cn/apache/zookeeper/1. 集群环境Master 172.16.11.97Slave1 172.16.11.98Slave2 172.16.11.992. 下载软件包#Masterwget http://mirror.bit.edu.cn/apache/zoo...

原创 Storm环境安装

0. Storm源码包下载http://mirror.bit.edu.cn/apache/storm/1. 集群环境Master 172.16.11.97Slave1 172.16.11.98Slave2 172.16.11.992. 下载安装包#Masterwget http://mirror.bit.edu.cn/apache/storm/apach...

转载 ETL

数据清洗过程，一定会用到ETL技术，至于ETL是什么，来自网络和众多博主的总结数不胜数，其中一段为“ETL，是英文 Extract-Transform-Load 的缩写，用来描述将数据从来源端经过萃取（extract）、转置（transform）、加载（load）至目的端的过程。ETL一词较常用在数据仓库，但其对象并不限于数据仓库。ETL负责将分布的、异构数据源中的数据如关系数据、平面数...

转载 Django与Flask的比较

（1）FlaskFlask确实很“轻”，不愧是Micro Framework，从Django转向Flask的开发者一定会如此感慨，除非二者均为深入使用过Flask自由、灵活，可扩展性强，第三方库的选择面广，开发时可以结合自己最喜欢用的轮子，也能结合最流行最强大的Python库入门简单，即便没有多少web开发经验，也能很快做出网站非常适用于小型网站非常适用于开发web服务的API开发大...

原创 新的开始

生活就是这样的，有缘相见，有缘相恋，但是却无缘一生相守。                                                                                    ---《让青春继续》...

原创 路漫漫其修远兮

只有那些疯狂到认为自己可以改变世界的人，才能真正的改变世界。面对压力，我可以挑灯夜战，不休不眠；面对困难，我愿意迎难而上，永不退缩。                                                                                                             ----------Steve Jobs...

原创 关于MySQL乱码解决

1、控制台修改：alter database databasename character set utf8；查看编码格式:show variables like 'character_set_database';修改已经生成的表的编码格式：alter table table_name character set utf8;(或者在建表的时候设置：create

原创 阅读感想——《富爸爸穷爸爸》

阅读这本书，是因为我姐姐的推荐。她建议我读读这本书，没有说原因。让我从上网买来读读。上个星期日推荐的，我今天读完。整整一个星期了。之所以这么快读完，一个是我在掌阅上看的电纸版的 ，其次是这本书不算太多。下面来说说我的感悟。读这本书，让我领悟一个词--“财商”。这是我以前从来没有过概念的东西。在这本书中学到了很多东西。教会我了如何看待财富，应该怎样使用。

原创 关于myeclipse导入新项目报错解决办法

本人安装的是 Myeclipse 10.6   jdk1.8 自带以个jdk1.6，我在配置jdk的时候配置的是自己本来装好的jdk1.8，解决方法就是右击工程------》properties---》java bulid  path----》libraries----》add library----》jre system library--》 workspace defalult J

原创 第2次实验——算法基本功 与 综合思考

（3）算法综合实践——搜索引擎    上网搜索有关“搜索引擎”的相关资料，包括但不限于以下方面（至少要有2个方面）：搜索引擎岗位要求、搜索引擎工作原理、搜索引擎涉及到教材中哪些算法、搜索引擎的盈利模式、搜索引擎源码链接、国内外搜索引擎公司现状等。

原创 第1次实验——NPC问题(回溯算法、聚类分析)

（1）八皇后及N皇后问题    八皇后问题，是一个古老而著名的问题，是回溯算法的典型案例。该问题是国际西洋棋棋手马克斯·贝瑟尔于1848年提出：在8X8格的国际象棋上摆放八个皇后，使其不能互相攻击，即任意两个皇后都不能处于同一行、同一列或同一斜线上，问有多少种摆法。 高斯认为有76种方案。1854年在柏林的象棋杂志上不同的作者发表了40种不同的解，后来有人用图论的方法解出92种结果。计算机发明

原创 算法概论 第七周作业

第三题  最长子序列源代码如下：

原创 算法概论 第六周作业

a.  对于所有字母以空格相加后，发现概率大于100%

原创 算法概论 第五周作业

源代码如下：

原创 第四周作业 算法概论

源代码如下：package 实验二;import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.FileNotFoundException;import java.io.FileOutputStream;import java.io.FileReader;

原创 第三周作业 算法概论

源代码如下：package 实验二;import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.File;import java.io.FileReader;import java.io.FileWriter;import java.io.IOException;import

原创 算法概论 第二周 实践

2.1通过a与小于根号a小的数相除，当余数为零时 ，跳出循环，否则除数加一，直到除数大于根号a通过除数与根号a的比较  最终除数大于根号a时，说明该整数为质数 否则不是质数源代码如下：package 实验二;import java.util.Scanner;public class isPrime {public static void main(String

原创 思维导图

http://u.download.csdn.net/upload/success

原创 求最大公约数程序