- 博客(35)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 windows 10, pip install 安装无任何响应: pip is configured with locations that require TLS/SSL, however the
pip 安装问题的总结
2022-09-16 14:27:40
1381
原创 pandas SettingWithCopyWarning 的临时处理方法
在pandas 的在自身的赋值过程中，很容易出现这个错误，临时的简单解决方法：pd.options.mode.chained_assignment = None 详细的原因请参考：https://stackoverflow.com/questions/20625582/how-to-deal-with-settingwithcopywarning-in-pandas...
2019-06-07 18:11:38
636
原创 /bin/sh: warning: setlocale: LC_ALL: cannot change locale (en_US.UTF-8)
在centos 的docker中经常设置不了 环境变量$LC_ALL, 导致报很多奇怪的编码错误：解决方法： sudo localedef -i en_US -f UTF-8 en_US.UTF-8
2018-08-03 22:02:29
13868
原创 NVIDIA-SMI has failed because it couldn't communicate with the NVIDIA driver. Make sure that the lat
在Azure 申请了一台 K80的虚拟机，redhat7 系统。在安装cuda时，可以成功，但在执行nvidia-smi 时，总是报错：NVIDIA-SMI has failed because it couldn't communicate with the NVIDIA driver. Make sure that the latest NVIDIA driver is installed
2017-06-10 16:50:17
28754
1
原创 centos7+hadoop 2.8 的多节点集群搭建
1、集群IP192.168.2.218 hadoop-slave-1192.168.2.4 hadoop-master2、java 选用自带的java 1.7.0. openjdk关于java版本和hadoop版本的搭配可以参考hadoop官方wikihttps://wiki.apache.org/hadoop/HadoopJavaVersions3、
2017-05-04 18:57:22
1702
原创 Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so or libmkl_def.so
在anaconda 的环境中，导入from skimage import measure ,morphology 时报错：不能找到Intel的一些数学库Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so or libmkl_def.so上网查询后，执行下面的命令即可解决这个问题conda install nomkl
2017-03-07 17:54:20
4553
3
原创 fio-基本测试命令
fio --name=global --ioengine=sync --bs=4k --rw=read --filename=/dev/nvme0n1 --runtime=10 --direct=1 -numjobs=1 -iodepth=4 --name=job --write_iops_log=777 --write_bw_log=777 --log_avg_msec=1000 --
2017-02-17 17:37:40
7218
原创 GPU安装制定kernel路径
在centos7.2 安装cuda-8 出现报错：that the kernel source packages are installed and set up correctly.If you know that the kernel source packages are installed and set up correctly, you may pass the lo
2017-01-10 14:15:05
2035
原创 GPU监控的环境布置
Nvidia 监控配置方法一：wget "https://pypi.python.org/packages/72/31/378ca145e919ca415641a0f17f2669fa98c482a81f1f8fdfb72b1f9dbb37/nvidia-ml-py-7.352.0.tar.gz#md5=465e87bb424e832921e854258309399e"tar xf nv
2017-01-03 18:35:07
1230
原创 在centos 中批量安装cuda
单机安装cuda ,可以直接执行 ./cuda_8.0.XX_linux.run ，然后按照提示一步步的安装。但是当有多台机器的需要安装时，这种交互安装就麻烦了。最好有命令行的方式，一步安装。./cuda_8.0.xx_linux.run 提供了这种批量安装的方式： ./cuda_8.0.44_linux.run --silent --driver --to
2017-01-03 11:48:01
3496
原创 C语言实现单层感知器
根据perceptron 学习规则（Rosenblatt 提出 ）用C语言实现单层感知器。代码如下。#include#includeint nTrain=7; //训练样本数量int nInput=3; //训练样本维度double delta=0.1; //学习速率int nTest=1; //测试样本数量int maxItre =100;typedef struct slp
2016-10-04 10:19:59
3846
原创 centos 6.7安装xgboost
1、升级系统GCC yum install gcc 2、安装 anaconda 3、下载xgboost 的源码，解压。如果最新版不能安装，就试试老版本。[root@bogon redhat]# wget https://github.com/dmlc/xgboost/archive/0.47.tar.gz4、编译[root@bogon xgboost-0.47]# pwd
2016-09-14 20:15:08
2284
原创 _tkinter.TclError: no display name and no $DISPLAY environment variable的问题
升级了matplotlib ,但发现绘图脚本不能用了。 报错：>>> plt.figure(figsize=(30,20))Traceback (most recent call last): File "<stdin>", line 1, in <module> File "/usr/local/lib/python2.7/site...
2016-06-21 21:18:37
17372
5
转载 批量添加crontab 方法
(echo "*/3 * * * * ls /tmp ;/sbin/hwclock -w" ; crontab -l )| crontab
2016-06-16 20:35:51
5137
原创 megacli 开启强制写入硬盘
megacli 开启强制写入硬盘功能MegaCli -LDSetProp CachedBadBBU -L0 -a0
2016-06-12 17:16:19
1013
原创 自动模拟邮箱登陆并发送邮件
1、yum 安装msmtp和muttyum install msmtp mutt2、配置msmtp服务touch /etc/msmtprc# Set default values for all following accounts.defaultslogfile /var/log/msmtp.logaccount servicehost m
2016-06-06 10:34:09
3159
原创 基于Linux的免认证步骤
1、创建自己一对秘钥，放在用户名admin(可以为其他用户名) [bigdataops@bigdata-ops-control00 .ssh]$ pwd/home/admin/.ssh[bigdataops@bigdata-ops-control00 .ssh]$ ls id_rsa id_rsa.pub2、将公钥rsa.pub放到目标机：user
2016-02-25 15:27:19
543
原创 gpt 分区做xfs系统简介
注： $line 为盘符 （/dev/sda or /dev/sdb 等）dd if=/dev/zero of=$line bs=4k count=1000 //取出硬盘头部信息 parted -s $line mklabel gpt // 打gpt分区 parted -s $line mkpart xfs 0% 100%
2016-02-24 19:55:59
2164
原创 centos7 配置本地yum源，供局域网使用
1、将镜像挂载到/mediamount -o loop /data/CentOS-7-x86_64-Everything-1511.iso /media/2、安装 vsftpd & createrepo yum install -y vsftpd yum install -y createrepo*3、进入media目录，所有的RPM安装包放在Packages
2015-12-31 16:01:35
3228
原创 无密码rsync服务搭建
1、安装 rsync ： yum install -y rsync2、配置 /etc/rsyncd.conf #cat /etc/rsyncd.conflog file = /var/log/rsyncd.loglock file = /var/run/rsync.lockpid file = /var/run/rsyncd.pid[send_test]path = /
2015-12-30 18:27:35
611
转载 SATA硬盘的数据和电源接口定义
现在 SATA设备越来越普及，包括STAT硬盘和光驱基本都已经是 SATA接口的了，以前的老式电源输出接口一般都是20针供主板加上4针的电源供硬盘也就是说以前的电脑电源给硬盘供电没有设计15针 SATA接口的供电，现在的 SATA电源是15针的，那么我们有没有办法用以前的老式电源带动现在的新设备呢？答案是肯定的，有转接线可以把4pin转换为硬盘接口这就是转接线，黑的就是硬盘接口
2015-12-21 13:49:14
86783
1
转载 Python获取当地时间---转
我有的时候写程序要用到当前时间，我就想用python去取当前的时间，虽然不是很难，但是老是忘记，用一次丢一次，为了能够更好的记住，我今天特意写下python 当前时间这篇文章，如果你觉的对你有用的话，可以收藏下。取得时间相关的信息的话，要用到python time模块,python time模块里面有很多非常好用的功能，你可以去官方文档了解下，要取的当前时间的话，要取得当前
2015-12-21 13:39:53
434
原创 os 环境下SAS 卡1068E的管理工具，以及sas 2008,2308的管理工
一般raid卡的管理工具megacli ，但但与个别型号芯片的向1068E，2008，或者2308,、3108 。 megaraid不再有用。下面介绍2款工具收集这些卡的信息。1、对于1068ELSIUtil_1.62.zip2、解压文件如图，进入Linux文件3、将chmod a+x lsiutil4、运行后列出当前服务器的sas卡型号
2015-12-21 13:38:53
3246
原创 initrd.img 添加模块
unlzma -dc initrd.img | cpio -ivd358 ls359 mv initrd.img ../360 ls361 cd modules/362 ls363 cd 2.6.32-431.el6.x86_64/364 ls365 find . | grep hpsa366 cd ..367 ls368 cd ..369 ls
2015-12-21 13:37:43
1314
原创 Linux 下C编程笔记
1、源码#includemain(){FILE *fp;char str[11];if((fp=fopen("d:\\jrzh\\example\\string","rt"))==NULL){printf("\nCannot open file strike any key exit!");getch();exit(1);}fgets(str,11,fp
2015-12-21 13:36:39
402
原创 IP地址匹配方式
1、\([0-9]\{1,3\}\.\)\{3\}[0-9]\{1,3\} #[0-9]表示0-9的任意一个数字 #{1，3}表示1-3位 #\. "\"为转意符，\.表示小数点
2015-12-21 13:35:41
1436
原创 Intel SSD硬盘 FW 更新方法
Download and copy/unzip Intel SSD configuration manager to your Linux system.Copy and rename FW image to “D2011370_signed.bin”Check what is Intel SSD using:# ./iSSDCM_Linux64 -drive_list======
2015-12-21 13:34:05
9122
1
原创 HBA 卡打开或关闭磁盘cache
1、在HBA卡环境下：1-1、如果是后SAS盘[root@localhost ~]# sdparm /dev/sdf /dev/sdf: SEAGATE ST4000NM0023 0004Read write error recovery mode page:AWRE 1 [cha: y, def: 1, sav: 1]ARRE 1 [cha: y, def: 1,
2015-12-21 13:33:05
5340
3
原创 php 添加curl 模块
做法一：1. 找到当前运行的php版本的源代码目录，如php-5.2.3。进入curl扩展库目录。$cd /home/src/php-5.2.3/ext/curl2. 调用phpize程序生成编译配置文件。$/usr/local/php/bin/phpize3. 编译扩展库，分别执行下面的configure和make命令。$./configure -with-p
2015-12-21 13:31:17
914
原创 Python 获取新浪财经数据的案例
data_info = {'num':'200',#股票数目 'sort':'r3_net', #散户资金流入 'asc':'0', 'bankuai':'', 'shichang':''}data = urllib.urlencode(data_info) #格式化数据 data = ur
2015-10-12 18:22:14
8512
原创 python 获取股票的交易数据
环境：centos6.5 ;python2.7;pandas0.16.2目标：使用python 获取国内外股票数据通过pandas内置的Yahoo 金融接口，直接获取股票的数据：1、获取苹果20141/1至2015/8/20的股票数据In [27]: import pandas.io.data as webIn [28]: web.get_data_yahoo('AAPL','1
2015-08-20 17:03:29
5400
原创 crontab 不能开启，且报错`/var/run.bak/crond.pid': Input/output error
因为突然发现，crontab 不能使用，1、重启失败，并报 /var/run/crond.pid读写错误[root@localhost raid]# service crond restart Starting crond: crond: can't open or create /var/run/crond.pid: Input/output error
2015-08-19 15:15:39
7404
原创 Megacli中建立虚拟盘参数的含义
1） WriteBack, WriteThroughWriteBack：进行写操作时，将数据写入RAID卡缓存，并直接返回，RAID卡控制器将在系统负载低或者Cache满了的情况下把数据写入硬盘。该设置会大大提升RAID卡写性能，绝大多数的情况下会降低系统IO负载。 数据的可靠性由RAID卡的BBU(BatteryBackup Unit)进行保证。大多数情况下，我们都使用这种策略。Writ
2015-07-31 11:48:29
688
原创 在centos6.5 环境下安装scikit-learn
偶然的机会接触到scikit-learn,一直想安装他体验一下。但因为是centos6.5系统，官网对centos安装的资料比较大略，不是很详细，在网上搜一些安装的帖子，因为系统版本，原件版本的不同等，安装也不是特别的顺利。本周末，在研究scikit官网和各大网友的帖子后，又在一次次的安装失败后终于安装成功，记录如下，希望能帮助初学scikit的同学，大家少走弯路。1、官网的要求： Sci
2015-05-19 22:22:19
2864
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人