soundfuture的专栏

原创 JAVA运行MYSQL的LOAD相关问题小结

MYSQL的LOAD来加载ORACLE的CSV文件的过程中，碰到了棘手的几个问题。总结一下。1、乱码我本机装的MYSQL设置字符集是UTF8，但是从ORACLE导出的CSV文件GBK编码的，别说使用JDBC来运行了，就算在NAVICAT中运行都报错。解决方法：先去判断是文件的字符集，然后去指定LOAD的CHARSET2、INT类型的列，数据为空报错:incorrect intege

原创 JAVA算汉字真实长度

今天一个程序出了问题，排查了半天才发现，原来是因为原来的一个计算汉字长度的代码出了问题： public static int getStringRealLength(String str) throws Exception{ String str1 = new String(str.getBytes("GB2312"),"iso-8859-1"); return str1.leng

原创 soffice实现的文件上传转换

需求：将上传的word、excel、ppt生成可以预览的html文件（服务端Linux）在做这个需求以前，调研过很多方法，后来决定使用openoffice。在开发过程中，遇到一个棘手的问题，soffice的jar包和项目现有的jar包冲突。于是决定将soffice转换的main方法打包成一个单独的jar包，然后在转换的代码中调用这个jar包。不多说了，上代码：转换的jar包代码：p

原创 JAVA的web截图功能实现

需求：在网页上点击按钮，打开截图程序。截图后，弹出页面，填写相关文字性的内容，将所截到的图片以邮件形式发送出去。不让采购小公司的截图插件，就只能自己搞了。1、开发客户端截图软件（基于JPanel），接收参数。将截到的图片上传到参数指定的服务器上，并使用本地IE打开邮件发送的页面。2、在页面中嵌入Applet程序，点击按钮触发程序中的事件，从而打开截图程序。关键代码：1、截图程序

转载 证券公司信息化_什么是大数据？大数据在证券公司的应用怎样？数据价值发掘的陷阱有哪些？

心血来潮搞24小时倒计时，把自己给逼住了。以后再不干这种傻事。花了几个小时，谈谈曾经有过的一些关于业务数据统计分析方面的感想。半年前从微博上看到大数据概念，想着跟数据仓库概念相近。查了百度百科，说是Internet留下的海量Text被人搞去非结构化分析。跟结构化的数据仓库相去甚远。但，就像“云计算”从最开始的Google的分布式数据处理的概念延伸到所有跟Internet服务端有

原创 xfire下自定义参数

接口定义默认参数In0、In1...不太友好。修改方法：添加annotation：@WebServicepublic interface Iupward { @WebMethod @WebResult(name="result") public String example(@WebParam(name="message")String message); @WebM

原创 kettle加解密算法

package sjck;import java.math.BigInteger; public class JM { private static int RADIX = 16; private static String SEED = "0933910847463829827159347601486730416058"; publi

转载 【资管数据源学习】关于基金账户、交易账户的一些问答

问：什么是基金账户？答：基金账户分为基金交易账户和基金TA账户。一般我们所说的基金账户（基金账号）是指基金TA账户。问：什么是基金交易账户？答：基金交易帐户是银行为投资者设立的用于在本行进行基金交易的帐户。投资者通过银行代销网点办理基金业务时，必须先开立基金交易帐户。该帐户用于记载投资者进行基金交易活动的情况和所持有的基金份额。问：什么是基金TA账户？答：基金TA帐户是投资者持

原创 kettle中调用iq存储过程传参

不带参数的存储过程可以直接使用“调用DB存储过程”控件，将存储过程名称配置进去即可。研究了一下带参数情况，可以使用这样的方法：表输入：select convert(char,getdate(),112) as LOAD_DT,1 as RUNSTATUS,'1' as MSG存储过程1：alter PROCEDURE "DBA"."P_ktl_arg_test"  (IN

原创 iq去.0问题

今天碰到一个问题，由于ETL采集的时候没有考虑两边库表的数据类型对应（源oracle,number类型，目标sybase iq,varchar型），导致采集的数据落地成文本，然后load进iq后，出现一大堆xxxx.0的数据。现需要将该列去掉后来的.0。乍看起来很简单，后来还是费了一番周折终搞定需要convert(varchar,convert(numeric(22,0),colname)

原创 kettle etl采集流程v1

原创 Sybase IQ: All buffer cache pages are in use, ask your DBA to increase问题解决

今天执行一个存储过程，需要向一个表中load十万条数据的时候出现问题： All buffer cache pages are in use, ask your DBA to increase后来查阅相关资料发现，需要在dbname.cfg文件中修改三项设置：-c -iqmc -iqtc 我将我的三个参数分别调整为100m,180m,300m然

原创 sybase iq选择topN数据

select * from ( select RANK() OVER ( ORDER BY khbh asc,zjzh)num, * from dba.t_ddw_d_khdz t )as a where a.num>= 1 and a.num< 10

原创 kettle连接sqlserver2005报Connection refused: connect解决方法

一、打开程序 Microsoft SQL Server 服务器网络使用工具     打开该工具后,在"常规"中可以看到服务器启用了哪些协议.　　一般而言,我们启用命名管道以及 TCP/IP 协议.　　点中 TCP/IP 协议,选择"属性",我们可以来检查 SQK Server 服务默认端口的设置安装完数据库后设置ICP/IP协议启动，具体如下：    （1）打开SQL

转载 is6应用程序池被自动禁用问题 Service Unavailable 应用程序池 'DefaultAppPool' 被自动禁用

郁闷了两天了，问题终于解决了。上个礼拜重装服务器（windows 2003）后，一切都配置完成。打开iis测试web，浏览默认站点，总是显示Service Unavailable．    1.首先是打开IIS管理器．检查应用程序池，果然＂DefaultAppPoo

原创 web在线实时聊天的一种方法

1.建立一个会话信息类，记录会话的用户sessionid，每个用户的最后发言时间，会话编号。2.建立一个待发消息类，表示需要向前段推送的消息队列，记录消息内容、时间、收消息方的sessionid、发消息方的sessionid、名称等信息。3.在服务器声明用户会话队列，当用户发起会

原创 对空指针使用delete是安全的

对于分配和销毁空间的一些说明

原创 The power of algorithm

1.估算常用法则2.海量数据查找算法3.移位算法4.求数组最大连续段算法

原创 快排测试程序

快排测试程序，一些事情做起来才会知道，远远没有想像中的那么简单。

转载 再看sizeof

sizeof，字节对齐，多继承，虚拟继承，成员函数指针

原创 iText在Linux下使用不同中文字体问题的解决方法

iText在Linux下无法使用ttf字体的问题

原创 数据挖掘分类算法比较

决策树： 优1.速度快2.准确性高 缺1.难处理大训练集2.类别多时错误概率大KNN： 优1.避免样本不平衡问题2.对于类域的交叉或重叠较多的待分样本适合 缺1.计算量大2.对样本容量小的类域会误差大SVM： 对于少量样本有较好的效果贝叶斯：1.应用广泛 2.在实际情况下，概率分布未知 3.要求表达文本的主题词相互独立，但在实际文本中一般很难满足。神经网络：1.神经网络是基于经验风险最小化原则的学习算法，有一些固有的缺陷，比如层数和神经元个数难以确定，容易陷入局部极小

原创 iText的一些问题

iText开发中的一点问题摘录

原创 神经网络

搞数据挖掘编的神经网络，用于分类预测。 #include #include #include #include #include #include #include using namespace std;const double l=0.1;//学习率const int trainItemNumber=20000;//训练对的数目typed

原创 python词法分析(分词+词性标注）

 # -*- coding: cp936 -*-###librarys:import sys###global variables:freqdic={}dic={}transferdic={}inputfilename=outputfilename=trainingfilename=marklist=[]###classes:

原创 python中文字符串数组编码的问题

今天为这破中文问题弄了一个上午，总算是解决了。f=file(input.txt)outf=file(output.txt,w)while True: line=f.readline() if len(line)==0: break uline=line.decode(gbk) #nline=unicode(gli

原创 Failed to install Tomcat5 service 解决办法

Failed to install Tomcat5 service 解决办法2008年04月21日 星期一 17:49删除tomcat以前版本时，只是简单的删除安装文件夹。重新安装tomcat时报错Failed to install Tomcatx.x service，并且程序不能运行。1、找到报错的日志，显示下列的错误$tomcat_install/log

转载 ACE环境配置

ACE的构建（VC++6.0环境）Windows下ACE的构建1. 将ACE-5.5.zip解压到所需的安装目录，此处以E:/为例，解压后形成ACE_wrappers文件夹，因此ACE将会存在于ACE_wrappers/ace目录中。ACE_ROOT=E:/ACE_wrappers。2. 在系统中新建ACE_ROOT环境变量，值设为 E:/ACE_wrappers。具体设置为：我的电脑->属性->

原创 02.2.5笔记

1.string *s1 = (string*) malloc(10*sizeof(string));string *s2 = new string[10];s1指向的是可以容纳10个string对象的足够空间，但内存里没有创建对象，没有办法来初始化数组里的对象，换句话说，s1一点用都没有。s2指向的是一个包含10个完全构造好的string对象数组，每个对象可以在任何读取string的操作里安

原创 08.2.5读书笔记

一.虚函数1.基类指针在运行时决定调用哪种形式的虚函数是根据基类指针指向的对象类型来决定的.虚函数可用标准的"对象/点"运算符语法进行正常访问,然而,采用这种方式忽略了其多态性的属性.只有通过基类指针来访问虚函数时,才能体现运行时的多态性.#include iostream>using namespace std;class base...{public:    virtual v

原创 08.2.4读书笔记

一.友元 友元提供了访问类的私有数据成员的机制#include iostream>using namespace std;class c2;class c1...{    int i;public:    void set(int j)...{i=j;}    bool allzero(c2);};class c2...{    int i;public :    void set(i

原创 一道题

写一个带参数宏get_struct_addr_from_member_addr(p, stru, m)， 能够根据任意结构实体的某一个成员的地址，算出该结构实体的地址，其中参数p是指向该 成员的指针，stru是该结构体，m是该成员。 (stru *)((char *)p-&((stru *)0)->m))  

转载 linux c编程

Linux 下 C 语言编程 原著：Rick McMullin前言Linux的发行版中包含了很多软件开发工具. 它们中的很多是用于 C 和 C++应用程序开发的. 本文介绍了在 Linux 下能用于 C 应用程序开发和调试的工具. 本文的主旨是介绍如何在 Linux 下使用 C 编译器和其他 C 编程工具, 而非 C 语言编程的教程. 在本文中你将学到以下知识:  什么是 C ? GNU C 编译

原创 验证码

private void Page_Load(object sender, System.EventArgs e)  ...{   // 在此处放置用户代码以初始化页面   //if(allfresh)  if(!this.IsPostBack)...{    this.valicode();       }  }  private void valicode()  ...{    Sessi

原创 c++读书笔记(2006)

1,类成员是按照它们在类里被声明的顺序进行初始化的，和它们在成员初始化列表中列出的顺序没一点关系。如果使用多继承，基类被初始化的顺序和它们被派生类继承的顺序一致，它们在成员初始化列表中的顺序会被忽略。2,继承中，派生类的初始化应使用成员初使化列表。3,假设f是想正确声明的函数，c是和它相关的类：★虚函数必须是成员函数。如果f必须是虚函数，就让它成为c的成员函数。★operator>>和oper

转载 ASP.net中让Session永不过期

private void ReconnectSession(){    int int_MilliSecondsTimeOut = (this.Session.Timeout * 60000) - 30000;    string str_Script = @"            function Reconnect()        {            window.open(rec

原创 几个函数

1.转换函数string convertIntToString(int n)//int转换成string...{ stringstream sstr; string str; sstrn; sstr>>str; return str;}string convertDoubleToString(double n)//double转换成string...{ stringstream sstr;

转载 Sql编程

--数据操作Select --从数据库表中检索数据行和列Insert --向数据库表添加新数据行Delete --从数据库表中删除数据行Update --更新数据库表中的数据--数据定义Create TABLE --创建一个数据库表Drop TABLE --从数据库中删除表Alter TABLE --修改数据库表结构Create VIEW --创建一个视图Drop VIEW --从数据库中删除

转载 sql常用语句大全

--1、查找员工的编号、姓名、部门和出生日期，如果出生日期为空值，--显示日期不详,并按部门排序输出,日期格式为yyyy-mm-dd。select emp_no ,emp_name ,dept ,isnull(convert(char(10),birthday,120),日期不详) birthdayfrom employeeorder by dept--2、查找与喻自强在同一个单位的员工姓名、