koukan3的博客

原创 目标检测一览1

1.目标检测问题1.1分类和回归目标检测，即是分类问题，也是回归问题。分类Classification：对打框的部分进行分类，是目标物体？还是背景？解决识别与分类（classification）。回归Regression：cat(x,y,w,h)，逼近这四个数值（例如：欧式距离作为损失函数）；可以用来校正目标框。解决定位（localization）。目标检测问题，可以大体分为级联的两步/两个模型：识别。是不是目标？ 分类。如果是目标的话，是什么目标？1.2概念Grou..

原创 SVM一学就会

# SVM<a name="jc6RQ"></a>## 1.函数最优化问题<a name="xqfyA"></a>### 1.1 无约束条件的最优化问题![image.png](https://cdn.nlark.com/yuque/0/2019/png/317160/1560006135344-f0ee5f67-de33-41ef-be41-5506e48fbb13.png#align=left&display=inline&he

原创 （案例）Geomesa集成HBase和Spark：读写HBase

一、 需求从HBase集群中读取数据，并写入到集成了Geomesa 的HBase集群中。地理信息数据（点Point）需要保存为Geometry对象。二、遇到的问题1.使用Spark结合Geomesa写入HBase时，空指针异常NullPointerException执行以下代码写入HBase时，报空指针异常：dataFrame.write.format("geomesa")....

原创 python访问并操作elasticsearch中的数据

from elasticsearch6 import Elasticsearch'''python访问elasticsearch，进行如下操作：1.查询指定索引下的所有字段及其类型。2.获取指定索引中指定字段的数据。'''class MyEs(object): def __init__(self,host="localhost",port=9200): ...

原创 Geomesa集成HBase：Geotools DataStore API 读写 HBase

import org.apache.commons.cli.CommandLine;import org.apache.commons.cli.Options;import org.apache.commons.cli.ParseException;import org.apache.commons.lang.StringUtils;import org.apache.hadoop.h...

原创 Spark读写HBase：处理纽约出租车数据

一、数据及部分代码来源：解析geojson数据：https://github.com/jwills/geojson纽约出租车数据：http://www.andresmh.com/nyctaxitrips/https://www1.nyc.gov/site/tlc/about/tlc-trip-record-data.page二、需求=====1.已经将2013年全年的出租车载...

原创 Git基础操作图

原创 python操作HDFS：pyhdfs

import pyhdfsfrom pyhdfs import HdfsExceptionimport osimport telnetlib as tnfrom flask import Flask,request,Responsefrom gevent.pywsgi import WSGIServerimport werkzeug'''python 操作HDFS。1.访问...

原创 HBase批量入库/导入

一、理论知识（一）加载数据到HBase的三种方法：通过MR job，使用TableOutputFormat加载到表中。（效率较低） 核心的原理还是使用htable的put方法，不过由于使用了mapreduce分布式提交到hbase，速度比单线程效率高出许多。 通过客户端API，写入表中。（效率较低） 通过Bulk load 运行MR job将数据输出为hbase内部格式，再加载数据到...

原创 机器学习概观

机器学习1.什么是机器学习？机器学习的诞生来源于两个领域：人工智能（artificial intelligence）。 ML是AI四象限中的一个（think optimal）。 人工智能主要包括机器学习和深度学习。深度学习是机器学习的一个分支。数据科学（data science）。机器学习(Mach...

原创 netty 一张图

原创 elasticsearch high level API 使用示例

<dependencies> <dependency> <groupId>org.elasticsearch.client</groupId> <artifactId>elasticsearch-rest-high-level-client</arti...

原创 FastDFS API 使用示例

<dependencies> <dependency> <groupId>org.csource</groupId> <artifactId>fastdfs-client-java</artifactId> <version>...

原创 HBase API 使用示例

<dependencies> <dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-client</artifactId> <!--版本从2.1.0改为...

原创 HDFS API 使用示例

<dependencies> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-hdfs</artifactId> <version>2...

原创 一张图了解Confluence中的模块注入/实例化

Confluence 是围绕Spring开发的，是一个开源的Java组件框架。

原创 JIRA REST API（一）

1.REST插件模块是用来干什么的？REST插件模块将服务和数据实体公开为REST API；REST模块基于JAX-RS,具体来说，它使用了Jersey。REST API是通过URI路径来访问资源的，插件或脚本发出HTTP请求并解析响应。请求方法是标准的HTTP方法，如GET，PUT，POST和DELETE；响应格式可以选择XML或JSON。2.响应格式XML...

原创 JIRA中的数据存储-----active object

JIRA中，数据实体（entity）的字段、类型及和数据库表的对应关系这些设置在 entityengine.xml、entitygroup.xml、entitymodel.xml中。entitymodel.xml------------定义实体、属性，以及和数据库表、字段的对应关系。entitygroup.xml------------定义数据实体所属的分组信息。entityengi...

转载 一个IT前辈的JIRA使用心得

【本文转载并摘抄自：http://www.csdn.net/article/2015-07-08/2825164程序员杂志  《因你而变——JIRA使用心得》  作者：杜炎】1.问题的提出互联网公司每生产一个产品，都要涉及很多部门角色协作，来共同完成，譬如产品、交互、视觉 、前端开发 、后端开发、测试、运维、PMO（项目管理部）等多个部门的共同协作。如何提升组织内部各部门管

原创 如何在 JIRA action 中使用 soy 来形成视图？

步骤1.创建一个SOY文件（格式和语法讲过，在此省略），文件名是magic-action.soy，模板全名是：Magical.templates.main步骤2.在 <web resource>配置中声明SOY 文件。<web-resource key="action-templates"> <resource type="s...

原创 soy文件的语法规则

1.声明全局的命名空间{namespace examples.simple}2.声明模板自己的名称{template .helloWorld} ... {/template}3.在备注中，声明模板体中的参数：@param 参数名 @param？表示可选参数 在模板体中，声明参数： { @param 参数名：参数说明 } ...

原创 带着问题认识 Google Closure Templates

1.Closure Templates是干什么用的？它是一个客户端和服务器端的模板系统，用来动态创建可复用的HTML和UI元素。2.为什么要使用Closure Templates？ 2.1 模块化------相对于传统的模板系统中需要为每个页面创建一个整体模板，Closure Templates是模块/组件化的，你可以从视图显示的角度来分解应用程序的逻辑，并创建自己的用户界...

原创 JIRA自定义插件启动流程

一、加载环境：c.a.jira.startup.JiraStartupLogger1.1 检查jira home目录1.2 为进入开发模式设置系统属性：Cache/reloadbundles/ mail等。1.3 启动数据库检测：（/target/jira/home/database/h2db）准备database configuration：Database Pro...

原创 JIRA增加自定义导航菜单项---普通用户查看所有项目

一、视图：添加自定义菜单 CUSTOM http://www.j-tricks.com CUSTOM ALL PROJS http://www.j-tricks.com/tutorials二、参考系统配置：system-top-navigation-plugin.xml / JiraWebActionSupport.properties2.1

原创 Crowd自定义插件启动的主要流程

1.加载crowd.cfg.xml 配置了数据库及hibernate参数2.apache.struts2.config.AbstractBeanSelectionProvider 为各种类配置bean（Struts）3.初始化Spring root WebApplicationContext...

翻译 Backbone.js(二)集合Collections

1.集合作用：集合用来处理一组相关的模型、把新模型加载和保存到服务器、提供帮助函数来对一系列模型执行聚合或运算。集合有自己的事件，除此以外，它还可以代理它内部的模型的所有事件，因此这让你可以在一个地方监听集合中任何模型可能发生的更改。2.API集成2.1创建一个集合var Books = Backbone.Collection.extend({ url...

翻译 Backbone.js(一) 模型Models和视图Views

1.简介backbone.js通过以键值对绑定的模型（Models）、自定义事件、具有丰富函数API的集合（Collections）、事件处理视图（Views）来结构化Web应用程序，并通过RESTful JSON接口和你现有的API进行连接。我们可以很容易的使用大量选择器和回调函数来创建JS程序，所做的就是让数据在HTML UI、JS逻辑和数据库之间保持同步。对于富客户端程序，一个更加结

翻译 JIRA组件介绍

组件modules：1.<resource type="download" name="myimage.gif" location="includes/images/myimage.gif">resource表示在插件中添加可下载的资源，这些资源是非Java文件，例如：js、CSS、图片文件等。资源类型type：告诉组件这个资源将怎样被使用。类型的值将根据应用程序的不同而不一样