5 爱数星星的小H

尚未进行身份认证

我要认证

做快乐的事,做幸福的人

等级
TA的排名 1w+

Airflow Trigger DAG with config

1. rest api to trigger dagPOST /api/experimental/dags/<DAG_ID>/dag_runs #Creates a dag_run for a given dag id.curl -X POST \ http://localhost:8080/api/experimental/dags/<DAG_ID>/dag_runs \ -H 'Cache-Control: no-cache' \ -H 'Content-T

2020-10-13 20:13:54

CKAN2.8.4 Database Diagram about package and resource

参考链接:https://boykoc.github.io/ckan/2019/10/21/ckan-283-database-diagram.html

2020-07-27 20:54:05

spring-boot-starter-data-elasticsearch-2.3.1 with Springboot2.2.6

本文springboot版本为2.2.6,使用spring-boot-2.1.4会失败1. pom.xml引入依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-elasticsearch</artifactId> <version>2.3.1.REL

2020-07-23 21:34:13

HttpServletRequest 请求参数转换为 Json

将HttpServletRequest 请求参数转为json可以有两种方式:request.getParameterMap()和request.getQueryString()1.request.getParameterMap()Map<String, String[]> parameterMap = request.getParameterMap();String jsonStr = JSONObject.toJSONString(parameterMap);JSONObjec.

2020-07-23 11:42:51

Spring boot 2.1.4with togglz

1. pom.xml中添加mvn依赖<dependency> <groupId>org.togglz</groupId> <artifactId>togglz-spring-boot-starter</artifactId> <version>2.6.1.Final</version></dependency><dependency> <groupId>org.

2020-07-19 19:27:59

nexus-cli查看和清理nexues docker镜像

1. 下载bash脚本(根据环境下载)wget https://s3.eu-west-2.amazonaws.com/nexus-cli/1.0.0-beta/linux/nexus-cli2. 修改访问权限chmod +x nexus-cli3. 配置nexues(服务器地址、docker仓库名称、账号、密码)nexus-cli configureEnter Nexus Host: http://127.0.0.1:8081Enter Nexus Repository

2020-07-15 13:43:19

Spring Data JPA 使用LIMIT的方式

方法一:YourObject findFirstBy[field]OrderBy[field]Asc();YourObject findFirstBy[field]OrderBy[field]Desc();????:findTopByClassIdAndStudentNameOrderByUpdatedTimeDesc(classId,studentName);方法二:使用原生的sql语句@Query(value =“your sql str limit 1",nativeQuer

2020-07-03 20:22:00

PowerMock (UUID, private method)

1. maven配置依赖<properties> <powermock.version>2.0.2</powermock.version></properties><dependencies> <dependency> <groupId>org.powermock</groupId> <artifactId>powermock-module-junit4

2020-07-02 19:38:28

nexus磁盘不足

1.清理物理先创建一个Admin - Cleanup repositories using their associated policies类型的Task,这个任务会并不会真正但删除镜像,只是将其设置成deleted状态,不会物理删除;因此我们还需再创建一个Admin - Compact blob store类型的Task完成物理删除。2.设置storage.diskCache.diskFreeSpaceLimit变量磁盘剩余空间太少,数据库为只读状态,不可以设置task去清理,此时log中会

2020-06-22 14:51:49

scala连接elasticsearch并完成基本认证

def getRestClient(url: String): RestClient = { val restClientBuilder = RestClient.builder(HttpHost.create(url)) val provider = new BasicCredentialsProvider() val user = authInfo(0) val password = authInfo(1) provider..

2020-06-15 20:28:28

JSONP 跨域访问

一、 跨域访问在某个A网站中,我们希望使用Ajax来获得某个B网站中的特定内容。如果A网站与B网站不在同一个域中,那么就出现了跨域访问问题。二、JSONPJSONP(JSON With Padding)是JSON的一种“使用模式”,可用于解决主流浏览器的跨域数据访问的问题。一般来说位于 serverA.example.com 的网页无法与不是 serverB.example.com的服务器沟通,而 HTML 的<script> 元素是一个例外。利用<script>元素

2020-06-09 22:58:22

oracle笔记之表空间、用户和同义词

1、表空间(1)创建表空间(2)修改表空间(3)删除表空间--创建表空间CREATE [BIGFILE/UNDO/TEMPORARY] TABLESPACE tablespaceNameDATAFILE 'dbfile.dbf'--指定表空间物理文件SIZE 100M -- 大小 100MAUTOEXTEND ON --自动增大NEXT 10M --每次10MMAXSIZE UNLIMITED; --最大不限制--修改表空间ALTER TABLESPACE

2020-06-06 13:59:14

bash 字符串截取、替换及数组

语法格式 说明 ${string: start :length} 从 string 字符串的左边第 start 个字符开始,向右截取 length 个字符。 ${string: start} 从 string 字符串的左边第 start 个字符开始截取,直到最后。 ${string: 0-start :length} 从 string 字符串的右边第 start 个字符开始,向右截取 length 个字符。 ${string: 0-start} 从 string

2020-05-18 13:31:54

bash 空值判断

1. 直接判断name=if [ $name ];thenecho "not null"elseecho "is null"else> fi# is null2. 转换成字符串name=if [ "$name"="" ];thenecho "is null"elseecho "not null"fi#is null3. -n:不等于name=if [ ! -n "$name" ];thenecho "is null"elseecho "no..

2020-05-18 12:57:39

解决maven cached in the local repository问题

在执行maven clean package时遇到如下错误提示: Could not resolve dependencies for project org.springframework.boot:XXXX:jar:2.0-SNAPSHOT: Failed to collect dependencies at com.XXXX:XXXX:jar:2.0-SNAPSHOT: Failed ...

2020-04-20 12:53:14

docker+centos7启动spark2.4.5+hadoop2.10.0集群 for macOS

一、制作镜像1. centos 容器# 下载centos镜像 docker pull centos# 创建一个容器 docker run --name centos -itd centos /bin/bash# 进入已启动的容器docker attach centos2.下载安装包# 安装wget、ssh等基础服务yum install -y net-tools ...

2020-04-09 18:04:52

浏览器中访问本地文件for mac

Mac本身是包含apache服务器的,打开就可使用,无需部署tomcat等。使用步骤:1.打开终端Termina 启动apache服务(密码为开机密码)sudo apachectl start2.验证启动是否成功浏览器中输入127.0.0.1或者localhost,出现it works! 表明服务器已启动成功3.进入本地服务器的文件目录:/资源库/WebServer...

2020-04-07 13:35:10

ckan2.8.2连接solr6.6

【问题】:启动ckan的时会抛出连接不上solr的异常2020-04-07 12:07:00,495 ERROR [pysolr] Solr responded with an error (HTTP 404): [Reason: Error 404 Not Found]2020-04-07 12:07:00,495 ERROR [ckan.lib.search.common] Sol...

2020-04-07 12:25:28

solr无法添加core

使用docker启动solr后,添加core的时候会提示一下错误信息Error CREATEing SolrCore 'new_core': Unable to create core [new_core] Caused by: Can't find resource 'solrconfig.xml' in classpath or '/opt/solr/server/solr/new_co...

2020-04-07 11:03:56

如何替换dataframe中的nan?

在做数据清洗等工作时,必不可少的环节就是缺失值处理。在采用pandas读取或处理数据时,dataframe的缺失值默认是用nan填充的。但大多数情况下,我们需要的是None或者Null值而不是nan.所以,如何替换dataframe中的nan呢?替换nan的方法有很多,本文总结了三个方法。dataframe.fillna()方法,dataframe.applymap()以及dataframe....

2020-01-20 19:04:57

查看更多

勋章 我的勋章
  • 签到新秀
    签到新秀
    累计签到获取,不积跬步,无以至千里,继续坚持!
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 1024勋章
    1024勋章
    #1024程序员节#活动勋章,当日发布原创博客即可获得
  • 勤写标兵Lv2
    勤写标兵Lv2
    授予每个自然周发布4篇到6篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。