- 博客(234)
- 资源 (12)
- 收藏
- 关注
RSS订阅原创 软件团队协作常见问题与应对方法
一个团队成员均有各自的任务，更多关注自己的事情，导致团队整体协作时没有形成合力效应。例如成员A做架构升级，成员B做新业务迭代，他们都希望对方能支持自己的工作，但是都没有响应。这样的分工就是简单的加法逻辑，没有发挥出乘法效应。
2024-04-13 20:25:39
137
原创 日常工作中时间管理的方法学习总结
时间管理不仅仅是关于工作的效率，它还关系到生活的质量。有效的时间管理可以让你有更多的时间去做自己喜爱的事情，提高工作和生活的满意度。
2024-03-24 15:42:42
824
原创 hive窗口函数学习总结
Hive中的窗口函数主要用于在数据集的子集（窗口）上执行计算。窗口函数可以解决一些复杂的数据分析问题，例如计算移动平均值、累计和、排名等。例如，如果你想要计算每个用户的购买总额排名，或者计算每个月的销售额是前三个月的平均值的多少倍，这些问题都可以通过窗口函数来解决。窗口函数的主要特点是可以在不改变原始数据行数的情况下，为每一行提供一个基于窗口的计算结果。这与聚合函数不同，聚合函数会将多行数据聚合成一行。
2024-03-23 13:19:36
1043
1
翻译 软件架构模式概述
架构模式是我们设计应用程序的核心。虽然我们可能选择不同的模式，但通过识别和理解它们的共性，我们可以遵循一些基础原则，这些原则将为设计关键的业务应用程序提供坚实的基础。在我看来，理解这些规则帮助我创建出了可扩展、可测试的软件系统。
2024-02-21 20:39:35
47
原创 使用py-spy对python程序进行性能诊断学习
py-spy是一个强大的工具，它可以帮助Python开发者进行性能分析而不影响程序的正常运行。通过生成火焰图和提供实时的性能数据，py-spy使得性能优化变得更加直观和高效。
2024-01-28 17:10:10
579
原创 Python异常处理TypeError: translation() got an unexpected keyword argument ‘codeset‘
学习安装好依赖后执行命令仅接着出现下列错误，主要提示是 「TypeError: translation() got an unexpected keyword argument ‘codeset’」
2024-01-01 17:08:31
1092
翻译 软件研发中技术主R的职责
在项目管理中，“项目主R"中的"R"通常是"Responsibility”（责任）的缩写，表示这个人在项目中担任主要责任。而"技术主R"一般指的是一次项目中技术侧实施负责人。技术主R并不一定要承担项目经理全部的职责，但要从项目管理的角度推进技术的落地。从技术负责人的视角看，项目管理可以被划分为四个阶段：需求阶段、设计阶段、开发阶段和上线阶段。作为负责人，就是确保项目生命周期中的每个阶段都被妥善处理。
2023-12-24 17:53:37
192
翻译 LangChain简介
这就是我们对LangChain的简单介绍——一个允许我们基于LLMs构建更高级应用程序的库，如OpenAI的GPT-3模型或通过Hugging Face提供的模型。
2023-12-17 21:06:05
319
原创 基于大语言模型的垂直领域知识问答系统流程学习
大模型能回答多数一般性问题，但在垂直领中，模型知识深度、准确度有限。为了解决该问题，我们可以利用向量数据库结合大模型和私有知识，构建垂直领域的智能服务。
2023-12-03 22:01:50
1181
翻译 Java中MapDB使用简介
在这篇文章中，我们深入研究了MapDB的嵌入式数据库引擎和集合框架。我们首先研究了核心类DB和DBMaker来配置、打开和管理我们的数据库。然后，我们通过一些例子来看MapDB提供的数据结构如何处理我们的记录。最后，我们看了MapDB相比传统数据库或Java集合的优势。
2023-11-26 21:43:54
472
原创 数据可视化diff工具jsondiffpatch使用学习
数据迁移工程中diff是重要的一环，便于我们排查问题，提高迁移的质量。基于这个工具，我们可以实现可视化比较。当有定制化比较诉求是，通过扩展函数实现定制化功能，最终可以搭建起我们的diff工具服务。
2023-08-20 03:26:13
1992
原创 Spring Boot单元测试使用MockBean注解向Service注入Mock对象
MockBean注解是Spring Boot提供的一个注解，用于模拟依赖对象。它的作用是在Spring上下文中创建一个模拟对象，并将其注入到被测试对象中，以便进行单元测试。
2023-08-13 15:03:52
3288
翻译 使用h2database对java关系数据库访问逻辑进行测试
h2database是一个用Java编写的嵌入式关系型数据库管理系统，可以在内存中运行。h2database支持标准的SQL语法和JDBC API。高性能：采用了高效的算法和数据结构，具有出色的性能。轻量：的代码量非常小，可以很容易地嵌入到应用程序中，同时也支持多种部署方式。兼容性强：支持标准的SQL语法和JDBC API，同时也支持多种数据库的兼容模式。可靠性高：采用了事务机制和数据持久化技术，可以保证数据的一致性和可靠性。使用简介：提供了丰富的文档和示例，可以很容易地上手使用。
2023-08-06 21:36:30
166
翻译 linux服务器中部署java应用在jar包中搜索指定的文件及文件中的字符串
class文件是一个字节码文件，包含了类或接口的字节码定义。JavaRuntime(JAR)是一个基于ZIP格式的压缩归档文件，将Java字节码、源码、数据、元数据文件在一起，文件的扩展名是.jar。这样打包组织可以更方便部署、使用。定位问题通常要通过搜索来完成，先明确要搜索的对象，然后按部分完成不同部分搜索，最终定位问题。
2023-03-05 17:14:15
1657
翻译 linux通过端口号定位进程的几种方法
日常在linux 服务器上排查问题时，会有根据端口号找对应pid(进程id)的需求，最终通过定位pid来排查问题。本文将介绍如何在linux系统上通过监听端口号找到相关的进程。本文介绍了3个命令可以可以找出监听某个端口的进程id，日常排查网络连接数过多，分析来源可以通过这些命令帮助我们快速发现问题。
2023-02-28 22:57:03
12691
翻译 Java单元测试对私有方法测试
本文简要讲了为什么测试私有方法不是一个好的实践，其次演示了如果一定要测试私有方法，如何通过反射的方式进行测试。
2022-12-31 07:15:10
3916
2
翻译 MacOS下Chrome浏览器打开文件选择对话框快速切换路径的方法
当我们打开浏览器，选择打开文件对话框按钮，此时会弹出文件选择对话框这时要选择的文件可能藏的很深，经过很多次路径选择才能找到，十分繁琐。
2022-10-22 16:52:15
656
翻译 团队绩效沟通的注意事项
绩效沟通通常是在一个考核周期结束时，主管与下属共同参与分析下属在考核周期内的针对目标完成情况，分析亮点与不足，最终制定计划针对不足进行改进，帮助下属提高。
2022-08-27 19:48:44
272
翻译 Java单元测试对void方法的测试
日常系统单测开发都是通过对方法的返回值进行验证。而void方法没有返回值，这是我们可以对其行为进行验证。下面是几个常见的例子，被验证方法均是void方法。这时我们就可以通过mock并验证这组行为是否发生。在java项目中一般通过mockito来实现。......
2022-08-13 23:27:00
6953
1
翻译 团队协作常见问题分析与解决
尽管团队成员彼此信任，在冲突中进行争执，对所做的决定做出承诺，并且主动承担起相应的责任，但他们很可能会只从个人角度确定自己认为有利于团队的需求、日常工作及关注点。他们很可能只关注他们部门在团队中的位置、个人职业的发展，忽视了代表团队集体成功的结果，所以需要所有团队成员紧盯团队结果，为集体成功而努力。这是因为他们相信所有的意见和想法都已经拿到桌面上进行了考虑，也就说不存在任何芥蒂地对团队成员给与了信赖，这样当他们找不到更好的答案时，他们愿意拥护执行当前的决议，兑现对决议的承诺。......
2022-07-23 18:10:21
4401
翻译 性能衡量指标-吞吐量与响应时间
吞吐量（Throughput）吞吐量用来衡量系统总体性能。对于事务处理系统来说，吞吐量通常通过TPS(每秒事务数)或TPM(每分钟事务数)来衡量。 根据定义可以看到通过数量反应问题一个指标。吞吐量的高低通常与下列因素有关：机器配置参数软件处理任务的开销数据在磁盘上的分布软件系统或硬件系统的并行度被处理事务的类型吞吐量的衡量方式 ：在应用程序代码中记录事物Ways to measure throughputThe best way to measure throughput for a
2022-05-08 15:00:37
2073
翻译 Java中职责链的泛化使用
ChannelInboundHandlerAdapter 与 ChannelOutboundHandlerAdapterif (packet instanceof LoginRequestPacket) {// …} else if (packet instanceof MessageRequestPacket) {// …} else if …public class LoginRequestHandler extends SimpleChannelInboundHandler {@Over
2022-04-30 23:14:25
148
翻译 通过Java学习与演示CQRS与事件溯源模式
1 简介本文将介绍CQRS与Event Sourcing设计模式的基本概念。我们首先分别学习两种模式，最后学习二者是如何结合使用。此外还有一些支持这些模式的框架，如Axon。但为了学习两种模式本文不会使用框架演示，而是编写一个简单的应用来理解基本概念。2 基本概念使用前先需要理解模式，通常这两个模式在企业应用中是结合在一起使用2.1 事件溯源(Event Sourcing)Event Sourcing 模式是将应用程序的状态以一系列事件的进行持久化，最终可以在任何时候查询这些状态并将应用恢复到任意
2022-03-31 23:39:08
1021
翻译 Java Hamcrest学习
1 概述在Java生态中，Hamcrest是一个用在单元测试中的框架。该框架与JUnit集成。Java中使用JUnit进行单元测试。JUnit提供了若干断言工具。 如assertEquals、assertTrue等。此外我们还可以通过扩展能力来增强assert*的表达。这时我们使用assertThatpublic static void assertThat(T actual,Matcher<? super T> matcher)通过指定不同的matcher，来判断actual对
2022-02-15 22:29:40
573
翻译 linux服务器java应用cpu load超过阈值常见问题分析与解决
1. 分析服务发布时间分析：在服务发布一段时间后，出现该问题，可以断定与服务发布相关。通过ps命令，可以看到一个进程的启动时间。如果启动时间与cpu load飙升时间点符合，或服务发布后的几分钟内产生，可以判断是新服务启动导致。ps -ef ｜ grep [pid]解决：分析新上线代码，进行处理2. 排查系统进程数分析：根据负载的定义，可以排查是否是系统进程数量过多导致。这是我们会用到vmstat命令。vmstat 1 10 # 每一秒显示一次，显示10次输出的指标可分为6类[1]
2021-11-21 11:53:50
627
翻译 Java 线程池拒绝策略
0 前置依赖本例中会依赖assertj-core完成单测，maven依赖如下： <!-- https://mvnrepository.com/artifact/org.assertj/assertj-core --> <dependency> <groupId>org.assertj</groupId> <artifactId>assertj-core</artifactId> &l
2021-10-30 20:13:32
926
翻译 Idea中单测JunitTest环境运行Maven spring项目profile环境选择
1 背景Idea单测4.xSpring项目常见一种写法如下@RunWithapplicationContextAbstractTransactionalJUnit4SpringContextTests@RunWith(SpringJUnit4ClassRunner.class)@Rollback(false)@ContextConfiguration(locations = {"classpath:/applicationContext.xml"})public abstract cla
2021-09-19 19:38:00
1308
翻译 基于消息的分布式事务的概念学习
这里写自定义目录标题1.背景2 事务消息机制3. 本地消息表4. 远程调用支持扩展5. ACID特性分析1.背景在日常业务中存在本地事务操作和MQ共同使用的场景，可能出现任意一个失败，导致数据不一致的问题。常见教程中一个例子：对于订单系统来说，它创建订单的过程中实际上执行了2个步骤的操作：1在订单库中插入一条订单数据，创建订单；1.1 发消息给消息队列，消息的内容就是刚刚创建的订单。1.2 发消息给消息队列，消息的内容就是刚刚创建的订单。2 购物车系统订阅相应的主题，接收订单创建的消息，然
2021-08-22 22:12:26
278
翻译 Java中两种json diff的实现学习
Java中两种json diff的实现学习json diff就是找两个json的差异，找差异时维度可以是第一层字段维度。或者是深度差异比较。为了演示这个功能，需要依赖两个工具包。 <dependency> <groupId>com.google.guava</groupId> <artifactId>guava</artifactId> <versio
2021-07-04 15:55:12
6202
2
翻译 JSON对象平铺和平铺后对象化的实现学习
1.什么是JSON对象平铺与对象化常见的json结构如下：let jdata = { "a": "a1", "b": { "b1": "b11" }, "c": ["c1", "c2", "c3"], "d": [{ "d1": "d2" }]}平铺即用单层的 (Key,Value) 结构表示当前这种递归结构，平铺后效果如下：{ "a":"a1", "b.b1":"b11", "c[0]":"c1", "c[
2021-06-13 14:12:56
1852
1
翻译 Java package-info.java文件使用学习
1. 概述本教程中，我们将学习package-info.java文件的用途。简而言之，package-info.java是一个Java文件，这个文件可以被添加到任何的package中。2. package-info文件的用途package-info文件的两大用途如下：用作包级的说明文档定义包级注解除了这两点，也可以按需扩展使用。如果需要添加任何包级的特性，则可以将这些信息添加到该文件中。3.包级的文档jdk1.5之后引入了这个文件，用于增加包级的定义，下面是一个例子。/** * Th
2021-06-12 15:25:16
820
翻译 linux shell执行curl提示继续输入无法执行的问题学习与处理
1 问题描述日常我们都会使用curl命令，例如打开chrome浏览器，在开发者模式下，将执行的http命令复制为curl，然后打开中端执行。但此时直接执行复制的命令常展示出 > 符号，提示继续输入，而无法继续执行。:~ ts$ curl "https://blog.csdn.net/Revivedsun/ \>>>如上，我们执行命令出现 > 提示符号，提示我们继续输入。环境变量有PS1、PS2、PS3以及PS4。一个非常长的命令可以通过在末尾加 \ 使其分行显示
2021-05-30 19:33:26
2008
翻译 数据库数据迁移的3种方案学习
1 背景日常我们开发工作中，随着业务需求的变更，重构系统是很常见的事情。重构系统常见的一个场景是变更底层数据模型与存储结构。这种情况下就要对数据进行迁移，从而使业务能正常运行。常见的表变化有如下3种：增加、删除、修改字段，对单表结构修改进行分库分表变更底层存储系统。例如数据库选型变更当发生变更都要进行迁移。下面介绍3种常见的迁移思路。2 停服迁移法业务自身特点是非24小时提供服务，有暂停维护时间。这时可以在服务停止运行期间进行迁移。操作方式如下：数据迁移数据导出分库分表工具，
2021-05-18 22:39:09
9256
翻译 线上发布8大注意事项学习
线上发布8大注意事项发布操作很简单，但线上发布可能会带来很多问题，稍有疏忽就会造成很大的影响。因此我们要注意。下面列出了常见注意事项，日常发布应该严格遵守。要测试线上未经测试的代码严谨直接发布周知上线前一定要周知，当发生好让大家快速分析定位审批线上数据的修改都是要经过审批，目的是多人进行review，保证安全灰度上线一定是一个灰度过程，这样将发生问题的影响降到最低观察灰度上线过程中一定要去看监控和相关日志，做到又问题及时能发现回滚如果进行上线，项目必须能回滚
2021-05-15 13:00:08
362
翻译 MySql数据误删恢复路径学习总结
背景日常操作mysql，可能直接提交sql改表数据，也可能是通过代码来控制修改表数据。由于写SQL或审核SQL时有疏忽，就会造成数据误删除，因此就需要我们进行数据恢复。mysql中常用基于binLog进行恢复，本文不关注底层细节，只介绍上层业务开发恢复数据时的常见流程和注意点。提交错误的SQL数据误删的恢复日常数据库操作时，如果提交的SQL语句写错了，引起线上数据的误删、误更新，就需要对SQL进行回滚。常见执行Delete、Update导致数据错误进行回滚。由于提交已生效，因此我们需要建立一些机制，进
2021-04-29 23:15:23
197
原创 基于数据变更抓取系统进行缓存更新的问题及处理方式学习总结
1 背景对外提供的Web应用为了提高查询速度都会使用缓存来提高查询速度。当数据库发生变更时，我们需要更新缓存数据，从而保证数据库与缓存的数据的最终一致。为了有效监听数据变更，通常会基于数据变更监听系统来获取更新信息，随后发送到下游（可以通过MQ，RPC等方法），最后下游来更新缓存。 常见的数据变更监听系统包括DataBus、Amazon Data Pipeline、阿里DRC。2 基于数据变更系统缓存更新结构下图中关系数据库以Myql为例，MQ以kafka为例，缓存以Redis为例，数据变更抓取系统以
2021-04-04 16:29:27
260
1
翻译 MySql主从同步、延迟及解决的学习总结
1 什么是MySql主从同步MySql是当今广泛使用的一种关系数据库。在日常生产环境中，为了保证高可用及高并发，通常采用主从结构。即通过主从复制方式同步数据，再通过读写分离实现提高并发访问能力。主从复制通过binLog（binarylog）实现，这时一种日志文件。记录了MySql数据库增删改操作的日志信息。主结点发生操作变更后，binlog被发送到从结点，并记录在relay log中。从结点重放relay log，并转换为数据操作sql语句，实现从结点数据的入库。最终完成主结点数据复制。一次主从复制
2021-03-30 22:32:55
289
FASTJSON那些事.pptx
2019-09-22
WxWidget教程
2015-09-13
软件项目管理的九阴真经
2013-10-04
《Visual C++音频/视频技术开发与实战》前9章源码
2013-05-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人