- 博客(121)
- 资源 (6)
- 收藏
- 关注
RSS订阅
原创 多目标优化算法——多目标粒子群算法实战分享
版权声明：本文为博主原创文章，未经博主允许不得转载。运筹学优化领域，多目标优化算法，多目标自适应粒子群优化算法；并简要介绍了开源多目标优化算法框架jMetal。基本的粒子群优化算法可参照博主的一篇文章粒子群算法实战分享－附原版动画PPT（技术分享也可以文艺范？）PPT下载地址：《多目标粒子群算法分享 - CSDN博主dkjkls》。...
2019-03-09 12:34:24
40308
21
原创 粒子群算法实战分享－附原版动画PPT（技术分享也可以文艺范？）
本文是针对博主使用粒子群优化算法解决水面无人艇静态、动态障碍物规避，及场地布局三类问题，做了更深入的总结分析。 本文的形式是按照《粒子群算法实战分享PPT》结构，对每页PPT内容进行阐述。博主分享的PPT是原版包含动画的PPT，自我感觉PPT做的很正、很文艺范，是博主7年来打杂做各种PPT经验的大成之作（说白了也就这水平），相信看完原版PPT你就会觉得原来“技术分享也可以这么文艺范”！
2017-08-07 21:45:16
19493
14
原创 粒子群优化算法解决场地资源布局问题-算法原型探讨
版权声明：本文为博主原创文章，未经博主允许不得转载。 本篇文章的命题来源于博主参加工作后的第一项任务，用智能优化算法解决工程实际中关于某施工场地相关资源布局的问题。由于博主的硕士毕业论文（详见第3章 基于PSO的已知静态路径规划方法）涉及到了粒子群优化算法，有一定经验，固对于本命题欲采用粒子群优化算法进行求解。 对于本命题而言，与博主的硕士毕业论文中解决的问题有很大差别，可以说...
2017-05-31 23:21:48
12123
6
原创 代码敲累了就来看看《PPT制作经验分享-发布版PPT》
版权声明：本文为博主原创文章，未经博主允许不得转载。博主的《PPT制作经验分享-发布版PPT》话不多说，直接上PPT。 博主目前是一名刚出道不久的底层码农 在本科及研究生阶段一直从事宣传方面的工作，多种形式的宣传手段都涉及制作过 三个问题 演讲型的PPT作用是辅助演讲者进行表达的，所以在幻灯片上的字相对来说会比较少，甚至没有。 而阅读型的PPT作用则是向阅读这份PPT的人
2017-01-09 00:57:30
3461
原创 读书笔记 摘自：《智能商业》
智能商业曾鸣出版：2018.11.01 13.3万字推荐序 马云|阿里巴巴集团创始人|商业推动社会进步。在这个数据技术和智能商业的新时代，我们不仅要成全自己，更应该成全别人，这样我们才能让世界变得更加美好。自序有价值的战略研究，一方面需要深入实践，问题驱动；另一方面，又必须有足够的前瞻性和体系化，所谓抬头看路。不被前行的历史抛在身后的唯一方式，就是主动拥抱变化。数据智能和网络协同...
2020-03-22 23:18:13
2303
原创 读书笔记 摘自：《简单思考》
简单思考【日】森川亮出版：2016.09.01 5.3万字中文版作者序商业是非常简单的。用户与商家构成的eco-system（生态系统）——这就是商业的本质。我们首先要给予对方有价值的东西。其结果是，别人也会把有价值的东西带给自己。创新无非就是创造“过去没有的价值”。应深入挖掘人们所追求的价值的本质，然后迅速将其实体化。卷首语不断做出广受欢迎的商品，公司就能发展成长；无法再做出...
2020-02-15 23:42:04
1464
原创 读书笔记 摘自：《思维导图攻略：快速上手与落地实践》
思维导图攻略：快速上手与落地实践王健文出版：2019.01.01 7.3万字内容提要“无落地，不导图”，思维导图的学习并不在于思维导图的绘制本身，而是在于实际应用和思维提升。第一章 精英人士自我提升的思维利器第一节 提升大脑学习力的秘密先明确大脑学习的目标，这样才能更有针对性地对大脑进行训练。大脑训练的底层原理很简单：就是把大脑高效认知的方式训练成灵活使用的习惯。（1）大脑对图片...
2020-01-31 18:07:25
1204
原创 读书笔记 摘自：《跟任何人都聊得来》
跟任何人都聊得来【美】迈克·贝克特尔出版：2014.07.01 字数：7.4万字序言|把对方看在眼里，放在心上所有的交谈技巧都离不开交谈之道：真正在意对方，将对方放在你心上。学习交谈则是一切技术的基础，因为沟通是人类社会最基本的生存工具。自己少显摆，多给对方显摆的机会。话糙理不糙，少一份自我，多关注对方兴趣和需求，对方会觉得你是真正在意他，信任感就会日益增加，所有的人际关系问题也就迎...
2019-12-30 22:11:02
1776
原创 读书笔记 摘自：《吃掉那只青蛙：博恩·崔西的高效时间管理法则（原书第3版）》
《吃掉那只青蛙：博恩·崔西的高效时间管理法则（原书第3版）》的笔记（作者: 【美】博恩·崔西）【美】博恩·崔西出版：2017.08.01 5.6万字赞誉管理的首要任务是管理好自己。管理好自己的关键是发现自己与众不同的、为他人创造价值的领域，然后，把尽可能多的时间投入进去。推荐序一 吃青蛙，过想要的生活人生一定要有梦想，因为它一定会实现。人生不在于做多少事，而在于把重要的事做到极致。...
2019-11-03 20:28:02
3861
原创 批量插入更新 MySQL 服务优化
1 原执行步骤从Hive中拉数据产出数据文件主进程读文件，按子进程数切分根据待插入集合，使用 ON DUPLICATE KEY UPDATE 批量更新或插入 table1（假设supply_id,order_id为联合唯一索引） 和 table2INSERT INTO table1(supply_id,order_id,num,end_time,status)VALUES(504...
2019-09-29 19:43:48
442
1
原创 读书笔记 摘自：《你坏》
我的小姑娘我说：姑娘姑娘我的好姑娘，你想我吗想我吗？我的小姑娘噙着眼泪，捧着我的腮帮子说：本来不想的，一看见你就开始想了，现在这会儿最想最想了……不用手机的女孩在决心放弃自己之前，请稍微再等一等。请最后给自己找一个目标，然后试着去完成。不论看起来是多么地痴人说梦、无聊透顶、荒诞不经……试试看，最后给自己一次机会。……愿你因此而重返人生。藏地三大圣湖，纳木错、玛旁雍措和羊卓雍措。穷...
2019-09-07 09:39:08
742
1
原创 读书笔记 摘自：《流浪地球（刘慈欣作品）》
刹车时代我们首先在近距离见到了地球发动机，是在石家庄附近的太行山出口处看到它的，那是一座金属的高山，在我们面前赫然耸立，占据了半个天空，同它相比，西边的太行山山脉如同一串小土丘。由于光柱的直径太大，我们现在抬头看到的是一堵发着蓝光的等离子体巨墙，这巨墙向上伸延到无限高处。刹车时代刚刚结束，其对地球的影响已触目惊心，地球发动机加速造成的潮汐吞没了北半球三分之二的大城市，发动机带来的全球高温溶化...
2019-09-07 09:12:12
541
原创 读书笔记 摘自：《为什么精英都是时间控》
前言使用时间的方法，决定人生的一切！我决心不再把工作当作自己生活的中心，要让自己活得更加自我。不在时间管理术上下功夫，人真的会被工作“忙杀”。“时间”就是人生的“财富”。能够掌控时间管理术的人，就能掌控自己的人生，就能取得事业的成功，就能构建幸福的家庭。集中注意力，提高工作效率，为自己创造出更多的自由时间。把这个时间用于自我投资，让自己不断成长，能力进一步提升，结果在收获成功的同时还能...
2019-07-28 21:08:22
9541
原创 AutoML总结
近期对AutoML进行了简单的学习，下面是一些总结的思维导图。源文件：--------------------------文档信息--------------------------版权声明：本文为博主原创文章，未经博主允许不得转载署名(BY) ：dkjkls（dkj卡洛斯）文章出处：http://blog.csdn.net/dkjkls...
2019-07-27 23:12:44
669
原创 【开源】水面无人艇局部危险避障算法研究 - 算法及仿真实验平台
USV-ObstacleAvoidanceAlgorithmSource code of Mater Dissertation Research Paper Local Risk Obstacle Avoidance Algorithm of USV.https://github.com/dkjkls/USV-ObstacleAvoidanceAlgorithmHighlightsReq...
2019-07-21 17:13:13
5565
2
原创 读书笔记 摘自：《时间的朋友2018》
第一部分：开篇1你有你的计划，世界另有计划以前，变化可能只是生活的一部分，现在变化可能成了生活本身。黑天鹅指的是一个熟悉世界里出现的意外情况，当黑天鹅一只又一只地从天上飞过的时候，也就不算什么意外了。2我们并不是在告别谁，我们是在告别自己的一部分。成年的滋味总是很复杂，熟悉的也许只能用来怀念，依赖的也许必须要放手。3做事的人无所谓悲观还是乐观，我们只关心如何把事做好。真实的世界...
2019-07-20 17:06:44
286
原创 Pandas DataFrame 新增操作最佳实践
版权声明：本文为博主原创文章，未经博主允许不得转载。1 背景项目中需对已产生的 Pandas DataFrame 进行新增操作，想到的方法有四种：直接使用 Pandas 的 append 方法使用 Pandas 的 loc 方法先转换为dict，再通过dict合并使用list封装，再转换为DataFrame2 性能验证验证代码如下：# encoding: utf-8"...
2019-06-17 01:13:37
1100
原创 读书笔记 摘自：《斯坦福极简经济学》
序言经济学不是一套答案，而是追寻答案的架构。微观经济学是从个人、企业的观点展开研究，宏观经济学则是探讨经济的整体观点。微观经济学篇01 人们卖弄的经济学原理只有50%是正确的经济学家如何思考：对公共政策做出建议的经济学，大多只用到大学入门课程的程度。根据我的经验，人们卖弄的经济学原理只有50%是正确的，但如果你不懂任何经济学常识或知识，就无法反驳，只能点头或耸肩。研究经济学的理由...
2019-06-09 12:20:25
32872
原创 读书笔记 摘自：《硅谷钢铁侠：埃隆·马斯克的冒险人生》的笔记（作者: 【美】阿什利·万斯）
本书所获赞誉从饱受争议不被看好到现在的大获成功，马斯克在互联网和汽车的跨界证明了颠覆者从来都不是在原有行业诞生。为了下一个还没有留下人类足迹的星球正如杰夫·汉默巴彻所说的那样，“我们这一代人中最优秀的头脑，都在思考如何让人们点击广告，这太糟糕了。”他拿着自己全部的财产投身实业，自杀般地同时从事航空航天、电动汽车和太阳能这三个发展长期停滞不前的高科技行业。驱使这样的实业家推动世界进步的，通...
2019-06-07 23:25:40
3848
1
原创 SparkSQL UDF 返回类型不能包含NUMPY类型
版权声明：本文为博主原创文章，未经博主允许不得转载。Spark版本: 2.1.1问题：SparkSQL UDF 返回类型包含NUMPY类型，报错：PickleException: expected zero arguments for construction of ClassDict (for numpy.dtype)如下方代码所示，定义的udf返回类型为包含dict的list，在u...
2019-06-02 19:32:02
1009
原创 Hive表字段类型修改
1.分区表的复制1.1 使用动态分区插入复制表A 创建一张和原表一样表结构的复制表B 通过插入语句（insert overwrite），使用动态分区把数据导入复制表SET hive.exec.dynamic.partition.mode=nonstrict;CREATE TABLE table_copy like table_original;INSERT overwrite TABL...
2019-05-20 00:45:16
8395
原创 读书笔记 摘自：《统计数据会说谎》的笔记（作者: 【美】达莱尔·哈夫）
世界上有三种谎言：谎言、弥天大谎和统计数据。——迪斯雷利（Disraeli）让我们陷入困境的并非我们不知道的东西，而是我们知道但并不正确的东西。——阿蒂默斯·沃德（Artemus Ward）引言你所看见的未必是真实情况，事实上这些数据要么被过于夸大，要么被隐瞒。第一章 带有偏差的样本在处理各类问题时，抽样过程是你所接触到的统计学主要内容的核心。可悲的是，各种各样的结论就是从...
2019-05-02 16:54:34
1464
原创 读书笔记 摘自：《手机拍出好照片：挑战器材党》的笔记（作者: 袁睿 刘祺）
风景观察，是为了更好地寻找拍摄内容摄影可以帮助我们仔细观察生活，把它们拍下来，记录这些稍纵即逝的精彩，你会发现自己会越来越热爱生活。通过仔细观察，巧妙的用光，以及讲究的取景和构图，手机拍摄的照片也能够很漂亮。观察，是为了更好地寻找拍摄内容需要培养我们观察力的，能够在大自然中发现值得记录的，发现一些被大部分所忽略的东西。发现相同中的不同巧用手机镜头的特别眩光挖掘类似这种手机特别的效果...
2019-04-06 16:17:31
624
原创 PyCharm远程调试Python的三种方式
版权声明：本文为博主原创文章，未经博主允许不得转载。在使用PySpark开发集群任务时，由于集群资源访问权限的限制，只能在开发机上运行，本地无法自测。开发机上调试的时候，可通过在开发机上启动spark shell进行交互式调试，但需要把写好的代码按顺序复制进spark shell中才能调试。这样做不仅要把写好的代码再按照spark shell格式整理一遍，对于结构比较复杂的代码，更耗时耗力...
2019-04-06 13:08:26
10170
原创 pyCharm中添加方法注释（Docstring format & Live Templates）
版权声明：本文为博主原创文章，未经博主允许不得转载。优雅规范的注释有助于对代码理解，易于与人合作开发，提高效率。但若没有自动化的注释会让写注释耗时耗力。注释中的要素包括：功能和用途简介、参数、返回值、创建人、创建时间、修改人、修改时间、版权声明、异常抛出。本文介绍在 pyCharm 中使用两种方式进行方法的注释：Docstring format 和 Live Templates。1 D...
2019-03-31 20:39:28
47147
10
原创 读书笔记 摘自：《人工智能：国家人工智能战略行动抓手》的笔记（作者: 腾讯研究院 中国信息通信研究院互联网法律研究中心 腾讯AI Lab 腾讯开放平台）
序言一第三次人工智能浪潮已经到来，这是更强大的计算能力、更先进的算法、大数据、物联网等诸多因素共同作用的结果。决策让渡将越来越普遍。正是由于人工智能在决策和行动的自主性上面正在脱离被动工具的范畴，其判断和行为一定要符合人类的真实意图和价值观、道德观，符合法律规范及伦理规范等。家庭机器人可能为了做饭而宰杀宠物狗，以清除病人痛苦为目的的看护机器人可能结束病人生命，诸如此类。序言二实体经济数...
2019-03-31 09:53:28
8901
1
原创 Spark中集合类型ArrayType/MapType与explode方法的使用
版权声明：本文为博主原创文章，未经博主允许不得转载。背景：需要对DataFrame中部分字段聚合，再通过udf对聚合的字段列表进行处理，返回列表，再把返回的列表字段列转行，如下：group_idfeature_1feature_2feature_311.111.211.3111.121.221.3222.112.212.3122...
2019-03-25 00:23:26
6691
原创 读书笔记 摘自：《亲密关系：通往灵魂的桥梁（张德芬译）》的笔记（作者: 【加】克里斯多福·孟）
推荐序一 这是我读过两遍以上的书男女之间的亲密关系是能量最大、张力最强的，因此冲突也最大，也最让人心碎。你的亲密关系伴侣，是来帮助你更加认识自己，进而疗愈你的创伤，最终找回真正的自己，因此，亲密关系是通往我们灵魂的桥梁。在恋爱初期我们最欣赏的对方的优点，可能到了后期正是我们想离开他的原因！当你出发去寻找真爱时，你就踏上了自我追寻的旅程。推荐序二 亲密关系是一趟探寻生命真相的旅程夫妻，镜...
2019-03-24 17:19:14
6283
原创 踩坑MySQL数据表清理
版权声明：本文为博主原创文章，未经博主允许不得转载。背景项目数据表要进行迁库，由于原项目的数据表是逻辑删除，没有进行物理删除，从项目启动开始的2015年1月，V1数据表的数据量已达到了6300W，V2数据表的数据量为1200W。迁库前业务方需要对我们对V1V2数据表进行清理，只保留目前参与计算的城市的数据。配了一个Hive2MySQL任务进行操作，清理SQL使用了“delete fro...
2019-03-09 11:46:10
260
原创 数据库视图删除——从不同角度寻找解决问题最高效的方案
版权声明：本文为博主原创文章，未经博主允许不得转载。从不同角度寻找解决问题最高效的方案背景某个MySQL库中存在历史遗留的不符合规范的视图，DBA联系到各个业务方要清理不合规的视图。我们组项目共涉及到三个视图。解决方案① 修改项目，删除视图首先想到的解决方案是，查各个视图在项目代码里面的使用情况，及业务上该视图的数据是否有用。若视图涉及的数据已不再使用，则直接在项目里面把该视图的...
2019-03-09 11:37:47
454
原创 TiDB简述
项目内使用的MySQL2Hive任务失败，是由于数仓使用的TiDB新版组件BUG引起的，自此了解到了TiDB。恰逢美团技术团队公众号2018.11.22发了一篇文章新一代数据库TiDB在美团的实践，就花了点时间进一步了解了下TiDB。TiDB 是 PingCAP 公司（中国一家开源新型分布式数据库公司 ）设计的开源分布式 HTAP (Hybrid Transactional and Analyti...
2019-03-09 11:29:53
3901
原创 使用思维导图的甘特图进行项目排期
版权声明：本文为博主原创文章，未经博主允许不得转载。近期在做设计文档及部分项目的整体排期时，使用了甘特图进行项目排期。这样做的优势是，可先在思维导图中对项目按里程碑、模块、工作量等维度进行拆分，然后可直接在项目拆分的基础上根据人力资源情况，使用思维导图中的甘特图功能进行整体排期。由于思维导图中甘特图可通过可视化的推拽进行排期，还可添加任务之间的关联（一个任务在另一个任务结束后开始，共同开始...
2019-03-09 11:20:06
5667
原创 计算广告 - 品牌合约广告
由于公司项目需要启动类似品牌合约广告的商业化项目，对合约广告进行了前期的调研。以下是调研结果的思维导图。参考资料：《计算广告》Ad Serving Using a Compact Allocation Plan, Yahoo!Labs, 2012小米品牌广告引擎与算法实践小米广告大数据与算法实践微信广告引擎与播放节奏算法实践QCon上海2016-小米广告交易平...
2019-02-24 22:49:07
891
原创 Kafka consumer 设置offset
使用kafka预上线环境进行上线前测试，即与线上kafka消费相同集群相同topic不同group的消息。但预上线环境会一直产生消息，而测试则是不定期进行，因此在下次测试时会堆积大量未消费的消息。而想要在测试时使用最新的消息时，目前考虑到有两种解决方案较为简洁：1. 新增group每次测试时新增group（可在group后加时间戳区分），初始偏移量offset的配置为kafka.auto.of...
2019-02-24 12:55:50
10306
原创 MySQL表结构导出Excel
MySQL表结构导出Excel在写设计文档时，需要把MySQL中的表结构按要求导出。MySQL客户端默认的字段不满足需求时，可通过MySQL的information_schema.COLUMNS表，查询并按需求导出字段。information_schema.COLUMNS表记录了所有库中所有表的字段信息，如下：字段具体意义如下：字段备注TABLE_CATALOGde...
2019-02-24 12:52:09
14716
8
原创 sqlacodegen自动生成sqlalchemy表对象模型
sqlacodegen自动生成sqlalchemy表对象模型使用ORM（Object-Relational Mapping）技术，把关系数据库的表结构映射到对象上，从而面向对象编程，就不需要再去和复杂的SQL语句打交道，只需简单的操作实体对象的属性和方法 。Python中较好用的ORM框架是SQLAlchemy。为了使用SQLAlchemy，需要将数据库表按照其识别的格式创建成Model，但一...
2018-12-17 01:10:54
5449
原创 弹性理论
需求、供给、价格关系曲线1 需求弹性定义：需求量变动的百分比除以价格变动的百分比需求弹性=%Δ需求%Δ价格需求弹性=\frac {\%\Delta 需求}{\%\Delta 价格}需求弹性=%Δ价格%Δ需求1.1 需求无弹性需求弹性 < 1。需求量变动的百分比会小于价格变动的百分比。价格上涨10%可能会使需求量下跌5% 。高度无弹性的商品，往往很难用较便宜的商品来取代。...
2018-12-08 00:43:49
1942
原创 在 Word 和 PowerPoint 中优雅地插入 Latex 公式
版权声明：本文为博主原创文章，未经博主允许不得转载。一 主流程Latex 公式转换为 MathML Code，用 MathML 做中介拷贝 MathML Code，到 Word 里面以文本格式粘贴（不是直接Ctrl-V），Word 就可以自动识别并转换为原生公式复制 Word 原生公式，在 PPT 中粘贴（PPT要先通过第2步在 Word 中转换）如公式：αm=1...
2018-12-05 23:07:50
13645
2
原创 GBDT和随机森林－附原版动画PPT（技术分享也可以文艺范？）
版权声明：本文为博主原创文章，未经博主允许不得转载。本周在公司给校招生做了次 GBDT和随机森林 分享，把PPT分享出来。原版动画PPT下载链接：《GBDT和随机森林- CSDN博主dkjkls》参考资料：学习笔记【机器学习重点与实战】——4 集成学习-Bagging学习笔记【机器学习重点与实战】——5 集成学习-Boosting《机器学习 - 周志华》第8章 集成学习 《机器...
2018-12-01 17:30:58
2563
3
原创 读书笔记 摘自：《让成长带你穿透迷茫》 俞敏洪
自序梦想，靠的也是这样一点点的坚持。我从来不是一个有一辈子规划的人，但是我会对自己人生每个阶段的小目标有明确的设定。当大的目标被分解，小的目标一一实现时，梦想就离你越来越近了。长期阅读会让一个人的思想变得广阔和深刻。在人生面临低潮、困惑时，请你重新审视自己对待困难的态度。你在磨难中学到的，远比在快乐中学到的多。吃过的苦不能白吃，一定要在其中总结经验和教训。有些磨难一定要自我回顾并且避...
2018-11-17 16:49:05
6144
多目标粒子群算法分享 - CSDN博主dkjkls
2019-03-09
《GBDT和随机森林- CSDN博主dkjkls》
2018-12-01
【原版】粒子群算法实战分享 动画PPT
2017-08-07
水面无人艇局部危险避障算法研究 答辩PPT
2017-03-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人