- 博客(2686)
- 资源 (54)
- 问答 (4)
- 收藏
- 关注
原创 Idea2023.3.6版本无法启动设置界面-settings界面打不开无反应---IntelliJ Idea工作笔记013
当然重启以后,可能还有其他的插件有异常,那么继续这样操作,把异常的插件都关闭,disable掉,然后。报错以后,注意看,上面有显示说异常在easy code这个插件中发生的,那么。可以看到这里点击disable and restart 就可以了。直接点击,蓝色的disable plugin就可以了。可以看到,其实都不是,这样弄就好了,很简单。先说一下网上有,把某个文件删除的。有说是因为汉化问题的。
2024-03-28 14:08:25 3
原创 Idea/webstorm/pycharm2023.3.6启动无反应_ClassNotFoundException: com.licel.b.Z@---IntelliJ Idea工作笔记012
有一句这个-javaagent这个配置,就是新版,刚安装的这个idea,去找这个配置了,直接把这个文件中的。之前旧版本的2020版本的,卸载的时候没有卸载干净,导致,新版启动的时候,去找了旧版的配置文件。idea2023.3.4最新版安装的时候报错,说一下原因,是因为。-javaagent,这一行删除,是之前我们做优化用的对吧.具体就是这个:,其他系列的也一样处理就行。
2024-03-28 09:26:02 6
原创 Android_ android使用原生蓝牙协议_连接设备以后,给设备发送指令触发数据传输---Android原生开发工作笔记167
之前通过蓝牙连接设备的时候,直接就是连接上蓝牙以后,设备会自动发送数据,有数据的时候,会自动发送,但是,有一个设备就不会,奇怪了很久,设备启动了也连接上了,但是就是没有数据过来.是因为,这个设备有几种模式是握力球,在设备连接到蓝牙以后,需要,给设备通过蓝牙发送一个指令04,才能启动连续握力模式,这个时候,握的时候才有数据传输过来.因为之前是用他们给的SDK去连接的,但是发现SDK测出来的数据,忽大忽小,效果不好,所以最后,就自己使用原始蓝牙协议自己做了.获取以后这个不分是,开启监听,开启监听以后,
2024-03-26 15:59:34 156
原创 人工智能_大模型022_Centos本地安装_ScreenShotToCode根据设计图_截图生成前端Vue/React/Bootstrap页面_003---人工智能工作笔记0158
这里,下载以后放到对应的/data/module/gcc-13.2.0/ 这个目录,把原来的这个文件备份一下,改名成,.bak就可以了。执行gcc -v 可以看到,得到的版本还是 4.8.5 对吧,因为我们把gcc,安装在/usr/local中了。之前我们就生成这个.env文件了,我们是申请了一个calude3的,给的试用的5刀的额度的,这个key。好,之前是安装yarn的时候发现需要,升级glibc,然后升级glibc的时候,又发现需要,升级gcc。这个也下载下来,把原来的备份一下,然后放到对应目录。
2024-03-21 18:49:43 14
原创 人工智能_大模型021_Ubuntu/Centos本地安装_ScreenShotToCode根据设计图_截图生成前端Vue/React/Bootstrap页面_002---人工智能工作笔记0157
可以看到换源以后,要求执行,poetry lock --no-update 来进行更新。本地我们poetry的源换成了,清华源以后,发现,大部分可以了现在还有一个。启动完成后,在 http://localhost:5173 访问应用。启动完成后,在 http://localhost:5173 访问应用。只能继续尝试了,可以看到一只尝试还成功了,尝试了两天左右。可以看到已经安装好了,尝试了两天...还是网络不行啊。效果好像还不如清华源好,再换回去,那怎么办,然后再去开个窗口,去前端,执行。
2024-03-20 18:42:22 27
原创 人工智能_大模型020_大模型生成vue/React/Bootstrap前端_如何获得ScreenShotToCode需要的gpt4和calude3的api key---人工智能工作笔记0156
生成了以后又有提示,可以看到这个key已经给了,但是这个不知道是GPT3.5的还是GPT-4.0-version的,可以先去用用试试。真的很难安装,这个uuid怎么都装不上,换了3个机器了,租用的也不行,然后本地的吧,网络又不好,安装poetry都装不上.就可以去生成对应的API Key,把手机号验证以后,就可以了,这里需要花钱,具体多少。可以去这里弄一个,这个用咱们的手机就可以弄了,弄了以后,然后绑定个邮箱,然后去申请开。fomepay,这个搜就可以,这个不需要KYC,并且,用就可以了,但是局限性就是。
2024-03-19 16:54:10 920
原创 人工智能_大模型019_GPT4/Calude3_根截图/视频生成Vue/React/Bootstrap前端_租用autodl实现_ScreenShotToCode---人工智能工作笔记0155
gpt4的api key也好申请,但是,需要你验证一下手机号,手机号需要是外面的,然后还需要用外面的卡去冲不过都有办法,已经有博文提到了怎么弄了,这里不多说了.以上是过程,折腾的过程,可以看到最后也没有弄好,python3.10.8装上了,但是执行poetry install的时候,还是出问题了.依赖安装完,再去./configer,然后再去make,make install 就可以了,跟上面一样,按照操作就可以了.然后:cd /usr/local/Python-3.10.8/ 进入解压后的文件夹,
2024-03-19 16:38:27 117
原创 人工智能_大模型018_Ubuntu/Centos本地安装_ScreenShotToCode根据设计图_截图生成前端Vue/React/Bootstrap页面_001---人工智能工作笔记0154
真的很难安装,这个uuid怎么都装不上,换了3个机器了,租用的也不行,然后本地的吧,网络又不好,安装poetry都装不上.注册了谷歌账号以后,然后再用这个账号去登录,然后再去,注册openai的账号,然后再说。这个邮箱主要是用来注册,已经被限制了,需要用谷歌邮箱最好是,自己想办法去搞吧很麻烦。怎么都不行,在本地网络不行,只能找服务器了.用autodl中的租用的服务器试试把.看来必须要使用,验证码平台去,使用一个国外的比如印度的手机号去注册了.如果网络不好就安装不成功,那么这个时候,你可以去试试不同的源吧,
2024-03-15 18:18:00 37
原创 Android_ android.os.NetworkOnMainThreadException_UI线程中去执行Http请求报错---Android原生开发工作笔记166
这个错误会导致app卡死,这个可以这样处理,不要在UI线程中去直接执行http请求,可以把。这样处理就没问题了.
2024-03-13 17:09:07 21
原创 Android_退出activity重新进入报错:Fragment not attached to an activity---Android原生开发工作笔记165
这个时候,就要用到try catch了,但是实际上发现,功能上,没有任何影响,加上try catch就可以了.类似这种代码的时候报错的,这个时候getActivity()无法获取,解决方法就是.这个错误是由于当前的Fragment中,在使用getActivity()这样来处理就好一些了,但是实际上,可能还会有问题,
2024-03-13 16:46:55 126
原创 人工智能_大模型017_RAG量化检索增强003_RRF融合排序_文本分割粒度_文本交叠分割保留上下文_检索后排序_混合检索_手写混合检索_融合排序_RAG-Fusion---人工智能工作笔记0153
我问的问题是:LLM安全吗?可以看到上面的代码,如果我们用之前的版本分割文本,其实就是按照空行的部分分割的文本,这样,就是一个段落一个文本,但答案有可能是,需要在上一段,以及结合,这一段,一起才能找到答案.然后我们来看如何做文本分割的粒度,为什么要做文本分割的交叠分割,是因为如果不做,保留上下文的这种,关键词提取,还有文本分割,以后,存入到es中的话,那么,准确率不高.比如,我要1,2,3前三个相关性的文本,排序的时候,他给出了1,2,3但是可能低3个,相关性最好,应该放到排序的第一位.
2024-03-10 11:22:08 59 1
原创 NIFI从Oracle11G同步数据到Mysql_亲测可用_解决数据重复_数据跟源表不一致的问题---大数据之Nifi工作笔记0065
然后这个RouteOnAttribute处理器,连接到其他处理器的时候,选择路由策略,选择刚刚我们配置的路由策略就可以了.${db.table.fullname} 才是对的,这个的内容是TEST1.A这样带着schema,才能查询成功.可以看到这里的,我们让同步这两个表,上面是路由出需要同步的表,这个RouteOnAttribute处理器的配置。其他的处理器的配置按照之前的配置就可以,之前的NIFI的博文都已经,说了如何使用了,这里不做说明.同步的时候,总是出现重复的数据,奇怪.
2024-03-08 09:26:37 105 1
原创 人工智能_大模型016_租用GPU_使用P-tuning微调ChatGLM大模型_模型评估_以及微调后模型测试_ChatGLM大模型003---人工智能工作笔记0152
-ptuning_checkpoint /root/autodl-tmp/module/output/$CHECKPOINT/checkpoint-$STEP 这个是我们微调以后,然后,获取的微调以后的模型的路径,可以看到,图上,就是在这个目录.上一节我们完成了大模型的微调,使用我们自己造的数据,一共20条,数据,微调的时候用了1个小时48分钟,然后微调以后,train.sh执行以后,生成了微调后的模型,然后我们再来看,如何,评估这个模型.
2024-03-06 23:35:49 38
原创 人工智能_大模型015_RAG量化检索增强002_AIGC大模型_本地知识库实时问答_私域和实时场景_量化检索增强---人工智能工作笔记0151
然后再把这两个向量,输出给cosine-sim模型,再把结果,输出一下,如果这两个句子相近,那么在空间距离上,就让这两个空间夹角趋近于1,如果两个语义不一样,就让这两个句子,空间夹角趋近于0。关键词检索有语义上的缺陷,因为我们说法不一样,但是意思一样的话,那么,关键词如果在es库中没有,那么会导致,找不到答案的情况.所以我们引出向量检索,要求语义一样的词,去检索都能找到答案.然后假如是2维的,可以看到在右边,红点,那么这几个句子,对应的在,2维空间中的距离,因为他们语义相近,那么距离肯定越近.
2024-03-02 17:34:18 151
原创 人工智能_大模型014_租用GPU_P-tuning微调大模型_完成_ChatGLM大模型002_ChatGLM-6B-int4/int8/6B测试_微调_人民币的味道---人工智能工作笔记0150
可以看到报错的内容说,protobuf和TensorFlow的版本不兼容,protobuf的版本太高了,可以把版本改成3.20.x 或者更低的版本。我现在训练数据,只有6行啊,我的天,可以看的出来微调是多么的消耗算力,训练就更不用说了。执行过程可以看看英伟达,显存占用情况,可以看到,差不多微调的时候,在70%左右。可以看到报错了,因为是新安装的,所以还没有执行模型算法的安装,好吧,去安装。可以看到这次访问的时候,只能在本地访问,我的天,这个服务器的问题。
2024-03-02 17:30:19 44
原创 人工智能_大模型012_租用GPU安装_ChatGLM大模型001_ChatGLM-6B-int4/int8/6B测试_微调_人民币的味道---人工智能工作笔记0148
找到以后,然后下面有镜像,可以选择一下基础镜像,我就选择了一个pytorch选择一个版本就行了,先进去系统再说。可以看到有个(1/13544)等,左边的1就是表示有1个可以用的,可以看到还是非常紧张的。可以看到右边也有,用户名密码,还有SSH,可以把这个点击一下复制,复制下来,我们用本地的。然后走到AutoDL的控制台,找到自己的服务器,然后右边自定义访问有个,点开,然后。点击租用新实例,然后我们,找个便宜的.自己找吧从这里面找可用的,很多不可用,
2024-03-02 09:34:32 367
原创 人工智能_大模型013_AIGC生成式模型的增强检索_RAG知识补充检索_补充私域和实时场景知识_关键字检索增强---人工智能工作笔记0149
可以看到RAG的过程是,当我们左侧给他一个文档以后,可以看到,文档内容会进入到一个我们构建的向量知识库,然后当我们提问的时候左侧Llama2可以商用嘛?什么是RAG,RAG的意思就是,如果一套生成式AIGC大模型,你昨天训练了以后,那么今天的知识,还没有给他进行训练,那么回答的时候,他就会遗漏今天的知识,那么我们就可以通过检索的手段,把今天的知识,检索出来,然后补充道prompt中,给这个大模型.让他参考,这样就包含了今天的知识相当于实时了就.会说到向量检索,位向量检索,设计的数据库,然后实现RAG系统.
2024-03-02 09:31:16 202
原创 人工智能_Transformer_001_背景介绍---人工智能工作笔记0147
输出门查看上一个隐藏状态和当前的输入,通过sigmoid函数决定单元状态的哪个部分将输出,然后一个tanh函数处理单元状态,将其值推到-1和1之间,并将其乘以sigmoid门的输出,以决定最终的输出。更新门的值越接近1,新的候选隐藏状态对当前隐藏状态的影响越大,而更新门的值越接近0,则更多的保留前一个时间步的隐藏状态。梯度消失的问题在于,当梯度非常小的时候,它们在反向传播过程中会逐渐消失,因为每个梯度都是前一个梯度与一个小的权重乘积的结果。重置门的计算通常涉及到当前的输入和前一个时间步的隐藏状态。
2024-02-29 16:05:38 121
原创 人工智能_大模型010_Centos7.9中CPU安装ChatGLM3-6B大模型_安装使用_010---人工智能工作笔记0145
这里点击模型文件就可以下载,这个就是chatglm3-6B的文件,需要点击每个文件,然后点击右边的下载,把文件都下载下来。可以看到这里有很多的数据文件,那么这里。
2024-02-28 09:35:29 183
原创 人工智能_大模型011_CPU微调_训练_显卡的选型讲解_价格表_011---人工智能工作笔记0146
2.至于单机单卡还是单机多卡,来说单机单卡,比如是24G显存,对chatglm-6b已经够用了,训练最少要求是22G显存,也够了,但是,如果单机双卡是显存48G,价格跟单机单卡差别不太多,那么单机双卡更合适,性价比更高.之前是没有GPU的,由于游戏行业对画质的需求,催生出了GPU,GPU优势是支持并行计算,可以几千个小核心同时计算,但是有个问题,如何把一个我们需要计算的问题,拆解成1000个或更多小问题,让GPU并行计算呢?消费级显卡是带有机器,跟个大的主机箱一样,比普通主机箱大一点,但是。
2024-02-28 09:33:43 193
原创 Android摄像头横屏的时候_人脸预览横向显示_问题解决---Android原生开发工作笔记164
然后这个时候程序中的一个人脸预览页面,横向手持平板,摄像头在上面,但是这个时候预览的摄像头画面却是很像头像朝左,也是横过来的.在AndroidManifest.xml文件中,会有记录的所有的Activity,这里,我这个Activity配置的时候有个。在Android系统的平板中发现一个问题,我们做的一个Android程序,横屏的时候,摄像头在上面,这里就是在调试的时候,通过调整代码中的degress的值来调整摄像头方向的.这里可以调整,对应的degress的值,比如90是顺时针旋转90度。
2024-02-27 17:43:44 328
原创 人工智能_大模型009_CPU微调ChatGLM大模型_有监督学习_使用P-Tuning v2_CPU不支持半精度计算_GPU才支持_无法在CPU下微调_微调_003---人工智能工作笔记0144
这里该一下模型的位置:--model_name_or_path 然后PRE_SEQ_LEN从128改成了8,然后最后那个--quantization_bit是用int4加载量化模型,下载以后放到这里就行,数据格式在002中也有说明了,这次我们微调,chatglm-6b模型,不弄量化后的int4了。然后准备数据,因为原来的训练数据太多了,如果是从官网下载的话,可以参考002,现在我们自己做一些数据。002节微调的时候,没有成功,继续,不知道是不是因为CPU的原因,没有微调成功.
2024-02-26 15:26:27 131
原创 人工智能_大模型008_Centos7.9安装ChatGLM清华大模型_在CPU上执行chatglm-6b-int8和chatglm-6b模型_008---人工智能工作笔记0143
然后我们再来试试,chatglm-6b-int8能不能在CPU上运行成功,在007节我们发现,在CPU上进行chatglm-6b-int4的大模型微调,老是报错,目前还没有解决.最终运行成功了,看来确实是内存不够用了,之前我们使用,chatglm-6b-int4的时候,微调没有成功,不知道使用chatglm-6b这个,能不能行,一会我们可以试试。可以看到内存是10G,太小了,不过也就是说,如果要跑int4 和in8的量化模型,那么需要10G的内存就够用了.去给虚拟机关机,重新分配内存试试。
2024-02-26 11:48:31 229
原创 人工智能_大模型007_CPU微调ChatGLM大模型_使用P-Tuning v2进行大模型微调_007_微调_002---人工智能工作笔记0142
这里的dev.json指的是,test_file测试数据,然后train_file也就是train.json指的是训练数据。我用的CPU所以没有添加NUM_GPUS,这个变量也是自己起名的,我用的默认的,官网提供的这个文件,然后修改的.这里注意我在/data/module建了两个文件夹,一个是train_output用来放训练后的输出模型的,现在还有langchain可以实现,扩展知识库,这个后面我们再说,我先用P-Tuning V2试试,这里我们先试着训练一下,我们用官方提供的训练数据进行训练.
2024-02-23 19:28:17 200
原创 人工智能_大模型006_CPU微调ChatGLM大模型_Prefix-Tuning微调原理_Prompt-Tuning/P-tuning微调原理_微调_001---人工智能工作笔记0141
上面是prompt-tuning 和p-tuning的区别,可以看到其实,一个就是仅仅添加训练后的向量提示词,一个就是,直接把prompt-tuning的提示词再进行使用BiLSTM和MLP进行编码,编码以后把编码后的提示词,直接融入到模型本身的参数权重中去,这样消耗算力就多.如果是一组固定的,可读的文字,或者自然语言,那么他对,结果的影响是非常大的,那么这个时候,一般用第二种 方法,softprompt,叫做连续prompt,这个就是向量了,就是向量空间优化出来的提示.
2024-02-23 10:58:04 435
原创 人工智能_大模型005_CPU安装运行ChatGLM大模型_ChatGlm-6B_启动命令行对话_安装API调用接口_005---人工智能工作笔记0140
可以看到后台出现了结果,这是我们,使用curl 请求给出的结果,但是在我们的请求页面,却什么也没有返回,说明,还是慢吗?启动python3 api.py 的窗口中给出的,可以看到上面的截图,看到上面显示出来的情况.再去python3 api.py 就可以了,然后我们就可以先去用,命令行,使用curl。然后主要来看,如何使用api来调用呢,这样才可以,做自己的界面。大概还是慢的原因我们访问了,3次了,给出了2个结果,还是从。然后又等了10分钟可以看到,结果出来了,真的是...CPU就是很慢,等吧,慢死了..
2024-02-21 17:54:45 125
原创 快速清理_卸载docker_找到不用的进程_centos磁盘爆满_清理磁盘---Linux工作笔记071
rm -rf /var/lib/docker 删除docker文件就可以了.可以看到在/data/dict目录很大,里面的都可以删除。然后再去卸载docker,要不然,没有磁盘是卸载不了的。可以看到根据不用的结果进行删除。
2024-02-21 13:20:50 344
原创 人工智能_大模型004_CPU安装运行ChatGLM大模型_安装清华开源人工智能AI大模型ChatGlm-6B_004---人工智能工作笔记0139
注意是修改cli_demo.py 和 web_demo2.py 这两个文件哈, 这两个文件需要修改,其他的我只是对应的刚刚备份的cpu版本,改成了cpu的版本内容而已.需要gcc的版本是11.3.0,这里我们先没有去安装,直接试试再说。上一节003节我们安装到最后,本来大模型都可以回答问题了,结果,然后把后面的原来的内容,改成.float() 就是cpu版本了.分别写成cpu,gpu,对应的是cpu和gpu的版本。可以看到这里有个CPU部署,可以看到说,要把。可以看到把上面的这个部分,修改成,下面的。
2024-02-20 11:07:51 112
原创 人工智能_大模型003_普通服务器CPU_安装清华开源人工智能AI大模型ChatGlm-6B_003---人工智能工作笔记0138
pip install -r requirements.txt -i https://pypi.tuna.tsinghua.edu.cn/simple/ 有网速 但是不成功。可以看到执行:pip install -r requirements.txt -i https://mirror.baidu.com/pypi/simple 可以正常执行。pip install -r requirements.txt -i http://pypi.mirrors.opencas.cn/simple/ 不可以。
2024-02-19 23:59:04 149
原创 人工智能_大模型002_PIP3安装使用国内镜像源_安装GIT_普通服务器CPU_安装清华开源人工智能AI大模型ChatGlm-6B_002---人工智能工作笔记0137
可以看到按照上面的步骤,我们给pip设置了软连接,然后配置了pip的config镜像源.首先去下载软件,到/data/soft ,可以用wget命令也可以自己用浏览器下载。执行配置以后,然后: 执行的时候报错了...唉,行吧,这里我应该不需要用git,参考上一步,上一个博文,去卸载吧,把python3卸载以后,然后重新安装一下。他们用git用来下载模型的,我都是手动的网络上下载的.好,下一节,来安装模型。可以看到又出现了,因为是国外镜像源,下载不下来,下面我们来切换一下国内源。
2024-02-19 17:04:21 426
原创 人工智能_大模型001_普通服务器CPU_安装清华开源人工智能AI大模型ChatGlm-6B_001---人工智能工作笔记0136
如果你想用8G内存,普通电脑安装就算了,装不上的,至少32G内存,才能安装最小的,并且,安装不会顺利可能出现,多次安装不成功的情况,需要多次尝试,所以最好用AI服务器吧,或者租用在线的AI服务器,AI服务器安装版,那个博文里有推荐AI服务器租用.再把这个python的安装包,复制到/usr/local下面去,然后进入/usr/loal去看看。然后我们再去之前解压到/data/module/Python-3.10.8这个文件夹中,然后再去。然后再去安装,走到/openssl-1.1.1目录中,然后,执行。
2024-02-19 13:11:42 481
原创 vmware虚拟机无法联网_Failed to start LSB: Bring up/down networking_无法设置IP_和MAC地址---Linux工作笔记070
说明一下解决方法,非常简单,就是如果你的VMware,我这里是centos7.9的一个镜像,是从别的地方复制过来的,那么,启动的时候,会让你选择,我已移动虚拟机,还是让你选择,我已复制虚拟机。我也遇到了这个问题,只不过,我直接把虚拟机删除了,然后又打开了一遍,这次选择,我已移动虚拟机。然后再去/etc/sysconfig/network-scripts/ifcfg-ens3。如果,碰到了通过 移动虚拟机 选项也不能解决的可以,尝试上面的解决方法.一定要注意,选择,我已移动虚拟机。编辑这个文件就可以了。
2024-02-08 15:48:02 66
原创 Ruoyi-Cloud-Plus_Nacos配置服务漏洞CVE-2021-29441_官方解决方法以及_修改源码解决---SpringCloud工作笔记199
Nacos是Alibaba的一个动态服务发现、配置和服务管理平台。修改方法是:在Nacos项目的application.properties文件中,添加一下的配置。这个时候:再去其他服务中修改配置文件,主要是nacos的注册部分,除了添加注册地址,还有,加上。配置以后再启动,然后再去,访问之前的api就会显示403,没问题了.这个时候,启动其他服务以后,就会出现注册不到nacos的情况。拦截一下地址,当访问地址是这个地址的时候,直接,拦截器中返回。上面的情况.会通过这个接口就可以添加用户了。
2024-02-02 16:07:40 383
原创 利用nginx替换Docker内部程序_静态资源_实现自定义背景--nginx工作笔记008
当在这个地址,访问img这个目录的时候,也就是,我们打开对应的系统,然后用F12,去查看要替换的图片的地址,比如,nginx所在的机器如果是:192.168.1.112。首先,在nginx中配置,使用location /表示当访问9003的时候定向到后面的地址,也就是对应的你要访问的系统地址,然后再去看。因为有个程序是打包的Docker镜像,那么问题就来了,我想修改登录页面上的一个图片,如果。我们定位到data目录就可以了,这个时候,他会自动去img去找,因为,你不想再去修改程序了,那么怎么办?
2024-02-02 12:01:42 197
原创 MobaXterm远程操控_通过一台公网IP跳转操控多台机器_只有一台公网IP同时操控多台机器_进行大数据集群环境部署_复制已有连接---Linux工作笔记069
说一下背景,客户给了6台机器,但是,只有一台是公网的IP地址,这个时候怎么弄呢?这里填写session的名字,自定义就可以,然后上面填写远程连接地址。然后这样就把这台公网IP的机器连接上了,就可以进行远程操控了,然后。就表示,连接上服务器以后,然后执行这个命令,连接其他服务器。再看看如何通过这个公网IP机器,来跳转其他机器。execute command 执行命令。首先连接上一台,这个公网IP的地址,注意需要这样设置就可以了,主要是设置。
2024-02-02 11:40:41 63
原创 Hbase-2.4.11_hadoop-3.1.3集群_大数据集群_SSH修改默认端口22为其他端口---记录025_大数据工作笔记0185
在以下目录中:/opt/module/hadoop-3.1.3/bin/myhadoop.sh。需要修改/opt/module/hbase-2.4.11/conf/hbase-env.sh。在以下目录中:/opt/module/hadoop-3.1.3/bin/kfk.sh。在以下目录中:/opt/module/hadoop-3.1.3/bin/xsync。在以下目录中:/opt/module/hadoop-3.1.3/bin/zk.sh。中,找到对应的hadoop-env.sh文件。
2024-01-29 18:40:23 384
原创 离线安装nginx_银河麒麟系统_nginx报错_503_500 Internal Server Error----nginx工作笔记007
chmod 777 /opt/module/test_web 就可以了,然后再去访问就不会报错了,还有。然后关于离线安装nginx,尝试了一下如果把之前安装过的nginx,直接打包,发到另一台机器上,然后。如果报这个错误,意思就是,对于nginx.conf文件中指定的,文件夹没有权限。503的错误都可以这样解决。
2024-01-29 13:28:52 120
原创 麒麟系统安装minio_centos8.0安装最新minio_离线安装minio并设置权限_创建桶---minio工作笔记001
注意,要使用chmod 777 /opt/module/minio 给刚刚创建的minio文件夹赋权限。然后我们再在/opt/module/minio文件夹中创建,data文件夹,创建log文件夹,然后进入minio文件夹,然后把我们刚刚上传到/opt/soft中的minio文件,复制到。配置minio的,用户名密码,当然你也可以不配置,如果不配置的话,默认的。可以看到有可以访问的端口,然后去浏览器访问登录就可以了。可以看到对应的页面,然后登录,用上面设置的用户名密码。首先去到官网去下载minio,然后。
2024-01-29 11:53:37 215
原创 使用DBSyncer同步Oracle11g数据到Mysql5.7中_实现全量数据同步和增量数据实时同步_操作过程---数据同步之DBSyncer工作笔记007501
之前都是用mysql和Postgresql之间进行同步的,已经实现了数据的实时同步,现在要实现Oracle数据库到Mysql数据库的全量,以及增量同步.因为之前配置的不对,这里架构名写成了orcl,所以导致,虽然能连接上,但是,在进行数据同步的时候,看不到表,所以这里说一下如何进行连接。架构名指的就是数据库名称,不要写错了,这里并不是orcl,这里是数据库名称。这里,首先选择驱动,然后选择类型,选择Oracle,然后这里填写一个名称。添加完驱动,选择全量同步,然后选择对应的表,添加上主键,就可以了。
2024-01-24 11:41:08 394
原创 使用Navicat在Oracle和Mysql之间同步数据_连接Oracle11g报错_Oracle library is not loaded_ORA-28547:conn---数据库工作笔记019
然后这个时候,打开新生成的Navicat.exe点击注册,然后,再去优化工具,点击第一个generate,然后生成一串号码,然后把号码,放到Navicat对应的框中,然后点下一步,然后再去把Navicat15显示的一串码,放到优化工具中点击第二个generate按钮,然后又生成了一串码,把这串码放到Navicat下面的框中,然后点击注册就可以成功使用了.重要的一步,就是先关闭Navicat,然后再去打开,这个时候,再去连接Oracle就可以连接上了.走到这个Navicat界面,找到工具,选项,然后。
2024-01-24 10:21:41 175
ChatGLM-6b-int4基础模型文件.zip-这个是除了比较大的文件的其他文件-其他大的模型文件可以在清华云下载
2024-02-29
nifi-p12-store.zip 这个文件就是nifi-1.23.2今年最新8月份出的最新版需要的加密文件
2023-10-08
瀚高DB企业版最新版连接操作工具2023.zip
2023-07-21
瀚高DB企业版最新6.0.4官方安装教程.zip
2023-07-21
NIFI-MySqlToMySql增量同步数据实时采集-实现了日期类型-以及空值处理-插入已存在变更新-更新未存在变插入.zip
2023-06-20
NIFI1.21.0-大数据同步处理模板-MysqlToMysql增量同步-单表-处理日期-空值数据.zip
2023-06-20
NIFI1.21.0-Mysql和Postgresql到MysqlHbase-全量指定库和表同步到Mysql和Hbase.zip
2023-06-20
NIFI大数据处理-PostgresqlToMySql指定表多表-CDC增量数据实时同步.zip
2023-06-12
K线理论-付费课程-实战经验-总结学习手册-2023-05-29.zip
2023-05-29
NIFI大数据模板-MySqlToPostGresql数据分页实时采集-带分页.zip
2023-05-25
NIFI大数据模板-HbaseToMysqlByPhoenix-实时数据同步带分页.zip
2023-05-25
NIFI模板PostGreSqlToHbaseByPhoenix-数据从PostGresql实时同步到Hbase-带分页.zip
2023-05-25
NIFI大数据模板-PostgresqlToHbase数据实时采集-带分页.zip
2023-05-22
大数据Nifi处理-MySqlToSqlServer数据分页实时同步.zip
2023-05-19
MySqlToHbase数据分页导入到Hbase.zip
2023-05-16
大数据处理NIFI模板-MySqlToMySql增量数据实时同步-利用Binlog实时同步数据.zip
2023-05-06
Nifi模板-PostGreSqlToMySql数据分页实时采集-带分页.zip
2023-05-06
2023自己实操-验证过的-通达信公式-胜率很高-神技-趋势+底部钝化+底部结构+选股+风口-一整套-.zip
2023-04-28
整理了好久-2023最新Java面试题-如果你在找工作-希望能帮到你了
2023-04-28
2023-04-28最新-自己封装整理-可直接使用-亲测可用-多模态AI合集-ChatGPT4-ChatGpt3.5.zip
2023-04-28
大数据Nifi模板-Mysql数据分页同步-实现了分页功能-MySqlToMySql数据分页实时采集-带分页功能.zip
2023-04-24
大数据nifi模板,用来实时从mysql数据中读取数据到另一个mysql的数据库中
2023-04-24
文心一言解读-及应用方向解读2023-04-19PDF.zip
2023-04-19
ChatGpt2023年研究框架-2023-04-19.zip
2023-04-19
nacos-server-1.1.4 这个下载以后可以直接使用
2023-03-16
xsync 脚本将文件同步到大数据集群中的所有机器
2023-02-23
利用MybatisPlus来实现对表的水平分表,全自动,可以首先判断表是否存在,不存在创建表
2022-08-22
idl编译jar包模板工程.zip
2022-08-04
在非spring注解类中使用spring容器中的bean_普通类中使用yml配置文件中的配置信息
2022-07-25
使用quartz定时器实现系统多活,可以实现很多功能,比如集群中的系统多活检测,多设备接入的时候为每个设备创建定时获取数据机制
2022-06-22
Disruptor报错FatalExceptionHandler的解决办法,看网上这种解决办法挺少,整理了一下
2022-06-20
FastJson调整实体类中属性输出的顺序,字段为空的时候仍然输出
2022-06-13
SpringBoot中利用Redis实现消息队列,代码亲测可用, 可以传输字符串,或java对象都可以
2022-06-13
Quartz动态创建Job,Job中含有初始化参数,执行job的时候报错,怎么解决
2022-06-17
一个软考高级,信息项目管理师的问题,想不明白..希望大家来解惑
2022-04-08
android中intent传值的问题,数据都串了,很奇怪
2021-06-16
TA创建的收藏夹 TA关注的收藏夹
TA关注的人