- 博客(306)
- 资源 (3)
- 收藏
- 关注
原创 llama3 史上最强开源大模型,赶超GTP-4,逼宫OpenAI
2024年4月18日,Meta公司推出了开源大语言模型Llama系列的最新产品—Llama 3,包含了80亿参数的Llama 3 8B和700亿参数的Llama 3 70B两个版本。
2024-05-06 11:11:29 495
原创 LLaMA 羊驼系大语言模型的前世今生
Llama3作为最新版本,以其逼近 GPT-4 的性能、大规模数据驱动的学习以及高效训练流程,巩固了 Meta 在开源大模型领域的领先地位,并推动了人工智能在社交、商业和其他领域的广泛应用。LLaMA是由Meta AI发布的大语言系列模型,完整的名字是Large Language Model Meta AI,直译:大语言模型元AI。作为该系列的初代模型,Llama 是一个纯粹的基座语言模型,设计目标是提供一个开放且高效的通用语言理解与生成平台。许可的情况下发布了LLaMA的模型权重,供研究人员参考和使用。
2024-05-06 11:06:51 857
原创 创造未来知识管理新篇章:Ollama与AnythingLLM联手打造个人与企业的安全知识库!
Ollama是一个开源的大型语言模型服务工具,它帮助用户快速在本地运行大模型。通过简单的安装指令,用户可以执行一条命令就在本地运行开源大型语言模型,如Llama 2。Ollama极大地简化了在Docker容器内部署和管理LLM的过程,使得用户能够快速地在本地运行大型语言模型。打造个性化聊天机器人:用Ollama和Open WebUI搭建你的私有ChatGPT!windows 下 docker compose 安装 ollama 和 open-webui ,打造私有GPT。
2024-04-30 10:50:06 1153
原创 loss.sum().backward()中对于sum()的理解
PyTorch backward() 进行梯度计算时,只能对标量进行梯度计算。.sum() 函数主要有两个作用,一个是用来求和,一个是用来降维。在深度学习中,损失函数都是标量,所以一般情况下可以直接调用backward()就可以了。
2024-04-30 10:39:22 532
原创 windows 下 docker compose 安装 ollama 和 open-webui ,打造私有GPT
通过上述步骤,你可以在Windows系统上使用Docker Compose轻松安装和配置Ollama和Open-WebUI,打造属于自己的私有GPT环境。这不仅可以帮助你更好地理解GPT模型的工作原理,还可以为你的个人项目或研究提供强大的支持。
2024-04-16 16:19:26 885
原创 打造个性化聊天机器人:用Ollama和Open WebUI搭建你的私有ChatGPT!
用Ollama和Open WebUI搭建你的私有ChatGPT!
2024-04-10 09:08:09 1185
原创 入门级深度学习主机组装过程
大小,最用在 RTX3060 12G显存和RTX 4060 16G显存 之间进行了选择。最后买了RTX 4060 16G显存的显卡。显卡大小:显卡有1风扇、2风扇和3风扇之分,风扇越多散热性能越好,但是我的电脑是itx 小机箱,最后买了个2风扇的显卡。除了显卡和电源,其他硬件都是公司电脑原装。买显卡时,都会写建议电源功率。有钱直接上 RTX4090,也不能复用公司的电脑,其他配置跟不上。担心散热问题,换了个好点的风扇。后来发现还不如不换,太能折腾了。进行深度学习,除了看算力外,还需要看。
2024-04-03 06:46:30 378
原创 Jupyter开启远程服务器(最新版)
Jupyter Notebook 在本地进行访问时比较简单,直接在cmd命令行下输入 jupyter notebook 即可,然而notebook的作用不止于此,还可以用于远程连接服务器,这样如果你有一台服务器内存很大,但是呢你又不喜欢在linux上进行操作、编辑代码时你就可以在本地windows上使用notebook远程到服务器上,在本地写代码,使用服务器上的资源。
2024-03-28 14:07:41 540
原创 CentOS7 操作firewall防火墙
开放端口,如果不指定IP,任何ip都可以访问。未指定端口,则可以访问所有端口。–permanent:永久的。不加就是临时的,重启后失效。
2024-03-18 11:19:34 285
原创 大数据任务调度平台选型建议
怎么样让大量的 ETL 任务准确的完成调度而不出现问题,甚至在任务调度执行中出现错误的情况下,任务能够完成自我恢复甚至执行错误告警与完整的日志查询。Airflow支持各种数据处理库和系统,如Spark、Hive、Pig等,并具有强大的调度能力和丰富的插件生态。Luigi是由 Spotify 开发的Python库,用于构建复杂的批处理任务管道。Apache DolphinScheduler 是一个分布式和可扩展的开源工作流协调平台,具有强大的DAG可视化界面,非常推荐除Python团队以外的人员使用。
2024-03-18 11:03:04 1035
原创 Python pip 换成国内镜像源
用 easy_install 和 pip 来安装第三方库很方便,它们的原理其实就是从Python的官方源下载到本地,然后解包安装。不过因为某些原因,访问官方的pypi不稳定,很慢甚至有些还时不时的访问不了。跟 ubuntu 的 apt 和 centos 的 yum 有各个镜像源一样,pypi也有。因此强烈推荐换成国内源。
2024-03-14 15:07:51 372
原创 数据集成平台选型建议
数据集成平台是一种用于管理和协调数据流动的软件工具或服务。它的主要目标是将来自多个不同数据源的数据整合到一个统一的、易于访问和分析的数据存储库中。
2024-03-12 16:26:58 3351 1
原创 Flink Upsert Kafka SQL Connector 介绍
Flink Upsert Kafka SQL Connector 介绍
2024-02-19 10:51:37 1913 5
原创 Hudi0.14.0集成Spark3.2.3(Spark SQL方式)
Hudi 0.14.0 集成 Spark3.2.3 Spark SQL方式
2024-01-23 16:34:26 280
原创 Hudi0.14.0集成Spark3.2.3(Spark Shell方式)
Hudi 0.14.0 集成spark 3.2.3 Spark Shell方式
2024-01-23 16:16:57 255
原创 Hive管理UDF详解
Hive 管理UDF函数的方式有:1. Hive Shell add jar2. 辅助jar目录3. 可重载辅助jar目录
2024-01-19 14:47:02 182
mybatis 全xml配置
2018-06-27
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人