大数据AI-CSDN博客

原创 windows 下 docker compose 安装 ollama 和 open-webui ，打造私有GPT

通过上述步骤，你可以在Windows系统上使用Docker Compose轻松安装和配置Ollama和Open-WebUI，打造属于自己的私有GPT环境。这不仅可以帮助你更好地理解GPT模型的工作原理，还可以为你的个人项目或研究提供强大的支持。

2024-04-16 16:19:26 307

原创打造个性化聊天机器人：用Ollama和Open WebUI搭建你的私有ChatGPT！

用Ollama和Open WebUI搭建你的私有ChatGPT！

2024-04-10 09:08:09 915

大小，最用在 RTX3060 12G显存和RTX 4060 16G显存之间进行了选择。最后买了RTX 4060 16G显存的显卡。显卡大小：显卡有1风扇、2风扇和3风扇之分，风扇越多散热性能越好，但是我的电脑是itx 小机箱，最后买了个2风扇的显卡。除了显卡和电源，其他硬件都是公司电脑原装。买显卡时，都会写建议电源功率。有钱直接上 RTX4090，也不能复用公司的电脑，其他配置跟不上。担心散热问题，换了个好点的风扇。后来发现还不如不换，太能折腾了。进行深度学习，除了看算力外，还需要看。

2024-04-03 06:46:30 369

原创史上最强 PyTorch 2.2 GPU 版最新安装教程

史上最强 PyTorch 2.2 GPU 版最新安装教程

2024-04-03 06:36:37 1564 1

原创 Jupyter开启远程服务器（最新版）

Jupyter Notebook 在本地进行访问时比较简单，直接在cmd命令行下输入 jupyter notebook 即可，然而notebook的作用不止于此，还可以用于远程连接服务器，这样如果你有一台服务器内存很大，但是呢你又不喜欢在linux上进行操作、编辑代码时你就可以在本地windows上使用notebook远程到服务器上，在本地写代码，使用服务器上的资源。

2024-03-28 14:07:41 528

原创 CentOS7 操作firewall防火墙

开放端口，如果不指定IP，任何ip都可以访问。未指定端口，则可以访问所有端口。–permanent：永久的。不加就是临时的，重启后失效。

2024-03-18 11:19:34 283

原创大数据任务调度平台选型建议

怎么样让大量的 ETL 任务准确的完成调度而不出现问题，甚至在任务调度执行中出现错误的情况下，任务能够完成自我恢复甚至执行错误告警与完整的日志查询。Airflow支持各种数据处理库和系统，如Spark、Hive、Pig等，并具有强大的调度能力和丰富的插件生态。Luigi是由 Spotify 开发的Python库，用于构建复杂的批处理任务管道。Apache DolphinScheduler 是一个分布式和可扩展的开源工作流协调平台，具有强大的DAG可视化界面，非常推荐除Python团队以外的人员使用。

2024-03-18 11:03:04 1016

原创 Flink K8s Operator 测试验证

Flink K8s Operator 测试验证。

2024-03-14 15:11:26 501

原创 Python pip 换成国内镜像源

用 easy_install 和 pip 来安装第三方库很方便，它们的原理其实就是从Python的官方源下载到本地，然后解包安装。不过因为某些原因，访问官方的pypi不稳定，很慢甚至有些还时不时的访问不了。跟 ubuntu 的 apt 和 centos 的 yum 有各个镜像源一样，pypi也有。因此强烈推荐换成国内源。

2024-03-14 15:07:51 354