Ollama是什么?安装部署指南

Ollama是什么?安装部署指南
www.zeeklog.com  - Ollama是什么?安装部署指南

Ollama是什么?

一个本地部署运行大模型的工具,一行命令一键启动,支持linux、windows和mac操作系统的安装。

Ollama支撑哪些大模型?

访问:https://ollama.com/library,列表下的大模型,它都支持。

www.zeeklog.com  - Ollama是什么?安装部署指南

Ollama运行大模型的配置?

Ollama只是工具,部署不同的大模型,都对我们本地环境有不同的配置要求(内存大小、CPU、GPU等等),下面举例子:

Model(大模型)Parameters(参数)Size(体积)Download(运行指令)
Llama 3.18B4.7GBollama run llama3.1
Llama 3.170B40GBollama run llama3.1:70b
Llama 3.1405B231GBollama run llama3.1:405b
Phi 3 Mini3.8B2.3GBollama run phi3
Phi 3 Medium14B7.9GBollama run phi3:medium
Gemma 22B1.6GBollama run gemma2:2b
Gemma 29B5.5GBollama run gemma2
Gemma 227B16GBollama run gemma2:27b
Mistral7B4.1GBollama run mistral
Moondream 21.4B829MBollama run moondream
Neural Chat7B4.1GBollama run neural-chat
Starling7B4.1GBollama run starling-lm
Code Llama7B3.8GBollama run codellama
Llama 2 Uncensored7B3.8GBollama run llama2-uncensored
LLaVA7B4.5GBollama run llava
Solar10.7B6.1GBollama run solar

Ollama下载的大模型在本地存储位置?

mac地址:/Users/xxx/.ollama/models

windos和linux在官网可查到地址说明,这里只用mac进行说明。

www.zeeklog.com  - Ollama是什么?安装部署指南

ModelFile是什么?有什么作用?

用来创建自定义模型,作为一个配置文件去指定模型推理相关设置。

比如,我们要对大模型进行微调,需要修改模型推理的参数,此时要重新创建模型,可以通过modelfile调整参数来实现。

是否有Web_UI工具,方便进行交互式访问?

有的,仓库地址:https://github.com/ollama-ui/ollama-ui

安装完成之后,访问:

http://localhost:8000/?model=llama3%3Alatest

www.zeeklog.com  - Ollama是什么?安装部署指南

如何评价一个大模型的快慢?

每秒钟的生成多少个TOKEN,来对大模型进行评价。

  • 看日志

mac日志位置:/Users/xxx/.ollama/logs

Ollama的请求debug信息怎么看?

  • 在mac日志文件可以看到。
www.zeeklog.com  - Ollama是什么?安装部署指南

怎么评价大模型精度?

人工评价

测试集评价

利用其他大模型进行评价

如何学习大模型 AI ?

由于新岗位的生产效率,要优于被取代岗位的生产效率,所以实际上整个社会的生产效率是提升的。

但是具体到个人,只能说是:

“最先掌握AI的人,将会比较晚掌握AI的人有竞争优势”。

这句话,放在计算机、互联网、移动互联网的开局时期,都是一样的道理。

我在一线互联网企业工作十余年里,指导过不少同行后辈。帮助很多人得到了学习和成长。

我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑,所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限,很多互联网行业朋友无法获得正确的资料得到学习提升,故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

😝有需要的小伙伴,可以Vx扫描下方二维码免费领取🆓

www.zeeklog.com  - Ollama是什么?安装部署指南

👉1.大模型入门学习思维导图👈

要学习一门新的技术,作为新手一定要先学习成长路线图,方向不对,努力白费。

对于从来没有接触过AI大模型的同学,我们帮你准备了详细的学习成长路线图&学习规划。可以说是最科学最系统的学习路线,大家跟着这个大的方向学习准没问题。(全套教程文末领取哈)

www.zeeklog.com  - Ollama是什么?安装部署指南

👉2.AGI大模型配套视频👈

很多朋友都不喜欢晦涩的文字,我也为大家准备了视频教程,每个章节都是当前板块的精华浓缩。

www.zeeklog.com  - Ollama是什么?安装部署指南


www.zeeklog.com  - Ollama是什么?安装部署指南

👉3.大模型实际应用报告合集👈

这套包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示。(全套教程文末领取哈)

www.zeeklog.com  - Ollama是什么?安装部署指南

👉4.大模型落地应用案例PPT👈

光学理论是没用的,要学会跟着一起做,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。(全套教程文末领取哈)

www.zeeklog.com  - Ollama是什么?安装部署指南

👉5.大模型经典学习电子书👈

随着人工智能技术的飞速发展,AI大模型已经成为了当今科技领域的一大热点。这些大型预训练模型,如GPT-3、BERT、XLNet等,以其强大的语言理解和生成能力,正在改变我们对人工智能的认识。 那以下这些PDF籍就是非常不错的学习资源。

www.zeeklog.com  - Ollama是什么?安装部署指南
www.zeeklog.com  - Ollama是什么?安装部署指南

👉6.大模型面试题&答案👈

截至目前大模型已经超过200个,在大模型纵横的时代,不仅大模型技术越来越卷,就连大模型相关的岗位和面试也开始越来越卷了。为了让大家更容易上车大模型算法赛道,我总结了大模型常考的面试题。

www.zeeklog.com  - Ollama是什么?安装部署指南

Read more

印度统治阶级锁死底层人的5大阳谋

印度统治阶级锁死底层人的5大阳谋

基于社会学和心理学视角: 1. 情感道德: 统治阶级通过塑造道德规范和情感价值观,引导底层人群的行为。例如,宣扬“勤劳致富”“忍耐美德”等观念,让底层人接受现状并自我约束。这种道德框架往往掩盖结构性不平等,使人们将个人困境归咎于自身而非系统。 2. 欲望控制: 通过消费主义和媒体宣传,统治阶级刺激底层人的物质与社会欲望(如名牌、地位),但同时设置经济壁垒,使这些欲望难以实现。底层人被困在追求“更好生活”的循环中,精力被分散,无法聚焦于挑战权力结构。 3. 情绪煽动: 利用恐惧、愤怒或民族主义等情绪,统治阶级可以通过媒体或公共事件转移底层人对社会问题的注意力。例如,制造外部敌人或内部对立(如阶层、种族矛盾),让底层人内耗而非联合反抗。 4. 暴利诱惑: 通过展示少数“成功案例”或快速致富的机会(如赌博、投机),诱导底层人追逐短期暴利。这种机制不仅让底层人陷入经济风险,还强化了对现有经济体系的依赖,削弱长期变革的可能性。 5. 权力震撼: 通过展示统治阶级的权力(

By Ne0inhk