
基于 RAG 技术的大规模商品智能检索系统实现
传统商品检索存在分词误匹配问题。介绍基于 RAG(检索增强生成)技术的解决方案,结合向量检索与大语言模型能力。流程涵盖文档解析、文本切片、向量化存储至 Elasticsearch、向量检索召回及重排序、最终通过大模型生成回答。文中提供 Python 代码示例,展示如何使用千帆 SDK 进行嵌入处理与查询,旨在提升检索精准度与用户体验。
博客作者
Spark计算专家
358
已发布文章
9.3K
博客获赞
659K
博客浏览
第 17 页

传统商品检索存在分词误匹配问题。介绍基于 RAG(检索增强生成)技术的解决方案,结合向量检索与大语言模型能力。流程涵盖文档解析、文本切片、向量化存储至 Elasticsearch、向量检索召回及重排序、最终通过大模型生成回答。文中提供 Python 代码示例,展示如何使用千帆 SDK 进行嵌入处理与查询,旨在提升检索精准度与用户体验。

总结了大语言模型参数高效微调(PEFT)的几种主流方法,包括 LoRA、Adapter、Prefix-tuning、P-tuning 和 Prompt-tuning。文章详细分析了各方法的原理、数学实现及适用场景。LoRA 通过低秩分解减少参数量,训练稳定;Adapter 在 Transformer 层间插入模块,支持多任务迁移;Prefix-tuning…

中国大模型落地现状,指出目前 45% 企业处于观望,仅 16% 进入试点,全面应用为零。金融与能源因数据基础好、业务成熟而率先落地,主要集中在智能客服、文档生成等生成类场景。决策类场景如负荷预测、客户唤醒因技术难度大、价值验证不足而进展缓慢。当前落地以生成式模型为主,决策式模型需突破数据构造与算法成熟度瓶颈。未来趋势指向模型级联、行业定制化、轻量化及安全隐私…

Android 面试不仅考察技能掌握程度,还涉及能力、价值观及岗位匹配度。系统梳理了面试流程、表达技巧如金字塔法则与 STAR 法则,并详细列举了 Java 基础、集合、多线程、JVM,以及 Android 四大组件、Binder、Handler 机制等核心技术面试题。同时涵盖数据结构算法、Kotlin、音视频及 Flutter 相关考点,帮助开发者全面准备…

Windows 平台部署 Qwen1.5 大模型教程。涵盖 NVIDIA 驱动更新、Anaconda 环境配置、CUDA 版本匹配、PyTorch 及 Transformers 库安装。演示了通过 VSCode 运行本地模型,并基于 FastAPI 和 Uvicorn 构建支持流式输出的 RESTful API 接口。提供完整代码示例与依赖管理方案,适用于具…

使用 PyTorch 从零构建大型语言模型的关键步骤。内容包括加载 Helsinki-NLP 双语数据集、训练 BPE 分词器、构建数据加载器、实现输入嵌入与位置编码,以及开发多头注意力机制模块。通过具体代码示例展示了 Transformer 架构的核心组件实现,为英文到马来语翻译任务提供基础框架。

全球人工智能行业正在重塑千行百业。梳理了 AI 大模型的学习路径,涵盖系统设计、提示词工程、平台应用开发、知识库构建、微调开发及多模态应用等七个阶段。内容涉及阿里云 PAI、LangChain、星火及文心大模型等行业实践,旨在帮助开发者掌握从理论到落地的全流程技能,提升数据分析和决策能力。

Qwen2.5 大模型的微调实践,涵盖微调基础概念、LoRA 与 SFT 技术原理、基于魔塔社区与 LLaMA-Factory 环境的搭建、配置文件详解、训练执行及推理测试全流程。文章提供了具体的命令行操作、YAML 参数说明、显存优化方案及模型合并方法,旨在帮助开发者低成本实现垂直领域大模型的定制化训练与应用部署。

DeepSeek R1 开源大模型凭借强化学习技术和低成本训练优势引发全球关注。文章分析了其核心机制,包括无需大量标注数据的推理能力提升、开源策略对技术普惠的推动以及市场对算力成本逻辑的重塑。该模型的成功证明了高效算法可替代单纯算力堆叠,为 AI 垂直应用和全球竞争格局带来新变化,标志着 AI 发展进入注重效率与开放共享的新阶段。

AI 开发领域的实用工具与学习资源,涵盖 WordPress Gutenberg 编辑器、Page Spy 远程调试工具、MLOps Zoomcamp 课程、Crab 编程语言及 MoviePilot 媒体自动化项目。重点解析了 AIGC 副业思路及七阶段 AI 大模型学习路径,包括系统设计、提示词工程、平台应用、知识库开发、微调技术及多模态应用,旨在帮助开…

梳理了 AI 大模型产品的市场分类、底层技术架构及商业化变现路径。涵盖对话生成、AI 绘图、虚拟助手等主流品类,解析从数据层到应用层的实现逻辑,包括自研数据、开源模型接入及推理优化策略。同时探讨自媒体与企业级产品的增长与变现模式,为 AI 产品从业者提供入行必备的知识框架与业务思考方向。

网络爬虫是一种自动化程序,用于在互联网上浏览和提取信息。爬虫的定义、工作流程、应用场景及主要价值,并区分了通用爬虫与聚焦爬虫两种类型。此外,补充了基于 Python 的基础实现示例,强调在合法合规的前提下使用爬虫技术,遵守网站隐私政策与 Robots 协议,确保数据安全与责任使用。

详细阐述了大模型幻觉问题的成因及解决方案,重点介绍了检索增强生成(RAG)技术的原理与架构。内容涵盖幻觉定义、减少幻觉的策略、RAG 的工作流程、主流检索技术(如 BM25、向量检索)、向量数据库选型以及基于 LangChain 的代码实现示例。此外,文章还补充了查询重写、重排序和多跳检索等高级优化策略,为开发者构建低幻觉、高准确率的 AI 应用提供了完整的…

Ollama 是一个支持在本地运行大语言模型的工具,兼容 Windows、Linux 和 MacOS。 Ollama 的安装步骤、常用模型下载、命令行交互方式以及基于 Docker 的图形界面部署方案。内容涵盖模型管理命令、API 调用示例及硬件优化建议,帮助用户搭建本地 AI 环境,实现数据隐私保护与离线使用。

LangChain 是构建大语言模型应用的开源框架,提供 Models、Prompts、Chains、Agents、Memory、Indexes 六大核心模块。详细介绍各模块功能与使用场景,涵盖 Agent 工具调用、Memory 上下文管理、Indexes 知识库检索及 Chain 链式编排。通过 Function Calling 实现结构化输出,结合代码…

综述了深度多模态数据融合技术,对比了传统与深度学习时代的融合差异。提出基于编码器 - 解码器、注意力机制、图神经网络、生成式网络及约束方法的五类新分类法。涵盖视觉 + 语言、视觉 + 传感器等广泛模态组合,分析其在目标检测、问答等任务中的应用,并探讨当前挑战与未来方向。

详细讲解了如何在 LangChain 框架中集成国产智谱 AI 大模型。内容包括环境搭建、API 密钥获取与安全配置、基础对话代码实现、流式输出功能、多轮对话记忆管理以及常见问题的排查方法。通过对比 OpenAI 方案,突出了国产模型在访问稳定性和成本上的优势,并提供完整的安全最佳实践建议,帮助开发者快速构建本地化大模型应用。

介绍如何利用 Ollama 本地部署大语言模型、ChromaDB 向量数据库以及 LangChain4J 框架,将 AI 能力集成到致远 OA 系统中。通过监听附件上传事件,解析文档内容并转化为向量存储,实现基于文档的检索增强生成(RAG)。文章涵盖环境搭建、依赖配置、代码实现及接口测试全过程,展示了在 OA 中构建智能问答系统的完整流程,并提供配置优化与故…

Python 入门常用的三款集成开发环境(IDE):Wing、PyScripter 和 Eric。Wing 以强大的调试器和远程开发支持见长,适合专业级开发;PyScripter 作为开源方案,提供丰富的基础功能和轻量级体验;Eric 基于 Qt 框架,插件扩展性强且支持多语言本地化。文章分析了各工具在编辑器智能性、代码导航、版本控制及单元测试等方面的特性,…

系统梳理了 AI 绘画技术的发展历程、核心原理及主流应用场景。详细分析了包括 AI 美术设计师、技术美术、培训讲师在内的八大高薪岗位职责与技能要求。文章重点阐述了数字艺术品销售、定制服务、教育培训等十大变现路径的操作方法与难度评估,并补充了技术学习路径、法律合规风险及未来职业发展趋势。旨在为从业者提供一份全面的技术指南与职业规划参考,帮助其在 AI 时代实现…