- 大语言模型结构当前绝大多数大语言模型结构都采用了类似GPT 架构，使用基于Transformer 架构构造的仅由解码器组成的网络结构，采用自回归的方式构建语言模型。但是在位置编码、层归一化位置以及激活函数等细节上各有不同。上篇文章 介绍了GPT-3 模型的训练过程，包括模型架构、训练数据组成、训练过程以及评估方法。由于GPT-3 并没有开放源代码，根据论文直接重现整个训练过程并不容易... 大语言模型结构当前绝大多数大语言模型结构都采用了类似GPT 架构，使用基于Transformer 架构构造的仅由解码器组成的网络结构，采用自回归的方式构建语言模型。但是在位置编码、层归一化位置以及激活函数等细节上各有不同。上篇文章 介绍了GPT-3 模型的训练过程，包括模型架构、训练数据组成、训练过程以及评估方法。由于GPT-3 并没有开放源代码，根据论文直接重现整个训练过程并不容易...
- 大规模语言模型（Large Language Models，LLM），也称大规模语言模型或大型语言模型，是一种由包含数百亿以上参数的深度神经网络构建的语言模型，使用自监督学习方法通过大量无标注文本进行训练。自2018 年以来，Google、OpenAI、Meta、百度、华为等公司和研究机构都相继发布了包括BERT[1]，GPT[6] 等在内多种模型，并在几乎所有自然语言处理任务中都表现出色。... 大规模语言模型（Large Language Models，LLM），也称大规模语言模型或大型语言模型，是一种由包含数百亿以上参数的深度神经网络构建的语言模型，使用自监督学习方法通过大量无标注文本进行训练。自2018 年以来，Google、OpenAI、Meta、百度、华为等公司和研究机构都相继发布了包括BERT[1]，GPT[6] 等在内多种模型，并在几乎所有自然语言处理任务中都表现出色。...
- 全新Self-RAG框架亮相，自适应检索增强助力超越ChatGPT与Llama2，提升事实性与引用准确性 全新Self-RAG框架亮相，自适应检索增强助力超越ChatGPT与Llama2，提升事实性与引用准确性
- 应对数据爆炸时代，揭秘向量数据库如何成为AI开发者的新宠，各数据库差异对比 应对数据爆炸时代，揭秘向量数据库如何成为AI开发者的新宠，各数据库差异对比
- Milvus 2.3.功能全面升级，核心组件再升级，超低延迟、高准确度、MMap一触开启数据处理量翻倍、支持GPU使用！ Milvus 2.3.功能全面升级，核心组件再升级，超低延迟、高准确度、MMap一触开启数据处理量翻倍、支持GPU使用！
- 本文全面探讨了词在自然语言处理（NLP）中的多维角色。从词的基础概念、形态和词性，到词语处理技术如规范化、切分和词性还原，文章深入解析了每一个环节的技术细节和应用背景。特别关注了词在多语言环境和具体NLP任务，如文本分类和机器翻译中的应用。文章通过Python和PyTorch代码示例，展示了如何在实际应用中实施这些技术。关注TechLead，分享AI全维度知识。作者拥有10+年互联网服务架构... 本文全面探讨了词在自然语言处理（NLP）中的多维角色。从词的基础概念、形态和词性，到词语处理技术如规范化、切分和词性还原，文章深入解析了每一个环节的技术细节和应用背景。特别关注了词在多语言环境和具体NLP任务，如文本分类和机器翻译中的应用。文章通过Python和PyTorch代码示例，展示了如何在实际应用中实施这些技术。关注TechLead，分享AI全维度知识。作者拥有10+年互联网服务架构...
- Milvus性能优化提速之道：揭秘优化技巧，避开十大误区，确保数据一致性无忧，轻松实现高性能 Milvus性能优化提速之道：揭秘优化技巧，避开十大误区，确保数据一致性无忧，轻松实现高性能
- 本文深入探讨了文本生成的多种方法，从传统的基于统计和模板的技术到现代的神经网络模型，尤其是LSTM和Transformer架构。文章还详细介绍了大型预训练模型如GPT在文本生成中的应用，并提供了Python和PyTorch的实现代码。关注TechLead，分享AI全维度知识。作者拥有10+年互联网服务架构、AI产品研发经验、团队管理经验，同济本复旦硕，复旦机器人智能实验室成员，阿里云认证的资... 本文深入探讨了文本生成的多种方法，从传统的基于统计和模板的技术到现代的神经网络模型，尤其是LSTM和Transformer架构。文章还详细介绍了大型预训练模型如GPT在文本生成中的应用，并提供了Python和PyTorch的实现代码。关注TechLead，分享AI全维度知识。作者拥有10+年互联网服务架构、AI产品研发经验、团队管理经验，同济本复旦硕，复旦机器人智能实验室成员，阿里云认证的资...
- 一、 概念介绍1.1 Langchain 是什么？官方定义是：LangChain是一个强大的框架，旨在帮助开发人员使用语言模型构建端到端的应用程序，它提供了一套工具、组件和接口，可简化创建由大型语言模型 (LLM) 和聊天模型提供支持的应用程序的过程。LangChain是一个语言模型集成框架，其使用案例与语言模型的使用案例大致重叠，包括文档分析和摘要、聊天机器人和代码分析。 简单来... 一、 概念介绍1.1 Langchain 是什么？官方定义是：LangChain是一个强大的框架，旨在帮助开发人员使用语言模型构建端到端的应用程序，它提供了一套工具、组件和接口，可简化创建由大型语言模型 (LLM) 和聊天模型提供支持的应用程序的过程。LangChain是一个语言模型集成框架，其使用案例与语言模型的使用案例大致重叠，包括文档分析和摘要、聊天机器人和代码分析。 简单来...
- ElasticSearch实战指南必知必会：安装分词器、高级查询、打分机制 ElasticSearch实战指南必知必会：安装分词器、高级查询、打分机制
- 释放搜索潜力：基于ES(ElasticSearch)打造高效的语义搜索系统，让信息尽在掌握 释放搜索潜力：基于ES(ElasticSearch)打造高效的语义搜索系统，让信息尽在掌握
- 大规模语言LLaVA：多模态GPT-4智能助手，融合语言与视觉，满足用户复杂需求 大规模语言LLaVA：多模态GPT-4智能助手，融合语言与视觉，满足用户复杂需求
- 自然语言处理（NLP）涵盖了从基础理论到实际应用的广泛领域，本文深入探讨了NLP的关键概念，包括词向量、文本预处理、自然语言理解与生成、统计与规则驱动方法等，为读者提供了全面而深入的视角。 自然语言处理（NLP）涵盖了从基础理论到实际应用的广泛领域，本文深入探讨了NLP的关键概念，包括词向量、文本预处理、自然语言理解与生成、统计与规则驱动方法等，为读者提供了全面而深入的视角。
- 解锁搜索新境界！让文本语义匹配助你轻松找到你需要的一切！(快速上手baseline) 解锁搜索新境界！让文本语义匹配助你轻松找到你需要的一切！(快速上手baseline)
- 全套解决方案：基于pytorch、transformers的中文NLP训练框架，支持大模型训练和文本生成，快速上手，海量训练数据！ 全套解决方案：基于pytorch、transformers的中文NLP训练框架，支持大模型训练和文本生成，快速上手，海量训练数据！
上滑加载中
推荐直播
-
昇腾AI算法挑战赛-核心算子如何优化？专家带你深度解析2025/11/17 周一 16:00-17:00
王老师 华为算子专家
昇腾AI算法挑战赛进阶赛战鼓催征！本期直播间，我们特邀华为算子专家王老师，为你深度剖析Matmul、wholereducesum等核心算子的底层原理与优化技巧，直击赛题核心。想提升代码效率、冲击更高排名？锁定直播，带你破局！
回顾中 -
AI编码实干派，“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国，深圳，2026年2月26日】，以“AI编码实干派，码力全开”为主题的华为云码道（CodeArts）代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布，为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw，开启在线养虾模式2026/03/11 周三 19:00-20:00
刘昱，华为云高级工程师/谈心，华为云技术专家/李海仑，上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈，华为云码道最新推出 Skill ——开发者只需输入一句口令，即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道，玩转OpenClaw
回顾中
热门标签