文章 2024-01-24 来自:开发者社区

【NLP】Datawhale-AI夏令营Day10打卡:微调ChatGLM2-6B

1. 学习内容AI夏令营第三期–基于论文摘要的文本分类与关键词抽取挑战赛教程今天学习的是任务三:进阶实践 - 大模型方法微调方法介绍1️⃣ LoRA(Low-Rank Adaptation):基本思想是对模型的一部分进行低秩适应,即找到并优化那些对特定任务最重要的部分。也就是冻结预训练好的模型权重参数,在冻结原模型参数的情况下,通过往模型中加入额外的网络层,并只训练这些新增的网络层参数。由于这些....

【NLP】Datawhale-AI夏令营Day10打卡:微调ChatGLM2-6B
文章 2023-09-12 来自:开发者社区

当你拥有一个AI助理时,可以做什么?ChatGLM2-6B

简介 最近在研究ChatGLM2-6B用法和如何训练一个属于自己的AI助手来帮助自己提高工作效率,查看了一些大佬的文章和视频寻找灵感,后期准备将自己关于渗透的知识库和各种渗透工具进行结合,开发一个渗透辅助的AI助手放到公众号里,敬请期待。根据相关数据ChatGLM2-6B的热度已经超过ChatGPT4了在中文 C-Eval 榜单中,ChatGLM2 以 71.1 分位居榜首。 终于不用去寻找各.....

当你拥有一个AI助理时,可以做什么?ChatGLM2-6B
文章 2023-07-26 来自:开发者社区

【AI 大模型】离线运行ChatGLM2-6B(清华大模型)

一、捣腾开始clone项目git clone https://github.com/THUDM/ChatGLM2-6B cd ChatGLM2-6B配置python环境pipenv install # 安装客户端依赖 pip install streamlit streamlit-chat如果最后启动时,报cuda的错,请看文末的拓展并看情况执行下面的命令:# 移除原始的pytorch 依赖 .....

【AI 大模型】离线运行ChatGLM2-6B(清华大模型)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

{"cardStyle":"productCardStyle","productCode":"aliyun","productCardInfo":{"productTitle":"阿里云 AI","productDescription":"从 AI 应用构建,模型部署到训练,一站式了解阿里云经典的 AI 应用场景和解决方案。","productContentLink":"https://www.aliyun.com/solution/tech-solution/ai","isDisplayProductIcon":true,"productButton1":{"productButtonText":"查看详情","productButtonLink":"https://www.aliyun.com/solution/tech-solution/ai"},"productButton2":{"productButtonText":"联系 AI 专家","productButtonLink":"https://page.aliyun.com/form/act933288178/index.htm?spm=5176.29311086.J_RY_4Q8--sru4dMV7o3lqS.2.22ec5297YL7w86"},"productButton3":{"productButtonText":"立即体验","productButtonLink":"https://bailian.console.aliyun.com/?spm=5176.28326591.0.0.56136ee1bpor89#/efm/model_experience_center"},"productPromotionInfoBlock":[{"$id":"0","productPromotionGroupingTitle":"热门体验","productPromotionInfoFirstText":"文生文应用","productPromotionInfoFirstLink":"https://bailian.console.aliyun.com/?spm=5176.29311086.J__xR9sQs7AmaTHLBTgN3VS.1.22ec52978mJi5p#/home","productPromotionInfoSecondText":"文生图应用","productPromotionInfoSecondLink":"https://bailian.console.aliyun.com/?spm=5176.29311086.J__xR9sQs7AmaTHLBTgN3VS.2.22ec52978mJi5p#/efm/model_experience_center?modelId=wanx-v1"},{"$id":"1","productPromotionGroupingTitle":"热门产品","productPromotionInfoFirstText":"大模型服务平台百炼","productPromotionInfoFirstLink":"https://www.aliyun.com/product/bailian","productPromotionInfoSecondText":"人工智能平台 PAI","productPromotionInfoSecondLink":"https://www.aliyun.com/product/bigdata/learn"},{"$id":"2","productPromotionGroupingTitle":"技术解决方案","productPromotionInfoFirstText":"向量检索与通义千问搭建专属问答服务","productPromotionInfoFirstLink":"https://www.aliyun.com/solution/tech-solution/dashvector","productPromotionInfoSecondText":"创意加速器:AI 绘画创作","productPromotionInfoSecondLink":"https://www.aliyun.com/solution/tech-solution/tongyi-wanxiang"},{"$id":"3","productPromotionGroupingTitle":"热门模型","productPromotionInfoFirstText":"通义千问","productPromotionInfoFirstLink":"https://tongyi.aliyun.com","productPromotionInfoSecondText":"通义万相","productPromotionInfoSecondLink":"https://tongyi.aliyun.com/wanxiang"}],"isOfficialLogo":false},"activityCardInfo":{"activityTitle":"","activityDescription":"","cardContentBackgroundMode":"LightMode","activityContentBackgroundImageLink":"","activityCardBottomInfoSelect":"activityPromotionInfoBlock","activityPromotionInfoBlock":[]}}

人工智能平台PAI

人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。

+关注