ChatGPT的出现在全球掀起了AI大模型的浪潮。
在这次AI浪潮之中，世界各个国家和地区有哪些知名的AI大模型发布，在发展大模型上又进展如何？这些问题就是本文要分析讨论的。
2．PaLM 2 (Bison-001)
3. Claude v1
4. Cohere
5.Gemini
6. LLaMA
7. Guanaco-65B
8. Vicuna 33B
9. MPT-30B
现在几乎所有AI大模型训练时采用的Transformer网络结构，是谷歌在2017年提出的，它具有优秀的长序列处理能力，更高的并行计算效率，无需手动设计以及更强的语义表达能力等特征。Transformer的提出让大模型训练成为可能。
算力的另一个维度是芯片，高性能的芯片可以提供更加高效的计算能力，从而加速训练过程。
从经济、文化、政策、人才，到资金、硬件、软件、环境，几乎在每个方面都领先其他人一大截，这也导致目前行业最具代表性的AI大模型都集中在美国。
1、智源人工智能研究院：悟道
2、百度：文心一言
华为在2021年基于昇腾 AI 与鹏城实验室联合发布了鹏程盘古大模型。盘古大模型包括CV和NLP两类大模型。其中，盘古NLP大模型是业界首个千亿级中文NLP大模型。
ChatGLM-6B是一个开源的、支持中英双语的对话语言模型，基于 General Language Model (GLM)架构，具有 62 亿参数。结合模型量化技术，用户可以在消费级的显卡上进行本地部署（INT4 量化级别下最低只需 6GB 显存）。
2023年2月初，腾讯混元AI大模型团队再推出万亿中文NLP预训练模型HunYuan-NLP-1。目前HunYuan-NLP-1T大模型已在腾讯广告、搜索、对话等内部产品落地，并通过腾讯云服务外部客户。
截止2023年12月，中国已经发布了约238个大模型。10 亿级参数规模以上基础大模型至少已发布 79 个，而美国这一数字为 100 个，中美两国大模型的数量占全球大模型数量的近 90%。
浓厚的工程师文化，使得美国在基础研究上保持领先地位，但许多工程师对于大模型的应用并没有什么经验，此外落地应用涉及的交付、维护等环节需要人力支持，而国内企业创业的初衷就为落地而去，这使得中国在落地应用上有可能领先一步。
欧洲代表性AI大模型清单：
作为欧洲企业，Luminous最大的特点在于更保护安全和隐私，Aleph Alpha 表示他们“不记录任何用户数据”。
2、BLOOM
BLOOM有1760亿参数，它被设计得尽可能透明，并且是第一次采用了西班牙语、阿拉伯语等语言训练。BLOOM最大的特点在于可访问性，任何人都可以从Hugging Face网站免费下载它进行研究。
3、Mistral 7B
1、HyperCLOVA
基于HyperCLOVA，LINE也推出许多应用，比如聊天机器人CLOVA Chatbot、图像识别CLOVA OCR和科洛瓦演讲CLOVA Speech等等。HyperCLOVA拥有820亿参数，目前正计划通过超100亿页的日文数据作为学习数据将模型规模扩大到1750亿。
2、Rinna
3、ELYZA Pencil
4、open-calm
open-calm 是 CyberAgent 在日语语料库上训练的 70 亿参数基础模型。
Stormy-7b-10ep 是由Izumi-Lab在open-calm上进行微调的版本。
韩国代表性AI大模型清单：
1、HyperCLOVA
2、KoGPT
3、Exaone
2022年12月，LG集团的人工智能智库LG AI Research推出了Exaone。这是一个拥有3000亿参数，使用图像和文本数据的多模态模型，也是目前韩国参数规模最大的模型
2023年9月，SKT推出全球首个韩语大语言模型（LLM）“A.”，或A Dot，据称将演变成个人人工智能助理服务。
事实上，韩国是最早加入AI大模型研发的国家之一，在硬件上也有不错的资源，三星电子是全球最大的动态随机存取存储器芯片制造商，SK 海力士是全球第二大 DRAM 芯片制造商。韩国在AI工业与AI医疗方面的探索非常积极，这些优势都让韩国能在AI大模型的发展浪潮中走在世界前列。
1、以色列：AI21 Labs
该模型利用 1000 亿个参数。我们花了 65 天的时间在由 800 个 A100 显卡和 1.7 TB 的在线文本、书籍以及无数其他英语和俄语资源组成的集群上训练该模型。
Falcon模型主要训练英语、德语、西班牙语和法语，但它也可以用意大利语、葡萄牙语、波兰语、荷兰语、罗马尼亚语、捷克语和瑞典语工作。
NOOR，拥有 100 亿个参数，这是迄今为止世界上最大的阿拉伯语自然语言处理（NLP）模型。
在一些AI发展的边缘地区，他们缺乏技术、硬件与市场等资源，但凭借互联网开源的技术，结合对本地区语言数据的天然优势，也取得了一些可喜的成果。
ChatGPT的出现代表了一种前所未有的生产力革命，它将改变我们的生活方式和工作方式，也将推动社会的发展和进步。我们需要保持开放、包容和积极的姿态，不断探索和发展人工智能的潜力和应用，为我们的未来创造更多的机遇和可能性。
原文链接：https://baijiahao.baidu.com/s?id=1785865261445121106&wfr=spider&for=pc
