！！真正的全过程开源的中英文双语大模型。 1. 4.7T tokens 的中英文清洗后语料，配比挺合理。 2. 扫描PDF 转 Markdown 的工作流，可以识别图片、表格和公式！！！ 3. 中英文的预训练数据处理 Pipeline，拿来即用～ 4. 最终的 7B…

分享一个链接

发表一篇文章

任何有趣的，图片，热点新闻，视频，文字...

1410 位用户此时在线

24小时点击排行 Top 10：

能把中国🇨🇳不间断一直加速⏩可持续搞到今天这田地，不得不说习近平确实是个人才😅😅！ B站up主Losider做的视频里说得很对：历史会铭记2012年11月15号这一天👌

20K-50K 招聘远程 Python AI 工程师（图片与文本处理方向）

10月30日，福建省惠安市，一女子发视频称，她买的双汇火腿肠里出现不少蛆虫。当事人称，她做早餐时拆开火腿肠时发现蛆虫，火腿肠还在保质期内。 31日，厂家回应称，初步核查蛆虫是苍蝇幼虫，系产品流通过程产生，目前正在和对方协商解决。

把她当成方脸抓了

这妹子模仿能力太强了，绝对专业八级！

10多岁的孩子在这哭，6个器官被错误切除，他说：“让我死了去吧！”； 70多岁的“孩子”在那笑，和另一独裁者畅谈器官移植，他说：“预测本世纪可以活到一百五”🙂👌

从王毅出现开始，马仔们很好的诠释了什么是“团结紧张严肃活泼”

Russian fighter ignored her Indian counterpart’s handshake and the rest is history. 🤣😁😁Watch till the end. 🫡 Do you know her name? Google her.

10月31日，韩国庆州，亚太经合组织（APEC）峰会的开幕式，习近平观看了BIGBANG团队GD权志龙的表演。

11月1日，上海市大学路附近到处都是保安和警察。

习近平给李在明送了几部小米手机做礼物，他指着小米手机说：“看里面有没有后门儿？”

從太空視角認識人類

熊膽不是很厲害嗎？漢醫五寶藥方之一就是熊膽，怎麼還嚇成這樣？ #HappyHalloween

卧槽，居然还有这么打架的。

11月1日，海南琼中爆发大规模群体抗争事件后续：海胶公司大楼已人去楼空，网友拍摄的视频显示，当局在海胶公司路段增加警力排查防止村民再次聚集维权。

媳妇看见别人吃菠萝嘴馋，老公直接去要了一块，并拿饮料回赠…

11月1日，“苏超”决赛，南通队与泰州队巅峰对决，90分钟激战双方0:0平。点球大战中，泰州队4:3战胜南通队，夺得首届“苏超”冠军。

钱塘江观潮，站对位置很重要！

10月31日，海南琼中爆发大规模群体抗争事件，因海南天然橡胶产业集团加钗分公司偷砍农民的槟榔田，引发当地民众不满。事情发酵后，海南各地的民众都在赶往加钗，去支援这场抗争

11月1日，上海巨鹿路，三步一辆警车。

习近平给李在明送了几部华为手机做礼物，他指着华为手机说：“看里面有没有后门儿？”

网友投稿：湖南省耒阳市，耒阳一中学生集体喊楼，抗议学校拒绝执行双休政策。学校先是强制学生“被自愿”到校自习，又占用正常休息时间举办校运会。好不容易等到月假，高一高二学生仍需上完周五全天课程及晚自习才准离校，周日下午必须返校——原本两天的假期，实际仅剩1天。

麻省理工大学公开课：人工智能和深度学习将改变世界。这堂课要听！ .

网友投稿：11月1日晚，兰州大学接连发布紧急通知，要求昨晚参加万圣节的学生立即“自首”并退出相关群聊。并强调，作为共产党员和团员不能信仰宗教。

#DngGentle

本站自动实时分享网络热点
24小时实时更新
所有言论不代表本站态度
欢迎对信息踊跃评论评分
评分越高，信息越新，排列越靠前

2

1

0

！！真正的全过程开源的中英文双语大模型。
1. 4.7T tokens 的中英文清洗后语料，配比挺合理。
2. 扫描PDF 转 Markdown 的工作流，可以识别图片、表格和公式！！！
3. 中英文的预训练数据处理 Pipeline，拿来即用～
4. 最终的 7B…
时政
( twitter.com )

1年前由九原客提交

！！真正的全过程开源的中英文双语大模型。

4.7T tokens 的中英文清洗后语料，配比挺合理。
https://t.co/IohUNvVdBF
扫描PDF 转 Markdown 的工作流，可以识别图片、表格和公式！！！
https://t.co/levpPBVnbG
中英文的预训练数据处理 Pipeline，拿来即用～
最终的 7B 预训练模型以及预训练阶段、Decay阶段、scalinglaw测试中全部的 ckpt 方便进行研究。

https://t.co/2iSBQc5brD

1周内 1个月内 1年内全部时间

1
2
3
4
5
6
...
400
下一页

1

2

1

1

我大鹅厂也开始开源了，希望别烂尾。
腾讯正式公布，旗下混元文生图大模型已完成升级，并对外开源。
此次升级的模型采用了与Sora相同的DiT架构，不仅能够支持文生图，也能作为视频等多模态视觉生成的基础。
这是业界首个中文原生的DiT架构文生图开源模型，支持中英双语输入及理解，15亿参数。
时政
( twitter.com)

1年前 • Leo Xiang • -- 点击 0 评论

2

2

1

1

可商用！复旦大学开源了160B参数的大模型MOSS
MOSS是一个支持中英双语和多种插件的对话语言模型，基座模型在约七千亿中英文以及代码单词上预训练得到。具备多轮对话能力及使用多种插件的能力
很多训练语料都使用ChatGPT AP…
推特中文圈
( twitter.com)

2年前 • nash_su • -- 点击 0 评论

3

2

1

1

🐶 Bark
开源的文字生成音频模型。
- 非常真实自然的语音
- 英文效果最佳，其他语言还欠佳
- 支持通过文本生成歌曲
- 支持生成背景噪音、简单的音效
- 支持大笑、叹息、哭泣
- 开源模型，自己可以下载玩，也可以去官方排队…
推特中文圈
( twitter.com)

2年前 • orange.ai • -- 点击 0 评论

4

2

1

1

说的太对了，那么多开源大语言模型，真没有超过GPT-3.5的
IT技术
( twitter.com)

2年前 • 宝玉 • -- 点击 0 评论

5

2

1

1

斯坦福2023年公开课CS25 - 大语言模型中的涌现和规模（中英文字幕）

这是斯坦福2023年公开课CS25的第三课：《Emergent Abilities and Scaling in LLMs | 大语言模型中的涌现和规模…
IT技术
( twitter.com)

2年前 • 宝玉 • -- 点击 0 评论

6

2

1

1

给清华开源的中英双语对话模型 ChatGLM-6B 的第二代版本ChatGLM2-6B 做了一个 Colab，目前跑在默认情况下，模型以 FP16 精度加载，运行需要大概 13GB 显存。…
IT技术
( twitter.com)

2年前 • lewang🍥 • -- 点击 0 评论

7

2

1

1

Google的教学视频《Introduction to Large Language Models | 大语言模型介绍》（中英双语字幕）

这个视频介绍了大型语言模型（Large Language Models，LLMs）的概念、…
IT技术
( twitter.com)

2年前 • 宝玉 • -- 点击 0 评论

8

3

2

2

目前英文 7B 规模的 SOTA 模型是 zephyr-7b-beta。它放弃了质量参差不齐的开源数据集，使用ChatGPT和GPT-4 全新标注了 UltraChat 和 UltraFeedback 数据集（已开源）。是 llama-index 项目实测出来唯一能够支持 Agent 的小参数模型。

与之相比，中文开源模型虽多，数据集却很少开源。
时政
( twitter.com)

2年前 • 九原客 • -- 点击 0 评论

9

2

1

1

《开源大模型食用指南》基于 Linux 环境快速部署开源大模型，更适合中国宝宝的部署教程
IT技术
( github.com)

1年前 • Geek • -- 点击 0 评论

10

2

1

1

在线编程平台Replit近期发布了一篇关于《如何训练你自己的大型语言模型》的博客文章，分享了他们在训练自家编程大型语言模型（LLM）过程中的经验和教训。

他们把整个过程分成了三个阶段：数据管道、模型训练、推理

他们的主要数据来…
推特中文圈
( twitter.com)

2年前 • 宝玉 • -- 点击 0 评论

11

2

1

1

Google刚刚发布了开源大语言模型 Gemma，这是对标 LLAMA 2 的开源大语言模型。
Gemma是一系列基于创建Gemini模型所使用的相同技术与研究的、在其领域内技术领先的轻量级开源模型。…
IT技术
( twitter.com)

1年前 • 宝玉 • -- 点击 0 评论

12

2

1

1

有时碧山的乐高 MOC 模型重建全过程【三分钟展示十二天乐高MOC模型重建过程，乐高模型和真实建筑双完工撒花-哔哩哔哩】
时政
( b23.tv)

1年前 • 骆逸 • -- 点击 0 评论

13

2

1

1

模型和工程文件开源了，在这里：
推特中文圈
( twitter.com)

4年前 • twitter机器人 • -- 点击 0 评论

14

2

1

1

【日本正在打造自己的日语版“ChatGPT”】据《自然》消息，日本政府联合NEC、富士通、软银等大型科技公司投入数亿美元，开发日语的大型语言模型（LLM）。ChatGPT之前的模型GPT-3训练的绝大多数文本都是英语。由于日语的句子结构与英语完全不同，因此，ChatGPT必须将日语翻译成英语才能找到答案，然后再将答案译回日语。
大陆资讯
( www.thepaper.cn)

2年前 • 女娲补锅 • -- 点击 0 评论

15

2

1

1

【Meta发布大语言模型LLaMA，声称效果好过GPT】Llama的英文词意是美洲大羊驼。一次性发布四种尺寸（7B、13B、33B和65B）全都开源，甚至13B的LLaMA在单个GPU上就能运行。
大陆资讯
( www.qbitai.com)

2年前 • 千鸡变 • -- 点击 0 评论

16

3

2

2

兄弟们炸裂了
这个语音专文本TTS模型应该是目前对中文支持最好的了
ChatTTS：专门为对话场景设计的文本到语音TTS模型
该模型经过超过10万小时的训练，公开版本在 HuggingFace 上提供了一个4万小时预训练的模型。
专为对话任务优化，能够支持多种说话人语音，中英文混合等。
时政
( twitter.com)

1年前 • 小互 • -- 点击 • 下载视频 0 评论

00:05:26

17

2

1

1

百度：将在未来几个月中陆续推出文心大模型4.5系列，并于6月30日起正式开源。
🗒️李彦宏曾公开表示，“开源模型是智商税，永远应该选择闭源模型”。
时政
( twitter.com)

8个月前 • 外汇交易员 • -- 点击 0 评论

18

2

1

1

最近提出的Falcon-40B模型在与其他开源大型语言模型（LLMs）的比较中达到了前所未有的性能水平，甚至可以与付费模型相媲美。以下是Falcon-40B成功的关键因素：

1. 更多的网络数据：许多LLMs在经过筛选的文本语…
IT技术
( twitter.com)

2年前 • GPTDAOCN • -- 点击 0 评论

19

2

1

1

《面向开发者的大模型手册 - LLM Cookbook》吴恩达大模型系列课程中文版
IT技术
( twitter.com)

1年前 • Geek • -- 点击 0 评论

20

2

1

1

为什么连 Google 都开始害怕输给开源？这真的不是杞人忧天。来看看这周的开源三件套吧。
第一个 StarCoder，来自 huggingface，最先进的代码大语言模型。超过其他开源产品和CloseAI水平。
- 8k 上下文…
推特中文圈
( twitter.com)

2年前 • orange.ai • -- 点击 0 评论

21

3

2

2

开源之光:RedPajama重塑大语言模型的未来
LLaMA最强平替，超12万亿训练数据，全开源
1. 开源12万亿训练数据，参考LLaMA数据集配比。
2. 模型马上开源
*标题由Claude生成…
推特中文圈

开源推荐
( twitter.com)

2年前 • nash_su • -- 点击 0 评论

22

2

1

1

这位推友用英文测试Cursor的新Composer-1模型的时候，发现它的思考是用中文进行的。所以猜测，Cursor是用中国开源模型训练的（比如Qwen）。
时政
( twitter.com)

昨天 • Michael Anti • -- 点击 0 评论

23

2

1

1

大语言模型微调之道1——介绍

#大语言模型微调之道

欢迎来到由Sharon Zhou主讲的《大语言模型微调之道》课程。这门课程将教你如何在自己的数据上进一步训练开源LLM。

虽然你可能已经知道如何提示一个大语言模型，但这门课程会深入讲解另一个重要工具：微调。…
IT技术
( twitter.com)

2年前 • 宝玉 • -- 点击 • 下载视频 0 评论

00:02:59

24

2

1

1

又写了一篇万字文章，Meta 这篇文论太顶了。

LLaMA 2：免费可商用的开源大语言模型

IT技术
( mp.weixin.qq.com)

2年前 • lencx • -- 点击 0 评论

1
2
3
4
5
6
...
400
下一页

0.13206 Second , Gzip Enable.本网所有言论均来自网络，不代表本网站立场。联系方式: [email protected]

©2012.11.21 bad.news All rights reserved. 社区自动运营第 -- 年零 -- 天
This site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.

关注推特