Thobolpedia AI
藏文典籍 · 训练数据资产

大藏经数字资产 KANGYUR & TENGYUR · DATA ASSET

我们已完成藏传佛教两部根本经藏的获取与训练级清洗, 构建出 3.05亿字符、质量评级 A 级 的藏文语料资产—— 规模约为当前通用大模型可见藏文数据的 十倍以上。

བཀའ་འགྱུར་དང་བསྟན་འགྱུར།
0亿字符
藏文字符总量
0万 Token
训练 Token (估)
0 卷
经藏卷数
0%
藏文纯度
壹

已有数据资产

ཡོད་ཟིན་པའི་གཞི་གྲངས།

两部经藏合计 316 卷、305,412,518 字符, 体量相当于英文《维基百科》的三分之一。全部源自开源典籍,授权清晰、无版权风险。

Kangyur · 甘珠尔
བཀའ་འགྱུར།
佛陀亲口教法 · 经律藏
103
卷
9900.0万
字符
2828.6万
Token (估)
97.1%
藏文纯度
Tengyur · 丹珠尔
བསྟན་འགྱུར།
印藏祖师论疏 · 论藏
213
卷
2.06亿
字符
5897.5万
Token (估)
97.3%
藏文纯度
全部数据资产 · 五层 (经藏只是其一,下列均可在本页实时检索/浏览)
316卷
经藏全文语料
3.05亿藏文字
102.2万
双语词典词条
汉藏·藏英·梵藏·纯藏
17.0万
平行语料句对
藏 · 英 · 中
221条
藏文世界百科
99国 + 122人 · 2,799图
3类
语言规则库
字母 · 音节 · 敬语
贰

语言规则 · 藏文的骨架

བརྡ་སྤྲོད།

这是计划中最重要、也最被忽视的一层。我们把藏文的字母、 拼读结构与敬语系统全部结构化——这是所有通用大模型都没有打好的语言底层地基。

基础辅音 · 30 根字 གསལ་བྱེད་སུམ་ཅུ།

ཀ
ka
嘎
ཁ
kha
卡
ག
ga
嘎(浊)
ང
nga
昂
ཅ
ca
佳
ཆ
cha
恰
ཇ
ja
佳(浊)
ཉ
nya
娘
ཏ
ta
达
ཐ
tha
他
ད
da
达(浊)
ན
na
那
པ
pa
巴
ཕ
pha
帕
བ
ba
巴(浊)
མ
ma
玛
ཙ
tsa
扎
ཚ
tsha
擦
ཛ
dza
扎(浊)
ཝ
wa
瓦
ཞ
zha
夏(浊)
ཟ
za
萨(浊)
འ
'a
阿(浊)
ཡ
ya
亚
ར
ra
热
ལ
la
拉
ཤ
sha
夏
ས
sa
萨
ཧ
ha
哈
ཨ
a
阿

元音符号 · 4 个

ཀི
ki
元音 i
ཀུ
ku
元音 u
ཀེ
ke
元音 e
ཀོ
ko
元音 o
前加字 སྔོན་འཇུག
ག ད བ མ འ
5 个
上加字 མགོ་ཅན
ར ལ ས
3 个
下加字 འདོགས་ཅན
ྱ ྲ ླ ྭ
4 个
后加字 རྗེས་འཇུག
ག ང ད ན བ མ འ ར ལ ས
10 个
再后加字 ཡང་འཇུག
ས ད
2 个

音节构成 · 七部件叠加 ཡི་གེ་སྡེབ་སྦྱོར།

藏文是音节文字,每个音节围绕根字最多叠加 7 个部件。下面是叠加的极限形态:

བ
前加
+
ས
上加
+
ག
根字
+
ྲ
下加
+
ུ
元音
+
བ
后加
+
ས
再后加
བསྒྲུབས bsgrubs 成就、修成(过去式)

敬语系统 · 三级 ཞེ་ས།

称呼普通人、上师、佛陀用完全不同的词——这是翻译宗教文献最易错的地方, 也是通用大模型最大的盲区。

普通语敬语含义中译(敬)
身体部位
ལུསསྐུ身体法体/圣身
མགོདབུ头首
མིགསྤྱན眼眼(敬)
ལག་པཕྱག手手(敬)
གདོངཞལ脸/面尊颜
སེམསཐུགས心圣心/意
རྐང་པཞབས脚足(敬)
日常动作
ཟེརགསུང说开示/法语
ཟབཞེས吃用(膳)
འགྲོཕེབས去/来莅临/驾临
ལྟགཟིགས看垂视
ཉནགསན听垂听
ཤེསམཁྱེན知道了知(敬)
ཉལགཟིམ睡安寝
སྤྲོདགནང给赐予
称谓与名物
མིངམཚན名字尊名/法号
ལོདགུང་ལོ年龄尊寿
ཁྱིམཕོ་བྲང家/住处宫邸
རྟཆིབས马坐骑
གོསན་བཟའ衣服法衣
叁

数据质量审计

སྤུས་ཚད་ཞིབ་བཤེར།

数据可信,源于可验证。我们用独立审计脚本逐行扫描清洗结果, 并诚实披露每一项指标——包括我们发现并修复的问题。

A
综合评级 · 优秀
97.2%
藏文纯度
残留页码噪声 0 行
清洗后混入正文的 ASCII 页码标记行数
拉丁字母污染 0.001%
误混入的英文字母(极少量为合法转写)
阿拉伯数字残留 0.0002%
页码数字是否清除干净
梵文天城体 141 行
经咒中的梵文,预期存在,已保留
审计发现 → 已修复:首轮清洗后,审计脚本发现 539 行 混入了一种变体页码标记(如 [33xa.2])。 我们随即升级清洗规则,重跑后此类噪声归零(当前 0 行)。 而另有 478 行 方括号内为真实藏文(如 [ཀྵྨ] 梵音种子字),属古籍校勘标注——我们刻意保留, 不做误删。这正是通用网络爬取数据所不具备的语言学判断。

清洗实证 · 真实经文前后对比

高亮 为被清除的噪声;所有藏文音节标点 (་ །)与经文起首符 (༄༅༅།)完整保留。

甘珠尔 · 律部第一函《毗奈耶事》 戒律藏

藏文标题 འདུལ་བ། · 本段清除噪声标记 3 处
原始 RAW
༄༅༅། །རྒྱ་གར་སྐད་དུ། བི་ན་ཡ་བསྟུ། བོད་སྐད་དུ། འདུལ་བ་གཞི། བམ་པོ་དང་པོ། དཀོན་མཆོག་གསུམ་ལ་ཕྱག་འཚལ་ལོ། །གང་གིས་འཆིང་
[1b.2]རྣམས་ཡང་དག་རབ་བཅད་ཅིང་། །མུ་སྟེགས་ཚོགས་རྣམས་ཐམས་ཅད་རབ་བཅོམ་སྟེ། །སྡེ་དང་བཅས་པའི་བདུད་རྣམས་ངེས་བཅོམ་ནས། །བྱང་ཆུབ་འདི་བརྙེས་དེ་ལ་
[1b.3]ཕྱག་འཚལ་ལོ། །ཁྱིམ་དོན་ཆེ་ཆུང་སྤངས་ཏེ་དང་པོར་རབ་འབྱུང་དཀའ། །རབ་བྱུང་ཐོབ་ནས་ཡུལ་སྤྱད་དག་གིས་དགའ་ཐོབ་དཀའ། །མངོན་དགའ་ཇི་བཞིན་དོན་བསྐྱེད་ཡང་
[1b.4]དག་བྱེད་པ་དཀའ། །ངུར་སྨྲིག་གོས་འཆང་མཁས་པ་ཚུལ་ལས་ཉམས་པ་དཀའ། །གཞི་རྣམས་ཀྱི་སྤྱི་སྡོམ་ལ། རབ་འབྱུང་གསོ་སྦྱོང་གཞི་དང་ནི། །དགག་དབྱེ
清洗后 CLEAN
༄༅༅། །རྒྱ་གར་སྐད་དུ། བི་ན་ཡ་བསྟུ། བོད་སྐད་དུ། འདུལ་བ་གཞི། བམ་པོ་དང་པོ། དཀོན་མཆོག་གསུམ་ལ་ཕྱག་འཚལ་ལོ། །གང་གིས་འཆིང་
རྣམས་ཡང་དག་རབ་བཅད་ཅིང་། །མུ་སྟེགས་ཚོགས་རྣམས་ཐམས་ཅད་རབ་བཅོམ་སྟེ། །སྡེ་དང་བཅས་པའི་བདུད་རྣམས་ངེས་བཅོམ་ནས། །བྱང་ཆུབ་འདི་བརྙེས་དེ་ལ་
ཕྱག་འཚལ་ལོ། །ཁྱིམ་དོན་ཆེ་ཆུང་སྤངས་ཏེ་དང་པོར་རབ་འབྱུང་དཀའ། །རབ་བྱུང་ཐོབ་ནས་ཡུལ་སྤྱད་དག་གིས་དགའ་ཐོབ་དཀའ། །མངོན་དགའ་ཇི་བཞིན་དོན་བསྐྱེད་ཡང་
དག་བྱེད་པ་དཀའ། །ངུར་སྨྲིག་གོས་འཆང་མཁས་པ་ཚུལ་ལས་ཉམས་པ་དཀའ། །གཞི་རྣམས་ཀྱི་སྤྱི་སྡོམ་ལ། རབ་འབྱུང་གསོ་སྦྱོང་གཞི་དང་ནི། །དགག་དབྱེ་དབྱར་དང་ཀོ་
ལྤགས་

丹珠尔 · 医方明(藏医典籍) 藏医药

藏文标题 གསོ་རིག · 本段清除噪声标记 5 处
原始 RAW
༄། །སྦྱོར་བ་བརྒྱ་བ་བཞུགས།#
[1b]
[1b.1]༄༅༅། །རྒྱ་གར་སྐད་དུ། ཡོ་ག་ཤ་ཏ་ཀ །བོད་སྐད་དུ། སྦྱོར་བ་བརྒྱ་པ། སངས་རྒྱས་སྨན་གྱི་བླ་བཻ་ཌཱུརྱ་འོད་ཀྱི་རྒྱལ་པོ་ལ་ཕྱག་འཚལ་ལོ། །འཕགས་པ་ཀླུ་སྒྲུབ་ལ་
[1b.2]ཕྱག་འཚལ་ལོ། །རིང་དུ་གྲགས་པའི་གསོ་དཔྱད་#ནས། །མཐའ་ཡས་རྒྱུད་ཀྱི་གཅེས་པ་བླངས། །སྨན་པ་མཁས་པར་རབ་མཆོད་པའི། །སྦྱོར་བ་བརྒྱ་ཡིས་བཅིང་བར་#བྱ། །བདུད་
[1b.3]རྩི་ལྟ་བུའི་སྨན་སྦྱོར་གྱིས། །ལུས་ནི་ནད་མེད་འགྱུར་བ་ཡིན། །གསོ་དཔྱད་ཤེས་པའི་སྨན་པ་ཡིས། །ནད་རྒྱུ་མཚན་ཉིད་ཡོངས་སུ་བརྟག །སླེ་ཏྲེས་གླ་#སྒང་བྱི་ཚེར་བཅའ་སྒ་དང་། །བྱི་
[1b.4]ཚེར་གླ་སྒང་ཏིག་ཏ་པརྤ་ཏ། །
清洗后 CLEAN
༄། །སྦྱོར་བ་བརྒྱ་བ་བཞུགས།#

༄༅༅། །རྒྱ་གར་སྐད་དུ། ཡོ་ག་ཤ་ཏ་ཀ །བོད་སྐད་དུ། སྦྱོར་བ་བརྒྱ་པ། སངས་རྒྱས་སྨན་གྱི་བླ་བཻ་ཌཱུརྱ་འོད་ཀྱི་རྒྱལ་པོ་ལ་ཕྱག་འཚལ་ལོ། །འཕགས་པ་ཀླུ་སྒྲུབ་ལ་
ཕྱག་འཚལ་ལོ། །རིང་དུ་གྲགས་པའི་གསོ་དཔྱད་#ནས། །མཐའ་ཡས་རྒྱུད་ཀྱི་གཅེས་པ་བླངས། །སྨན་པ་མཁས་པར་རབ་མཆོད་པའི། །སྦྱོར་བ་བརྒྱ་ཡིས་བཅིང་བར་#བྱ། །བདུད་
རྩི་ལྟ་བུའི་སྨན་སྦྱོར་གྱིས། །ལུས་ནི་ནད་མེད་འགྱུར་བ་ཡིན། །གསོ་དཔྱད་ཤེས་པའི་སྨན་པ་ཡིས། །ནད་རྒྱུ་མཚན་ཉིད་ཡོངས་སུ་བརྟག །སླེ་ཏྲེས་གླ་#སྒང་བྱི་ཚེར་བཅའ་སྒ་དང་། །བྱི་
ཚེར་གླ་སྒང་ཏིག་ཏ་པརྤ་ཏ། །བ་ཤཀ་#བྱི་ཚེར་བཅའ་སྒ་གླ་སྒང་
伍

双语词典查询

ཚིག་མཛོད།

我们整合了 1,021,776 条词条、65 部辞书—— 含 32,836 条独家汉藏专业术语(科技 / 医学 / 现代词汇,开源词典最稀缺的部分), 以及 Hopkins 藏英大词典、84000 术语库、藏文大辞典等经典辞书。输入中文或藏文,即时互查。

陆

知识广度

ཤེས་བྱའི་ཁྱབ་ཚད།

这不只是宗教文本。两部经藏涵盖 因明逻辑、藏医药、声明语法、中观哲学、唯识 等完整知识体系——这是训练通用藏文智能的理想底料。

密续释论
丹珠尔 · 9360 段
展开阅读 →
经部
甘珠尔 · 3840 段
展开阅读 →
密续部
甘珠尔 · 2400 段
展开阅读 →
因明·量论
丹珠尔 · 2400 段
展开阅读 →
律部
丹珠尔 · 2160 段
展开阅读 →
中观
丹珠尔 · 2040 段
展开阅读 →
般若释论
丹珠尔 · 1920 段
展开阅读 →
唯识
丹珠尔 · 1920 段
展开阅读 →
律部
甘珠尔 · 1560 段
展开阅读 →
十万颂般若
甘珠尔 · 1440 段
展开阅读 →
阿毗达磨
丹珠尔 · 1320 段
展开阅读 →
经部
丹珠尔 · 1200 段
展开阅读 →
杂部
丹珠尔 · 1080 段
展开阅读 →
宝积部
甘珠尔 · 720 段
展开阅读 →
声明·语法
丹珠尔 · 600 段
展开阅读 →
医方明·藏医
丹珠尔 · 600 段
展开阅读 →
华严部
甘珠尔 · 480 段
展开阅读 →
二万五千颂般若
甘珠尔 · 360 段
展开阅读 →
一万八千颂般若
甘珠尔 · 360 段
展开阅读 →
旧译密续
甘珠尔 · 360 段
展开阅读 →
本生
丹珠尔 · 360 段
展开阅读 →
陀罗尼集
甘珠尔 · 240 段
展开阅读 →
譬喻
丹珠尔 · 240 段
展开阅读 →
一万颂般若
甘珠尔 · 120 段
展开阅读 →
柒

平行语料 · 翻译对照

སྐད་གཉིས་ཟུང་སྦྲེལ།

这是训练翻译能力最关键的数据——而且是人工校验的专业成品,不是 AI 生成。 我们整合了两大权威来源共 170,371 句藏英句级对照: 84000 佛典翻译工程(全球顶尖藏学家译本,157 部译典) 与 Lotsawa House(藏传佛教仪轨法本,含拉丁音译)。 藏英每一句都经专业译者翻译校订,是翻译微调的金标准。 中文为英语枢轴机器转译占位(标注「中·机器转译」),用于演示藏译中链路, 待真·藏中语料(北理工司法 16 万 / 数据堂 501 万)替换升级。输入藏文、英文或中文,即时检索三语对照。

捌

藏文世界百科

འཛམ་གླིང་ཤེས་བྱ།

公司自有的纯藏文百科成品——把 100 个国家 与 诺贝尔奖得主 系统编译为高质量藏文,含国旗·国徽·地图·人物影像。现代知识类藏文语料开源极稀缺, 是训练通用藏文大模型(而非仅宗教文本)的高价值独家资产。 条目正文为纯藏文成品;卡片标注中/英文名便于检索。

玖

下一步路线

མ་འོངས་ལམ་སྟོན།

数据资产已就位,进入模型训练阶段。

✓

多层数据资产

语言规则 · 316 卷全文清洗 · 百万词条词典 · 17 万藏英平行句对 · 藏文世界百科(国家+诺奖) · 质量审计

已完成 · 本周
2

扩充 + S 级校对

✓ 已并入 Lotsawa House 藏英;下一步数据堂藏汉平行、独家文献 S 级人工校对 5 万句

进行中
3

训练与上线

详见下方「训练方法」「硬件 · 成本 · 时间」板块。

见下文
拾

项目方向与目的

དམིགས་ཡུལ་དང་ལམ་སྟོན།

自建一款 专业、合规、优先中国上市 的藏文大语言模型——基座站在 Qwen 之上(省去约 90% 成本),其余靠自有数据与本地训练。 服务藏学研究机构、翻译工作者与藏文化专业人士;模型按 Token 付费 商用。 数据,是真正的护城河。

★

定位

专业可用、可售卖;做到"像和 ChatGPT 聊天一样"的藏文体验——能推理、写文章、翻译、查找佛典。

核心目标
↻

路线

攒料(现在)→ 本地训练(PC 升级后)→ 翻译/问答 API 上线。不再租云 GPU。

三阶段
✓

护城河

十年级藏文数据积累 + 严格合规红线,竞品难以复制。基座通用、数据独家。

壁垒
拾壹

数据进展

གཞི་གྲངས་ཀྱི་འཕེལ་རིམ།

去重后训练语料持续增长,来源覆盖典籍、百科、现代新闻与扫描古籍, 全部经 合规红线过滤 后入库。

0亿字
去重后语料
0万篇
文档总数
0 站
爬虫并行采集
0 项
机构合作申请
✓

已入库 · 14.12 亿字

大藏经典籍 + 公司藏译书籍/知识库 + 藏文维基 + 现代新闻 + 扫描古籍 OCR。

已完成
✓

多站爬虫已完成一轮

中国西藏网 · 西藏新闻网藏文 · 安多藏语 · 苯教网 · 青海藏语 · 藏地阳光 等——本轮新增约 3.8 亿字现代语料。

本轮完成
+

待合作大鱼

格桑花藏地语料库 200 亿字 · 青海师大国重实验室 40G · 藏医药中心 1700 部古籍——已备申请。

申请中
🛡

合规红线

涉政治/敏感内容全程过滤隔离,仅合规语料进入训练集——为优先中国上市保驾。

贯穿全程
拾贰

训练方法

སྦྱོང་བརྡར་ཐབས་ལམ།

业界标准路线:扩词表 + 继续预训练(CPT)+ 指令微调(SFT)。 把已很聪明、但不懂藏文的 Qwen,一步步教会藏文 → 教会听话。

1

选基座 Qwen

站在巨人肩上,不从零造。7B 原型 / 14B 正式。

已选型
✓

扩藏文词表

16 万词表、4.5 字/Token,效率提升约 6 倍。

已完成
3

CPT 继续预训练

喂全部藏文语料 → 模型"懂藏文"(能读写、有知识)。最吃算力。

攒料中·待算力
4

SFT 指令微调

喂"问题→回答"数据 → 会翻译、会答题、会对话。

需专家数据
5

评测 + 部署

chrF/BLEU/问答正确率逐版评测 → 量化 GGUF 上线。

收尾

QLoRA 与全参训练的区别——前者省、后者强:

轻

QLoRA(低成本)

4-bit 底座 + 小适配器。单卡 48G 即可训 14B/32B,成本极低,效果约达专业级 90%。适合原型 / 过渡。

单卡可行
强

全参训练(最强)

训练全部参数,效果最强、是专业级天花板。需 约 192GB 显存(多卡)。"非常专业"该走这条。

多卡·专业级
拾叁

硬件 · 成本 · 时间

ལག་ཆ་དང་འགྲོ་གྲོན།

训练改为本地进行(不再租云 GPU)。能训多大模型只看显存—— 单卡走 QLoRA,全参需多卡。

现

当前实机

R9 5950X · 64G · RTX 3080Ti 12G。仅够 7B QLoRA 原型。

现状
A

升级 A 案 · 约 3.7 万

加 RTX 6000 Ada 48G(工包)+ 内存。单卡 QLoRA 训 14B。

过渡
全

全参机 · 约 21 万

Threadripper 平台 + 4× RTX 6000 Ada 48G(192GB)。本地全参 14B,专业级天花板。

专业级

成本结构:数据攒料——进行中 · 本地零成本;硬件——一次性采购(3.7 万–21 万,视目标); 训练——本地电费。钱花在独家数据与算力,而非重复造基座。 基座省 90%,剩下 10% 是时间与数据——这正是护城河所在。

拾肆

典籍目录 · 一千二百部可搜

དཔེ་ཐོ།

语料中已编目 499 部佛教经典(甘珠尔 172 · 丹珠尔 327) 与 753 部大师文集 གསུང་འབུམ。输入大师名或经名即时检索—— 例如搜 ཀློང་ཆེན 找隆钦绕降文集。