概念formal language
形式语言
与自然语言相对,指由精确定义的语法规则生成的语言,如编程语言、LaTeX排版标记、数学公式、SQL等。特点是符号密集、结构严格、语义由语法树决定。
时间轴 (近 90 天)
10月26日
在混合语料中,形式语言内容通常占比极低,标准BPE几乎不会为其分配专门的词汇容量,导致符号被拆成单字符碎片。
待验证50%
与自然语言相对,指由精确定义的语法规则生成的语言,如编程语言、LaTeX排版标记、数学公式、SQL等。特点是符号密集、结构严格、语义由语法树决定。
在混合语料中,形式语言内容通常占比极低,标准BPE几乎不会为其分配专门的词汇容量,导致符号被拆成单字符碎片。