详解C++中的ANSI、Unicode和UTF8三种字符编码及相互转换

原创 已于 2024-08-06 17:28:50 修改 · 1.3w 阅读 · 26
文章标签：

#字符编码 #ANSI #UNICODE #UTF8 #字符编码转码 #窄字节 #宽字节

于 2024-06-08 11:58:58 首次发布
本文详细介绍了C++编程中ANSI窄字节编码、Unicode宽字节编码和UTF8编码的原理与应用。在Windows环境下，Visual Studio可以通过设置字符集来选择编码。ANSI编码是本地化的，Unicode是全球统一编码，UTF8是可变长度的全球编码。三种编码间相互转换需谨慎，不能直接转换，通常需要先转为Unicode再进行转换。Windows系统兼容ANSI编码程序，但需要正确设置非Unicode程序的语言。文中还提供了源码示例和转换接口。

目录

1、概述

2、Visual Studio中的字符编码

3、ANSI窄字节编码

4、Unicode宽字节编码

5、UTF8编码

6、如何使用字符编码

7、三种字符编码之间的相互转换（附源码）

8、Windows系统对使用ANSI窄字节字符编码的程序的兼容

9、字符编码导致程序启动失败的案例 

       在C++编程中，我们有时需要去处理字符串编码的相关问题，常见的字符编码有ANSI窄字节编码、Unicode宽字节编码及UTF8可变长编码。很多人在处理字符串编码问题时都会有疑惑，即便是有多年工作经验的朋友也可能搞不清楚。所以有必要讲一下这三种字符编码以及如何去使用它们。

VC++常用功能开发汇总（专栏文章列表，欢迎订阅，持续更新...）icon-default.png?t=N7T8https://blog.csdn.net/chenlycly/article/details/124272585

了解本专栏 订阅专栏 解锁全文
自然语言处理（二）——乔姆斯基4型文法
huihuisd的博客
12-31 3593
一、正则文法（3型） 定义：如果文法 G=(N, Σ, P, S) 的 P 中的规则满足如下形式：A → B x（这里注意B只是一个形式，代表非终结符），或 A → x，其中 A, B ∈ N，x ∈ Σ， 则称该文法为正则文法（简写为 FSG）或称3型文 法。（左线性正则文法）（如果 A → x B，则该文法 称为右线性正则文法。） 例如有如下规则：A→ Ax，A → x。那么可以推出AA...
乔姆斯基文法分类 - 0型、1型、2型、3型
apollo_miracle的博客
10-01 8750
刚刚学软件设计师中的编译原理，对文法分类比较晕，查看了一些资料，进行了如下整理： 0型文法：又称为短语文法，对应于图灵机 （1）：式子左边可以有多个字符，而且至少含有一个非终结符 （2）：式子右边可以有多个字符，可以是终结符，也可以是非终结符，但必须是有限个字符 1型文法：又称为上下文有关文法，对应于线性有界自动机 （1）：式子左边可以有多个字符，而且至少含有一个非终结符 （2）：式子...
编译原理期末复习---第二章 文法和语言
drhnb的博客
06-24 1010
文法的四元组表示形式为 G = (N, T, P, S)，其中： N 表示非终结符号集合。 T 表示终结符号集合。 P 表示产生式规则集合。 S 表示开始符号。 非终结符号（Non-terminals）：也称为非终结符或者变量，表示语言中的语法范畴或符号组合。非终结符可以通过一系列的规则进行替换或扩展，最终生成合法的句子。通常用小写字母或希腊字母表示。 终结符号（Terminals）：也称为终结符或者词汇项，表示语言中的基本符号或单词。例如，在英语文法中，终结符可以是单词如"cat"、“dog”
0型文法、1型文法、2型文法、3型文法
weixin_30575309的博客
10-27 1168
引用：＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝S-> aaS|a是什么型的，为什么S-> aSb|ab是什么型的，为什么S-> SaS|b是什么型的，为什么＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝答：三种文法都属于上下文无关文法。四种文法的判断非常简单，说到到，四种文法就是规定产生式的左和右边的字符的组成规则不同而已，其它的不能理解就不要去想了，...
Chomsky文法分类
Meskjei的博客
01-16 3298
Chomsky文法分类体系 文章目录Chomsky文法分类体系0型文法(Type-0 Grammar)1型文法(Type-1 Grammar)2型文法(Type-2 Grammar)3型文法(Type-3 Grammar)四种文法之间的关系 0型文法(Type-0 Grammar) α→β \alpha \rightarrow{\beta} α→β 无限制文法/短语结构文法 ∀α→β∈P\fora...
2.4 文法的乔姆斯基体系
tang7mj的博客
03-04 2804
0型文法（短语结构文法）最一般的文法类型，没有特别的限制。它能生成递归可枚举集合，即所有图灵机可以识别的语言。1型文法（上下文有关文法）产生式的应用依赖于周围的上下文。它要求产生式的右侧至少与左侧一样长（|β| ≥ |α|）。2型文法（上下文无关文法）产生式的应用不依赖于非终结符的上下文。每个产生式将一个非终结符替换为一串终结符和/或非终结符。3型文法（正则文法）最受限的文法类型，产生式右侧要么是单个终结符，要么是单个终结符后跟单个非终结符。
编译原理 - 文法（二）
lslxy1021的博客
03-21 1787
在 编译原理 - 文法（一） 一文中，讲了文法分为四类。该分类标准由乔姆斯基于1956年提出，所以又将其称为乔姆斯基层次结构。 这个分类谱系把所有的文法分成四种类型：0型文法、1型文法、2型文法和3型文法。这四种文法类型依次拥有越来越严格的产生式规则，所能表达的语言也越来越少。 尽管表达能力比0型文法和1型文法要弱，但由于可以高效率的实现，2型文法和3型文法成为四类文法中最重要的两种文法类型。
编译原理之文法篇
秀秀的奇妙旅行
03-24 4050
字母表 字母表概念：有穷符号集合 符号（字母，数字，标点符号） 例如二进制字母表{0,1} 字母表运算：乘积、n次幂、正闭包、克林闭包 文法定义 产生式的简写 推导和规约 句型：可含终结符也可含有非终结符（推导过程中的每一个语句都是） 句子：最终推导出的只含有终结符的语句 文法G生成的语言：由文法G的开始符号 s推导出的所有句子 文法的分类 ¨0型（无限制文法）: ¨1...
编译原理 龙书第4章 作业3
zumhui的博客
11-25 7032
4.2.1 考虑上下文无关文法： S→S S + | S S * | a， 以及串aa+a* 1)给出这个串的一个最左推导 S→S S * →S S + S * →a S + S * →a a + S * →a a + a * 2)给出这个串的一个最右推导 S→S S * →S a * →S S + a * →S a + a * →a a + a * 3)给出这个串的一棵语法分析树 4.2.2(1-3, 5, 7)[只做4.2.1的1-3小问] 对下列的每一对文法和串重复练习4.2.1 1.S->0
编译原理笔记 - 文法知识
陈显森的博客
09-21 978
文章目录乔姆斯基体系的四个层次四种语言类的包含关系主要特点 乔姆斯基体系的四个层次 乔姆斯基体系是计算机科学中刻画形式文法表达能力的一个分类谱系，是由语言学家诺姆·乔姆斯基于1956年提出的。它包括四个层次： - 0-型文法（无限制文法或短语结构文法）包括所有的文法。该类型的文法能够产生所有可被图灵机识别的语言。可被图灵机识别的语言是指能够使图灵机停机的字符串，这类语言又被称为递归可枚举语言。注意递归可枚举语言与递归语言的区别，后者是前者的一个真子集，是能够被一个总停机的图灵机判定的语言。 - 1
【编译原理】文法的分类：四种文法、语言定义+示例+它们之间的关系
热门推荐
好好学习天天向上✿✿ヽ(°▽°)ノ✿
04-13 3万+
0型文法也叫短语结构文法，PSG。0型语言PSL也叫短语结构语言或递归可枚举集。 1型文法也叫上下文有关文法，CSG。1型语言CSL也叫上下文有关语言。 2型文法也叫上下文无关文法，CFG。2型语言CFL也叫上下文无关语言。 3型文法也叫正则文法或正规文法，RG。3型语言RL也叫正则语言或正规语言。分左线性文法和右线性文法。 四者之间为包含关系。
编译原理----0型，1型，2型，3型文法
weixin_69884785的博客
12-25 3513
编译原理----0型，1型，2型，3型文法
通俗解释乔姆斯基文法体系
qinyuehong的博客
03-27 9770
关于乔姆斯基4种文法的区分，有的时候很令人头疼，在此，小编来解释一下如何正确而又迅速的判断它们，如果有不严谨的地方，欢迎大家批评指正： 释义 在文法的乔姆斯基体系中，文法被分为4类，分别是0型文法、1型文法、2型文法、3型文法。具体释义和特点如下： 一、0型文法:也叫短语结构文法或无限制文法，其描述能力相当于图灵机，可使用任何的语法描述形式; 二、1型文法:也叫上下文有关文法，其描述能...
【编译原理】03语法分析
m0_62410106的博客
04-20 2856
定义3.1 上下文无关文法是一个四元组G =(N，T，P，S)：① N是非终结符的有限集合(Nonterminals)；② T是终结符的有限集合(Terminals)，且N∩T=Φ；③P是产生式的有限集合(Productions)，每个产生式形如: A→α，其中A∈N，被称为产生式的左部，α∈(N∪T)*，被称为产生式的右部，若α=ε，则称A→ε为空产生式(也可以记为A →)；④ S是非终结符，被称为文法的开始符号(Start symbol)。通过推导可以产生CFG所描述的语言。
有关编译原理中的4种文法
daydayup27的博客
09-17 4619
一.文法Chomsky于1956年建立形式语言体系，他把文法分成四种类型：0、1、2、3型。 与上下文无关文法一样，它们都由四部分组成，但对产生式的限制有所不同。 文法G定义为四元组（VN ,VT ,P,S）•VN ：非终结符集，通常用大写字母表示 •VT ： 终结符集，通常用小写字母表示 •P ：产生式集合（规则集合） •S ：开始符号（识别符号） 看一下这4种类型文法的描述能力比
编译原理——语法分析（1）文法的形式定义与四种文法类型的区分
没有标题
10-07 2万+
文法的形式定义 1.处理文法的语法分析器大体上可以分为三种类型：通用的，自顶向下的和自顶向上的。 2.文法：一种用于描述程序设计语言语法的表示方法——“上下文无关文法”，简称“文法”。 3.一个上下文无关文法（文法）有四个元素组成： 文法G可以抽象成四元组的形式：G=(VN,VT,P,S) 其中VN表示非终结符集，VT表示终结符集，P表示产生式集，S表示开始符号。 （1）一个终结符号集...
文法的分类
weixin_43356308的博客
03-12 2423
对于软件工程学生，应该能够给出一个文法的写法，就能准确判断他是属于哪一类型。 下面是知识内容 文法一共分为4种类型 0型，1型，2型，3型 他们之间是一个包含关系: 这意味从0->3型文法，要求越来越苛刻。 文法形如：G=(VN,VT,P,S) 其中P是规则(产生式),形如：α->β 0型文法（短语文法）：每个文法的规则的左边必须含有一个非终结符，意思就是α必须含有一个非终结符。 1型文法(上下文有关文法)：若文法的每一个产生式α->β，都满足|β|≥|α|，仅仅S->ε除
文法分类
一路向前！
04-23 2585
乔姆斯基（Chomsky)把文法分成四种类型 0型、1型、2型和3型。 0型文法也称为短语文法，其能力相当于图灵机，任何0型语言都是递归可枚举的；反之，递归可枚举集也必定是一个0型语言。 1型文法也称为上下文有关文法，这种文法意味着对非终结符的替换必须考虑上下文。 2型文法就是上下文无关文法，非终结符的替换无需考虑上下文。 3型文法等价于正规式，因此也被称为正规文法或线性文法。通用程序设
编译原理之文法二
吴零敏
04-22 8909
四、著名语言学家NoamChomsky(乔姆斯基)根据对产生式所施加的限制的不同，把文法分成四种类型，即0型、1型、2型和3型。 文法类型 产生式的限制 文法产生的语言 0型文法 α→β 其中α、β∈(VT∪VN) *，∣α∣≠0 0型语言 1型文法
评论 8
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

dvlinker

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值