首页_猿客奇谈

C语言中编码中BOM问题

问题描述输出的csv文件显示乱码，是因为输出的文件是utf8编码，但是没有输出BOM，所以显示乱码。一些系统如window就是使用BOM来判断文件编码方式的。什么是BOM?在UCS 编码中有一个叫做”ZERO WIDTH NO-BREAK SPACE”的字符，它的编码是FEFF。而FFFE在UCS中是不存在的字符，所以不应该出现在实际传输中。UCS规范建议我们在传输字节流前，先传输字符”ZERO WIDTH NO-BREAK SPACE”。这样如果接收者收到FEFF，就表明这个字节流是Big-Endian的；如果收到FFFE，就表明这个字节流是Little-Endian的。因此字符”ZERO WIDTH NO-BREAK SPACE”又被称作BOM。UTF-8不需要BOM来表明字节顺序，但可以用BOM来表明编码方式。字符”ZERO WIDTH NO- 查看全文

YuanKe 2018年06月27日 16:45:50 553 0

java中的字符编码方式

from https://www.cnblogs.com/liujinhong/p/5995946.html1. 问题由来面试的时候被问到了各种编码方式的区别，结果一脸懵逼，这个地方集中学习一下。2. 几种字符编码的方式1. ASCII码我们知道，在计算机内部，所有的信息最终都表示为一个二进制的字符串。每一个二进制位（bit）有0和1两种状态，因此八个二进制位就可以组合出256种状态，这被称为一个字节（byte）。也就是说，一个字节一共可以用来表示256种不同的状态，每一个状态对应一个符号，就是256个符号，从0000000到11111111。上个世纪60年代，美国制定了一套字符编码，对英语字符与二进制位之间的关系，做了统一规定。这被称为ASCII码，一直沿用至今。ASCII码一共规定了128个字符的编码，比如空格"SPACE&q 查看全文

YuanKe_S 2018年08月13日 17:14:22 121 0

Python全栈之字符编码

一、什么是字符编码字符跟数字一一对应的关系例如要表示 hello 这个单词，那么我们可以自己定义：h->01101000e->01100101l->01101100o->01101111这样约定之后，就可以把hello转换成计算机识别的二进制二、编码格式#阶段一：现代计算机起源于美国，最早诞生也是基于英文考虑的ASCII ASCII:一个Bytes代表一个字符（英文字符/键盘上的所有其他字符），1Bytes=8bit，8bit可以表示0-2**8-1种变化，即可以表示256个字符 ASCII最初只用了后七位，127个数字，已经完全能够代表键盘上所有的字符了（英文字符/键盘的所有其他字符），后来为了将拉丁文也编码进了ASCII表，将最高位也占用了 #阶段二:为了满足中文和英文，中国人定制了GBK GBK:2Byte 查看全文

YuanKe_S 2018年08月13日 17:29:30 226 0

Java Base64 编码解码方案总结

转载自 Java Base64 编码解码方案总结Base64是一种能将任意Binary资料用64种字元组合成字串的方法，而这个Binary资料和字串资料彼此之间是可以互相转换的，十分方便。在实际应用上，Base64除了能将Binary资料可视化之外，也常用来表示字串加密过后的内容。如果要使用Java 程式语言来实作Base64的编码与解码功能，可以参考本篇文章的作法。早期作法早期在Java上做Base64的编码与解码，会使用到JDK里sun.misc套件下的BASE64Encoder和BASE64Decoder这两个类别，用法如下：final BASE64Encoder encoder = new BASE64Encoder();final BASE64Decoder decoder = new BASE64Decoder(); 查看全文

YuanKe_S 2018年08月14日 19:48:59 127 0

utf-8的中文是一个字符占几个字节

英文字母和中文汉字在不同字符集编码下的字节数英文字母：·字节数 : 1;编码：GB2312字节数 : 1;编码：GBK字节数 : 1;编码：GB18030字节数 : 1;编码：ISO-8859-1字节数 : 1;编码：UTF-8字节数 : 4;编码：UTF-16字节数 : 2;编码：UTF-16BE字节数 : 2;编码：UTF-16LE中文汉字：字节数 : 2;编码：GB2312字节数 : 2;编码：GBK字节数 : 2;编码：GB18030字节数 : 1;编码：ISO-8859-1字节数 : 3;编码：UTF-8字节数 : 4;编码：UTF-16字节数 : 2;编码：UTF-16BE字节数 : 2;编码：UTF-16LE美国人首先对其英文字符进行了编码，也就是最早的ascii码，用一个字节的低7位来表示英文的128个字符，高1位统一为0；后来欧洲人查看全文

YuanKe_S 2018年08月22日 11:03:02 113 0

golang -- 网络字节编解码(2)

以下是利用标准库binary来进行编解码解码 ①使用bytes.NewReader/bytes.Buffer来存储要解码的ascii串 ②使用binary.Read来解码package main import ( "bytes" "encoding/binary" "fmt" ) func main() { var pi float64 bpi :=&nb 查看全文

YuanKe_S 2018年08月22日 11:24:25 105 0

字符编码笔记:ASCII、Unicode和UTF-8

一、ASCll码我们知道，计算机内部，所有信息最终都是一个二进制值。每一个二进制位（bit）有0和1两种状态，因此八个二进制位就可以组合出256种状态，这被称为一个字节（byte）。也就是说，一个字节一共可以用来表示256种不同的状态，每一个状态对应一个符号，就是256个符号，从00000000到11111111。上个世纪60年代，美国制定了一套字符编码，对英语字符与二进制位之间的关系，做了统一规定。这被称为 ASCII 码，一直沿用至今。ASCII 码一共规定了128个字符的编码，比如空格SPACE是32（二进制00100000），大写的字母A是65（二进制01000001）。这128个符号（包括32个不能打印出来的控制符号），只占用了一个字节的后面7位，最前面的一位统一规定为0。二、Unicode 英语用128个符号编码就够了，但是用来表示其查看全文

YuanKe_S 2018年08月22日 16:39:35 120 0

Struts2输入校验（编码方式）

struts2对用户输入数据的校验方法有两种方式，一种是通过编码的方式，另一种则是通过使用XML配置方式。本章主要介绍struts2编码方式的输入校验。以下将结合一个实例程序进行说明。代码结构：关键代码：RegistAction.javaregist.jspstruts.xmlRegistAction.properties:struts2的ActionSupport提供了validate这种输入校验方法用于对用户输入的数据进行检验，在将用户数据传递到具体的action处理方法（toRegist）前会先调用validate方法进行输入校验，同时用户也可以自己定义对应方法（toRegist）的校验方法（validateToRegist），另外，struts2也提供了内置类型转换功能（例如：传递一个非数字给age（Integer），传递非日期类型给birt 查看全文

YuanKe_S 2018年08月24日 17:53:02 100 0