分类：UTF-8

2021
01-03

为什么在MySQL中不建议使用UTF-8

最近我遇到了一个bug，我试着通过Rails在以“utf8”编码的MariaDB中保存一个UTF-8字符串，然后出现了一个离奇的错误：Incorrectstringvalue:‘\xF0\x9F\x98\x83forcolumn‘summary'atrow1我用的是UTF-8编码的客户端，服务器也是UTF-8编码的，数据库也是，就连要保存的这个字符串“问题的症结在于，MySQL的“utf8”实际上不是真正的UTF-8。“utf8”只支持每个字符最多三个字节，而真正的UTF-8是每个字符最... 继续阅读 >

2020
10-10

解决websocket 报 Could not decode a text frame as UTF-8错误

当你使用websocket传输数据时，偶尔可能会出现下面的错误websocketCouldnotdecodeatextframeasUTF-8网上很多其他文章一上来就介绍什么是websocket，数据协议等等，对解决问题没有多大帮助。有一些文章说要改开头数字10000001等等，很多同学不知所云。下面说说个人的经验，不一定对，希望对大家有个帮助。首先如果你使用的是相对成熟的websocket框架的话，一般不会出现这个问题。而出现这个问题的原因，绝大部分是客户端和... 继续阅读 >

2020
10-10

java Unicode和UTF-8之间转换实例

utf-8转unicodepublicstaticStringutf8ToUnicode(StringinStr){char[]myBuffer=inStr.toCharArray();StringBuffersb=newStringBuffer();for(inti=0;i<inStr.length();i++){UnicodeBlockub=UnicodeBlock.of(myBuffer[i]);if(ub==UnicodeBlock.BASIC_LATIN){//英文及数字等sb.append(myBuffer[i]);}elseif(ub==UnicodeBlock.HALFWIDTH_AND_FULLWIDTH_... 继续阅读 >

2020
10-08

IntelliJ IDEA 统一设置编码为utf-8编码的实现

问题一：File->Settings->Editor->FileEncodings问题二：File->OtherSettings->DefaultSettings->Editor->FileEncodings问题三：将项目中的.idea文件夹中的encodings.xml文件中的编码格式改为uft-8问题四：File->Settings->Build,Execution,Deployment->Compiler->JavaCompiler设置 Additionalcommandlineparameters选项为 -encodingutf-8问题五：1)打开Run/DebugConfiguration,选择你的tomcat2)然后在&... 继续阅读 >

2016
12-14

PHP 与 UTF-8的最佳实践

《PHP中的字符串、编码、UTF-8》一文中描述了一些列的基础知识，比较枯燥，现在来说点有用的——PHP字符串处理的最佳实践，本文是“PHP、字符串、编码、UTF-8”相关知识的第二部分。先说结论——在PHP中的各个方面使用UTF-8编码。PHP语言层面是不支持Unicode字符集的，但是可以通过UTF-8编码能处理大部分问题。最佳实践就是明确知道输入编码（不知道就检测），内部统一转换为UTF-8编码，输出编码也统一... 继续阅读 >

2016
12-14

PHP中的字符串、编码、UTF-8

最近看了不少编码方面的文章，所以分二篇博文说下“PHP、字符串、编码、UTF-8”相关知识，本篇博文是上半部分，分为四大块内容，分别是“字符串的定义和使用”、“字符串转换”、“PHP字符串的本质”、“多字节字符串”。上半部分比较基础，下一篇文章《PHP与UTF-8的最佳实践》可能干货更多一点。 字符串的定义和使用PHP中能够通过四种方法设置字符串：单引号字符串单引号字符串类似于Python中... 继续阅读 >

2015
04-25

PHP生成UTF-8编码的CSV文件用Excel打开乱码的解决办法

原因：是由于输出的CSV文件中没有BOM。什么是BOM？在UCS编码中有一个叫做”ZEROWIDTHNO-BREAKSPACE”的字符，它的编码是FEFF。而FFFE在UCS中是不存在的字符，所以不应该出现在实际传输中。UCS规范建议我们在传输字节流前，先传输字符”ZEROWIDTHNO-BREAKSPACE”。这样如果接收者收到FEFF，就表明这个字节流是Big-Endian的；如果收到FFFE，就表明这个字节流是Little-Endian的。因此字符”ZEROWIDTHNO-BREAKSPACE”又被... 继续阅读 >

2015
02-02

PHP中文乱码分类及解决办法大全

PHP+MYSQL做网站开发通常都会碰到浏览器输出中文字符时乱码，这个问题的原因主要是因为HTML内容编码，PHP文件编码和MySQL数据库编码这三者不一致造成的。下面我们以UTF-8为例简述一下如何统一这三者之间的关系。新增一个PHP文件，命名为test_charset.php，将下面的代码保存到该文件中：<?php$charset="utf8";$con=mysql_connect("localhost","root","");mysql_query("SETcharacter_set_connection=$charset,... 继续阅读 >