如果，现在你用电脑阅读本文，你可以轻松的打开xx PlayGround（xx可以为Js/Java/Rust等）。然后会得到属于自己语言的结果。
Emoji 在我们生活中真的是越来越常见了，几乎每次发消息的时候不带个 Emoji，总觉得少了点什么，似乎干巴巴的文字已经无法承载我们丰富的感情了。对于我们开发者来说，如何将 Emoji 存入 MySql 数据库或者取出来，就变成了一种必须掌握的技能了。
我们知道计算机最先兴起是在国外，出于当时计算机性能的考虑和外国常用字符的考虑，最开始计算机使用的是ASCII，ASCII编码能够表示的字符毕竟是有限的，随着计算机的发展和全世界范围的流行，需要更多的能够表示世界各地字符的编码方式，这种编码方式就是unicode。
这篇文章得从一个 emoji 表情开始，我之前开源的一个 IM 项目中有朋友提到希望可以支持 emoji 表情传输。
https://github.com/crossoverJie/cim/issues/12
Emoji字符是Unicode字符集中一部分，特定形象的Emoji表情符号对应到特定的Unicode字节。随着Emoji涉及的范围越来越广泛，单Unicode这种基础Emoji已经不能满足要求，然后就有了一些特殊的组合方式来定义新的Emoji。
项目种需要统计用户昵称的字符数量进行限制，用户可以输入英文，中文，emoji 字符，当用户输入中英文和普通的 emoji 字符时，将字符串转为 []rune 进行统计没有问题。
格式良好的 Unicode 字符串引入了确保 JavaScript 中的字符串以 UTF-16 编码正确格式化的方法。
在 iOS 项目中，我们需要服务器来保存一些用户数据，例如用户信息、评论等，我们的服务器端使用了 PHP+MySQL 的搭配。在测试过程中我们发现，用户在 iOS 端里输入了 Emoji 表情提交到服务器以后，PHP 无法在 MySQL 数据库里正确保存，会遇到乱码的问题。下面是原因探析和解决办法。
那么，对于乱码这个看似不起眼，但并不是一两话能讲清楚的问题，是很有必要从根源了解字符集和编码原理，知其然知其所以然显然是一个优秀码农的基本素养，所以，便有了本文，希望能帮助到你。
现如今，emoji表情已经走入我们每个人的社交生活中，大多数现代计算机系统已经兼容emoji表情。今天，我们讲一下emoji表情在QQ空间中各个客户端的展示方案。 Emoji的历史 emoji，也叫绘文字（日语：絵文字/えもじ emoji）是日本在无线通信中所使用的视觉情感符号，由栗田穰崇（Shigetaka Kurita）创作，并在日本网络及手机用户中流行。 自苹果公司发布的ios5输入法中加入了emoji后，这种表情符号开始席卷全球，普遍应用于各种手机短信和社交网络中。 苹果输入法不停的迭代emoji表
从你刚刚毕业开始最怕的问题就是乱码问题对不对？起码我是。后面渐渐的知道是编码问题，而后面为了出现这种问题就都选择UTF-8，然后后面渐渐的就开始淡忘了这个问题。然后当小弟弟小妹妹问我们这相关的问题的时候，也都是跟他们说，全部改成UTF-8就好了。
1 String emojiStr = MimeUtility.decodeWord(mysqlColumn); 相对于这种使用Base64转换的方式，我们只需要在服务端做编码和解码即可。
emoji 在生活中已经无处不见，微信昵称大把的都在用 emoji，那么在 Laravel 中如何对它进行正确的使用呢？ 首先要了解一点基础知识： emoji 基本在各平台都有默认支持，但是都是基于
背景之前我在文章《为什么同一表情'🧔♂️'.length==5但'🧔♂'.length==4？本文带你深入理解 String Unicode UTF8 UTF16》中讲了非常硬核的内容，深入带大家了解了 Unicode UTF8 以及 JavaScript 中的 String 字符串。非常推荐你仔细阅读并收藏。如果你的网页中，展示一些 Emoji，那么一定要小心！因为 Emoji 也是在不断的更新迭代的，在旧的设备或系统中，可能无法正确地展示新出的 Emoji。比较推荐的做法：要展示某个 Emoji 前
这是一篇一本正经无聊的小研究项目。。 互联网现在面临很多新网络文体，比如弹幕文体、小红书的种草文体、网名等，这些超短文本中本身字符特征就比较少，但是表情包占比却很多，这是重要信息呀。 之前参加比赛，一般都是当作停用词直接删掉，在这些超短文本中可就不行了。
也就是说，Unicode支持的编码范围是U+0000到U+10FFFF，能对应100多万个符号（0x10FFFF === 1114111）。这些符号被分组归入16个平面（panel），所以每个平面放65536（16^4 === 65536）个
上篇中已经讲了编码的基本概念，本来是直接写MySQL的编码问题的，但是觉的Unicode字符集和UTF编码太重要了，以至于不能忽略这部分内容。
最近笔者在项目中遇到了emoji表情的处理，期间发现js处理多字节字符时会有较多坑，记录一下与各位分享。
Emoji 已无处不在，自发布以来 emoji 已成为我们语言中不可或缺的一部分，它生动有效的表达力带来了语言文字层面的变革。您可能不会想到，连银行应用、健身应用或外卖应用也都应该支持 emoji。Emoji 现在已经遍布短信等通讯应用，已经成为我们语言的一部分。如果您的应用包含文本视图，那么它应该支持 emoji，至于原因，且听我娓娓道来。🥳 遇到的问题 😖 如果您的应用没有对 emoji 进行相应的处理，较早版本的 Android 可能不知道如何去显示它们。在大多数情况下，只会显示一个空白方格，我们
一、Emoji 简介 绘文字（日语：絵文字/えもじ emoji）是日本在无线通信中所使用的视觉情感符号，绘指图画，文字指的则是字符，可用来代表多种表情，如笑脸表示笑、蛋糕表示食物等。在中国大陆，emoji通常叫做“小黄脸”，或者直称emoji 在NTTDoCoMo的i-mode系统电话系统中，绘文字的尺寸是12x12 像素，在传送时，一个图形有2个字节。Unicode编码为E63E到E757，而在Shift-JIS编码则是从F89F到F9FC。基本的绘文字共有176个符号，在C-HTML4.0
我们知道，在 Unicode 编码中，中文占3个字节，所以一个中文字符编码为 Bytes 型数据以后，会占用3个 Bytes 字符，例如：
商品评价列表页，显示每条用户的评价详情，为了保护用户隐私，要求显示用户昵称时只能显示第一位和最后一位，其他的用※代替。
在日常开发过程中，Unicode & UTF-8 并不是很受关注的知识，但在阅读源码或文章时，出现频率很高。如果你没有理解清楚 Unicode、UTF-8、UTF-16 和 UTF-32 之前的关系，会带来阅读障碍。在这篇文章里，我将带你理解 Unicode 字符集的原理，希望能帮上忙。
字符集 和 编码无疑是IT菜鸟甚至是各种大神的头痛问题。当遇到纷繁复杂的字符集，各种火星文和乱码时，问题的定位往往变得非常困难。本文将会从原理方面对字符集和编码做个简单的科普介绍，同时也会介绍一些通用的乱码故障定位方法以方便读者以后能够更从容的定位相关问题。
简单来说，字符编码的本质是建立整数和字符的映射。从而使得字符可以在计算机内以整数的形式表示，方便传输。比如，我们可以定义 ‘a’ = 1，’b’ = 2，’c’ = 3，就是在进行字符编码。
描述: 为了正确显示 HTML 页面，Web 浏览器必须知道要使用哪个字符集, 此处作为开发者必回接触到的常见字符集编码有如下：ASCII、ANSI、ISO-8859-1以及Unicode（UTF-8/16）等。
无论是数据库，还是应用服务器，有时会碰见字符集的问题，就有些懵圈。看见CSDN转载了程序员乔戈里的一篇文章，用漫画的形式，讲解了各种字符集的知识，通俗易懂。
上面错误意思是 mysql 数据库中 name 字段插入不正确的字符串值。name 字段是记录微信呢称，设计之出没有考虑到微信呢称中使用 Emoji 表情，导致写入数据失败。
虽然我们平时可以在编辑器上输入各种中文英文字母，但这些都是给人读的，不是给计算机读的，其实计算机真正保存和传输数据都是以二进制0101的格式进行的。
前几天时间测试同学在我们的前端输入了颜文字，之后软件就出 bug 了。借修 bug 机会我花了点时间学习了一下 Unicode 颜文字（emoji）。本文记录我对 emoji 的一些认识，并且简单介绍一下我为此而做的一个 Go 语言颜文字提取库的用法。还请各位读者不吝指教。
1、问题：mysql 遇到某些中文插入异常 最近有同学反馈了这样一个问题： 上述语句在脚本中 load 入库的时候会 hang 住，web 前端、命令行操作则要么抛出 Incorrect strin
之前出现过一些因为mysql编码使用不正确，导致出现页面乱码的bug，比如utf8不支持Emoji表情等等。这里对乱码问题做下分析，沉淀下来避免再次出现
作者：三十三重天 博客: http://www.zhouhuibo.club 我们在观察别人的文章时候时，总能看到很多有趣的图标，像是这样 😀🤣又或是🌸🌃🍀这样 。当我们复制图标时发现直接ctrl+c ctrl+v就可以，这竟然不是图片，而是一种字符，字符怎么能是图片呢，带着疑问我们先来看看这到底是什么。 经过查询，发现这种文本类型的象形符号是有官方定义的名称的，叫做Emoji 什么是Emoji Emoji是一种文本类型的象形符号， 它和图片、表情包不同，它能够在任何文本输入的地方使用，因为它本身就是一种文
在开发过程中，我们有时会遇到数据库存储数据时出现字符编码问题的情况。其中一个常见的错误是Caused by: java.sql.SQLException: Incorrect string value，并且提到了具体的列名和行号。本文将详细介绍这个错误的原因和解决方案。
去年到现在就一直有人希望我出一篇关于waf绕过的文章，我觉得这种老生常谈的话题也没什么可写的。
Unicdoe【真正的完整码表】对照表（二）汉字Unicode表_hherima的博客-CSDN博客_unicode中文对照表注意：下面这两段是代理区。即第1——16平面的间接表示，四个字节的汉字就在这里表示D800-DBFF：High-half zone of UTF-16 DC00-DFFF：Low-half zone of UTF-16 本篇中包含了所有常用汉字27973个，剩余汉字使用代理区标识欢迎查看字符编码相关博客专栏比如：由iPhone emoji问题牵出的UTF-16编码，UTF-8编码探究
之前在做一个留言功能时，发现在其中一台安卓5.0的手机上，输入emoji糊掉了，成了如下这样的情况
可能很多人对Java中最简单的Char类型根本不屑一顾，不就是一个字符吗？能玩出什么花来？真的是这样吗？真不一定，我见过的几个所谓的高工对char的理解可能都是在比较浅的水平。今天我就带大家从高工的角度思考这个简单的Java类型Char。
这篇文章搜集整理自@Junehck师傅的Github，记录了他在实战中遇到的各种WAF拦截SQL注入的场景和绕过姿势，文章并不是完整的，仅记录了Bypass部分。
码位（码点），对应编码术语中英文中的code point，指的是一个编码标准中为某个字符设定的数值，具有唯一性与一一对应性。码位只规定了一个字符对应的数值，并没有规定这个数值如何存储，视编码方案不同有不同的存储方式。
unicode是计算机科学领域里的一项业界标准，包括字符集、编码方案等。计算机采用八比特一个字节，一个字节最大整数是255，还要表示中文一个字也是不够的，至少需要两个字节，为了统一所有的文字编码，unicode为每种语言中的每个字符设定了统一并且唯一的二进制编码，通常用两个字节表示一个字符，所以unicode每个平面可以组合出65535种不同的字符，一共17个平面。
本次比赛是最近比较火热的多模态比赛，业务和数据比较接近真实场景，任务比较有趣。我们队伍“石碑村”，队员有华仔、致Great，最终决赛取得第五名成绩，下面主要给大家分享下我们队伍的建模思路和方案，希望能够对大家有所帮助。
写 JS 代码的同学们不知道有没有注意过，后台接口通过 JSON 处理汉字字符、emoji 时，返回的是像 \u00ff 这样转义处理的字符，而不是它们的明文原文。这是为什么呢？
刚才发布文章出现 Database Query Error，百度了问题，原因是 Typecho 在初始化数据库的时候，选用了 UTF-8 的编码，而在 MySQL 中，UTF-8 只支持最多 3 个字节，而 emoji 是 4 个字节，所以出现该问题。如果嫌麻烦可以直接删掉 emoji 就可以成功发表了。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
