我有一个PostgreSQL8.4版本的旧数据库，老板让我试着把它从SQL_ASCII编码转换成UTF8编码。我尝试pg_dump --encoding=UTF8，得到消息"invalid byte sequence for encoding " UTF8“：0xe76122”并搜索更多我尝试了pg_dump --encoding=ISO88591，它起作用了，我也可以毫无问题地将它导入到我创建的新的空UTF8数据库中，但有时，我会收到这样的消息：“错误:编码为”UTF8“的字符0xc296在”WIN1252“；中没有等价物；”。有什么解决方案吗？
浏览 12提问于2021-04-01得票数 0
2回答
在我的应用程序中，我必须获得服务器返回的一些数据。该数据采用UTF8编码格式。因此，我的服务器返回以下字符串：
r\u00f3 do S\u00edt
在我的代码中，我执行以下操作：
NSString *responseString = [[NSString alloc] initWithData:responseData encoding:NSUTF8StringEncoding];
NSLog(@"%@",responseString);
产出如下：
r\u00f3 do S\u00edt
它应该是
ródo sít
我做错了什么吗？
让我向你们展示，整个系统是
浏览 1提问于2011-05-27得票数 0
2回答
下面的代码段将ISO-8859-1编码的文本转换为UTF8。我不太明白这是怎么回事。有人能解释一下为什么吗？
var utf8Buf bytes.Buffer
for _, b := range iso8859Slice {
utf8Buf.WriteRune(rune(b))
}
utf8Str := utf8Buf.String()
浏览 3提问于2013-09-18得票数 1
回答已采纳
这是我现在从wprintf得到的东西
1胩?鳧?1敬爄汯?瑳瑡獵猆慴畴??
是不是windows不支持utf8？
浏览 0提问于2010-10-05得票数 2
我正在尝试转储json内容，如下所示：
foo = simplejson.dumps(data)
但我看到了以下错误：
UnicodeDecodeError: 'utf8' codec can't decode byte 0xd6 in position 33: invalid continuation byte
我应该如何正确地对其进行编码/解码？
浏览 1提问于2015-09-27得票数 0
我用PostgreSQL创建了一个数据库，其中包含了“some = ' UTF8 '"，并在其中加载了一些UTF8数据。选择很好，但是当我试图在查询中执行"WHERE (Name)= 'FOO'“时，我会得到一个错误
ERROR: invalid multibyte character for locale
我的研究似乎表明，这是因为PostgreSQL安装是带有LANG=en_US而不是LANG=en_US.UTF8的"initdb"-ed。做一个"SHOW LC_COLLATE“显示"en_US”。我不想转储
浏览 4提问于2009-01-18得票数 2
回答已采纳
我从Sequel导出了一个WordPress数据库，在试图导入它时，我得到了以下错误：
Unknown collation: 'utf8mb4_unicode_520_ci'
我检查了这个并执行了以下步骤：
首先，当我导入时，我确保兼容性从无更改为MYSQL40。(不起作用)
然后在文本编辑器中打开sql转储，将所有"utf8mb4“替换为"utf8”(没有工作)。
我将phpMyAdmin中的集合更改为“utf8_general_mysql500_ci”(不起作用)。
我将phpMyAdmin中的集合更改为“utf_unicode_ci”(不起
浏览 2提问于2017-04-06得票数 2
2回答
在编写python 3中的文本文件头时，遇到了一个问题。我有一个包含unicode和新行字符的标题。以下是一个最低限度的工作示例：
with open('my_log.txt', 'wb') as my_file:
str_1 = '\u2588\u2588\u2588\u2588\u2588\n\u2588\u2588\u2588\u2588\u2588'
str_2 = 'regular ascii\nregular ascii'
my_file.write(str_1.encode('utf8
浏览 3提问于2016-01-31得票数 1
回答已采纳
字符采用UTF8编码，如..
"\u676f\u845b“
如何在PHP中将其转换回普通的UTF8字符串？
浏览 0提问于2011-10-29得票数 1
回答已采纳
我正在将一个phpBB 2.x论坛升级到phpBB 3.x，我正在尝试找出从以前的latin1编码转换到utf8的最佳选择是什么。现在，我还在处理我的phpBB2数据库转储文件。我使用sed更新转储文件中的字符集和集合名称语句，然后尝试通过iconv运行它：
cat phpbb2.sql | sed 's/SET NAMES latin1/SET NAMES utf8/g' > tmp
mv tmp phpbb2_utf8.sql
cat phpbb2_utf8.sql | sed 's/CHARSET=latin1/CHARSET=utf8/g' &g
浏览 2提问于2011-03-19得票数 2
回答已采纳
2回答
上周我将我的数据库迁移到了另一个平台上。我从phpmyadmin面板导出mysqldump，然后使用bigdump脚本将其导入新平台。我导入的sql转储文件最初存储在以以下方式设置的数据库中：
MySQL charset: UTF-8 Unicode (utf8)
MySQL connection collation: utf8_unicode_ci
我导出数据库时选择了utf8字符集，但是如果我查看mysqldump转储文件，每个表都会出现: DEFAULT CHARSET=latin1
现在我对重音字母(如à，è，o，？)有了问题，它们显示为，Ã...etc。对于管理我的新数据库，我使用M
浏览 0提问于2013-01-24得票数 1
我试图让中的“转换器”脚本正常工作，但我得到了以下错误：
ultural$ python ../../../../jvectormap/converter/converter.py --width 1000 --country_name_index 1 --country_code_index 30 --where "'ISO = DEU'" --projection aea --name datag_germany --language en_US ne_10m_admin_1_states_provinces_shp.shp here.js
ERROR 1:
浏览 3提问于2013-06-29得票数 0
跟进
我能安全地将UTF8字符串存储在零终止的char *中吗？
我知道strlen()不会返回正确的信息，放置“存储”、打印和“传输”字符数组，似乎是安全的。
浏览 1提问于2020-01-27得票数 1
回答已采纳
1回答
我有一个SQL函数，用于将字符串转换为base64编码的字符串。唯一的问题是没有使用UTF8，我可以断定这是因为我有一个单独的C#工具，它提供不同的输出。
SQL函数：
SET ANSI_NULLS ON
GO
SET QUOTED_IDENTIFIER ON
GO
ALTER FUNCTION [dbo].[Base64Encode] ( @sInput NVARCHAR(max) )
RETURNS NVARCHAR(max)
BEGIN
DECLARE @vInput VARBINARY(max)
DECLARE @sEncodedOutput N
浏览 11提问于2013-01-14得票数 2
1回答
我正在使用SQL server和一个用PHP编写的intranet应用程序。为了方便起见，我想对网页使用UTF8字符集(jquery只支持utf8)，但是我的sqlserver数据库中存储的所有数据都在iso-8859-1中。我可以只在sqlserver和PHP之间更改数据连接字符集(而不是数据存储字符集)吗？也许只有一个查询标头？
谢谢。
浏览 2提问于2012-10-22得票数 1
回答已采纳
3回答
是否可以将Windows API ANSI函数与UTF-8字符串一起使用？
例如，假设我有一个用UTF-8编码的路径。是否可以调用CreateDirectoryA或CreateFileA并使用UTF8路径，或者在调用函数之前必须执行一些转换？
浏览 3提问于2012-01-12得票数 23
回答已采纳
3回答
C++中的字符串和字符编码
、、、、
我读了一些关于C++中字符串和字符编码的最佳实践的文章，但我正在努力寻找一种在我看来相当简单和正确的通用方法。我能就以下几点提出意见吗？我倾向于使用UTF-8和UTF-32，并定义如下内容：
typedef std::string string8;
typedef std::basic_string<uint32_t> string32;
string8类将用于UTF8，拥有一个单独的类型只是为了提醒编码。另一种选择是让string8成为std::string的子类，并删除不太适合UTF8的方法。
当需要固定的字符大小时，string32类将用于UTF-32。
UTF-8CPP函数
浏览 0提问于2010-10-17得票数 15
回答已采纳
这里的第一个问题。我是一个长期潜伏的人，真的很感谢这个网站提供的巨大帮助。
因此，我们完成了一个包含数百个遗留组件的大型系统到UTF8的迁移。感谢所有的鱼，Latin1，但是UTF8是未来，这种迁移是必须的。
所以，除了像MySQL上的搜索之外，所有的东西都运行得很好。我在这里搜索了其他问题，但它们都解决了latin1 -> utf8迁移的主要问题，而不是搜索、REGEX和LIKE...
例如，我尝试
SELECT *从名称类似'%SAO PAULO%‘的城市中选择*
得到的结果为零
SELECT *从名称类似于'%SÃO PAULO%‘的城市中选择
并得到预期的结果(注
浏览 1提问于2012-02-29得票数 0
3回答
错误外键约束
、、、
我正在尝试调试一个简单的SQL数据库。我一直有个错误说
SQL query:
CREATE TABLE Groups (
groupId int(11) NOT NULL AUTO_INCREMENT,
leaderId int(11) NOT NULL COLLATE utf8_unicode_ci,
sportId int(11) NOT NULL COLLATE utf8_unicode_ci,
groupName varchar(255) COLLATE utf8_unicode_ci
浏览 11提问于2015-10-05得票数 1
回答已采纳
我想知道为什么在JavaScript中必须使用unicode编码。我以utf8.js为例。我也在看utf8 8规范，但我并没有真正关注不同的数据片段。此外，我不完全理解何时何地编码/解码，以及编程语言中的“当前”格式是什么字节集，因此很难遵循这一点。
给定流和代码点的UTF-8‘S编码器处理程序运行以下步骤：.
我想知道流是什么，代码点是什么。据我所知，码点是字符，在utf8中可能由多个8位代码单元组成。
我还想知道为什么您不能只使用一种语言"unicode"，并且没有utf8 8/utf8 16编码/解码，因为它已经采用了utf8格式。这让我怀疑JavaScript是否出于某
浏览 0提问于2018-07-23得票数 0
回答已采纳
我无意中尝试将一个用UTF8编码的数据库从外观转换为windows1251编码(不要问，但我需要这样做)。数据库中的所有俄语编码字符都显示为-°-±--²--。当我将它们从数据库中拉到我的C#应用程序中，放入字符串时，我仍然看到-°-±-²-³--。无论我如何尝试将这个字符串解释为UTF8编码的字符串，它似乎都被解释为latin1单字节字符串，并且我没有看到我的文本显示为俄语。我基本上需要做的就是把这个latin1 -utf8编码的字符串转换成Unicode，这样我以后就可以把它转换成1251了，但是我还没能成功地做到这一点。有人有什么想法吗？
浏览 0提问于2009-09-16得票数 4
如何通过GetWindowText获取不同语言的文本？我已经修改了一个白板项目。当用户在白板中键入内容时，onchange函数将被调用并在白板中显示文本。但是，当我键入日语文本(非系统默认语言)时，它显示"?“而不是。以下是onchange的代码spinet。
void CHBEdit::OnChange()
{
static bool bChanged = true;
CDC *pDC = GetDC();
if (bChanged) {
CString str;
GetWindowText(str);
m_
浏览 14提问于2016-03-31得票数 0
我觉得这应该很简单，但是我不知道如何在用"mysqladmin create“创建数据库时设置字符集。我以为这会行得通
mysqladmin -u root db_name --character-set=utf8
利用mysqladmin --help文本的这一部分：
-O，--set- variable =name更改变量的值。请注意，此选项已弃用；您可以直接使用--variable-name=value设置变量。
我也试过这个
mysqladmin -u root create db_name --default-character-set=utf8
在这两种情况下，数据库的创建
浏览 0提问于2010-01-27得票数 8
回答已采纳
更新：我已将编码更改为
with open("../data/enwiki-20131202-pagelinks.sql", encoding="ISO-8859-1")
...and这个程序现在正在无怨言地细读文件。也许SQL转储不是UTF-8，也不包含这样的文字，这是我的错误假设。
原版：
我试图处理维基百科的一个庞大的数据集，即pagelinks.sql文件。
不幸的是，在读取文件时，我得到了以下错误：
(...)
File "c:\Program Files\Python 3.3\lib\codecs.py", line 301, in
浏览 4提问于2013-12-14得票数 2
回答已采纳
我有一个简单的SQL语法来插入到表中。我使用的是PostgreSQL8.4，并且已经将数据库编码设置为UTF8，并将POSIX设置为排序规则和字符类型。
如果我在pgadmin3下运行，这个查询是可以的，但是如果我在PHP中执行，就会出现错误。
"Internal Server Error: SQLSTATE[22021]:
Character not in repertoire: 7 ERROR:
invalid byte sequence for encoding \"UTF8\": 0xd85b\nHINT:
This error can also happen
浏览 1提问于2013-03-07得票数 12
嗨，伙计们。我已经在PHP中建立了一个项目，我在其中输入阿拉伯语数据。这是完美的工作，但当我在PHP中进行查询时，它在web浏览器中显示为“？”，问号。我添加了这段代码，但它不起作用。
header('Content-Type: text/html; charset=utf-8' );
mysql_set_charset('utf8');
mysql_query('SET NAMES utf8');
mysql_query('SET CHARACTER_SET_CLIENT=utf8');
mysql_query('SET
浏览 0提问于2014-04-26得票数 0
我需要将我的MySQL数据库从latin1_sweedish_ci转换为utf8，看起来utf8_bin是我的理想选择。我一直在读到，有些人已经导出了他们的数据库并重新创建了它们。这真的有必要吗？我不能只运行查询来转换数据吗？
我读到一个人在安装MySQL 5时，在MySQL编译过程中指定了UTF-8 ...
浏览 0提问于2011-07-22得票数 3
1回答
我正在开发一个perl + Mojolicious应用程序，我的前端发送一个POST查询，其中包含"a"参数("été")中的重音，使用charset utf-8，因为我可以在chrome选项卡中窥探。但是服务器端脚本使用我没想到的字符集来解码该参数。我编写了下面的脚本来重现这个案例。
use utf8; #script encoded in utf8 without bom
use Mojolicious::Lite;
use Data::HexDump;
{
require Mojolicious;
say "perl $^V, M
浏览 5提问于2015-05-27得票数 1
回答已采纳
1回答
我们打开并读取一个具有UTF 8个字符的文件，并使用读取的内容准备图像。但是，当我们将该图像渲染到浏览器时，我们看到的不是UTF8字符，而是一些垃圾字符。
怎样才能使图像以UTF 8字符格式显示？我们需要以某种特殊的格式显示或读取吗？
浏览 1提问于2010-12-03得票数 0
使用Java 8和Postgres 10 Server以及v42.2.16 Postgresql驱动程序，我有一个基本的JDBC查询函数：
public List<Map<String, Object>> Query(String sql) throws Exception {
Connection con = null ;
PreparedStatement pstmt;
List<Map<String, Object>> resultSetToList = null;
try {
浏览 7提问于2020-09-21得票数 0
回答已采纳
我正在尝试恢复我使用mysqldump创建的转储。在恢复原样时，我得到了这个
第63行的错误1215 (HY000)：无法添加外键约束
DROP TABLE IF EXISTS `channel_tags`;
/*!40101 SET @saved_cs_client = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `channel_tags` (
`channel_tag_id` bigint(20) NOT NULL AUTO_INCREMENT
浏览 4提问于2015-12-07得票数 10
2回答
使utf8在文件中可读
、、、、
我有字典字典，它有utf8编码的键。我正在使用json模块将此字典转储到一个文件中。
在文件中，键以utf8格式打印。钥匙实际上是孟加拉语的字母。
我要把真正的信件写在文件里。怎么做??
如果我打印这些键(其中之一是u'\u0982')，就会显示实际的字母(ং)，但在我的文件中显示的是.is编写的。印刷品是怎么显示实际信件的？
浏览 3提问于2013-06-20得票数 3
回答已采纳
1回答
我是ugins js-yaml来转换这个代码 let coor = `[ ${x}, ${y}, 0 ]`;
rooms.push( {
...
coordinates: coor,
...
} ); 我会写信给你 coordinates: [ 1, 2, 0 ] 但我现在得到的是配额字符串： "[ 7, 3, 0 ]" 这就是我写这个文件的方式 fs.writeFileSync( `${id}.yml`, yaml.safeDump( rooms )
浏览 30提问于2019-05-12得票数 0
我正在尝试摆弄facebook-chat-api NPM包。我正在尝试检查无论何时message.body包含一个火表情符号(?)，它将执行一些逻辑。但是我该如何着手获取unicode (？不知道我到底需要什么)的这个表情符号在Node.js。我尝试过utf8 NPM包，但它似乎不起作用
这是我在终端中看到的响应：
{
type: 'message',
senderID: 'senderID',
body: '?',
threadID: 'threadID',
浏览 11提问于2018-02-11得票数 1
1回答
我可以在C++中创建一个UTF-8字符串，如下所示：
char str[] = u8"a UTF-8 string literal";
但是C++标准库有UTF8函数吗？例如，它是否有一个函数来获取UTF-8字符串的字符数？
浏览 4提问于2021-03-18得票数 2
4回答
我有一个现有的表，我只想将一个特定列的字符集转换为utf-8。
我知道这个命令ALTER TABLE table_name CONVERT TO CHARACTER SET utf8对整个表都是这样做的，但是我想找一个特定于列的命令。
有什么命令可以解决这个问题吗？
浏览 2提问于2013-04-03得票数 52
回答已采纳
2回答
我试图找出在node.js中有哪些编码可用。
文档()说：
Allocates a new buffer containing the given str. encoding defaults to 'utf8'.
但是在任何地方都没有指定可用编码的列表。也许我错过了。
我正在编写脚本，它应该能够以广泛的编码方式输出。到目前为止，我只知道utf8，正如医生所说的那样:)
Thx，Jaro
浏览 2提问于2013-11-26得票数 5
我正在尝试将我们的数据库从latin1转换到UTF-8。不幸的是，我无法进行大规模的单次切换，因为应用程序需要保持在线，而且我们有700‘t的数据库需要转换。
因此，我试图利用mysql的一些黑客，将表转换为UTF-8，而不是数据。我希望实时读取、转换和替换数据。(如果愿意的话，可以进行JIT转换)
我们的php应用程序目前使用所有的默认设置，因此它使用latin1字符集连接到mysql，并删除以latin1编码的UTF-8数据。当您使用latin1查看数据时，UTF-8字符将如预期的那样显示。当你用UTF-8查看数据时，事情就变得混乱起来。
因此，我建议强制将mysql字符集设置为UTF-8
浏览 7提问于2014-03-27得票数 5
如何使用utf8字符将jstring (JNI)转换为std::string (c++)？
这是我的代码。它适用于非utf8字符，但它是错误的utf8字符。
std::string jstring2string(JNIEnv *env, jstring jStr){
const char *cstr = env->GetStringUTFChars(jStr, NULL);
std::string str = std::string(cstr);
env->ReleaseStringUTFChars(jStr, str);
return str;
}
浏览 0提问于2017-01-24得票数 28
回答已采纳
我打电话给Google自定义搜索w/ Node.js来尝试。我可以很好地得到结果，但是当我尝试使用JSON.parse(dataFromGoogle)解析JSON时，我会得到一些元素(html标题和片段；html标题中包含unicode转义序列，但我不知道哪里出错了)的非法标记错误。我可以让谷歌不给我发回html标题，但我真的需要片段！
是否有一个好的解决办法，或者我应该只是计划做一些额外的预处理，以剔除非法字符手动？
**编辑:添加了控制台输出
使用谷歌搜索“小企业”
{“customsearch#search”："customsearch#search"，"url
浏览 6提问于2011-10-20得票数 0
回答已采纳
如何读取utf-8编码的文本文件？
这就是我现在要做的：
text = Import["charData.txt", "Text", CharacterEncoding -> "UTF8"];
但它告诉我
$CharacterEncoding::utf8: "The byte sequence {240} could not be interpreted as a character in the UTF-8 character encoding"
诸若此类。我不知道为什么。我相信文件是有效的。
下面是我想读的文件：
浏览 2提问于2011-04-08得票数 15
1回答
我试图像这样强迫UTF-8：
to_utf8(X) when is_list(X) ->
unicode:characters_to_binary(X, utf8);
to_utf8(X) when is_binary(X) ->
to_utf8(binary_to_list(X));
to_utf8(X) -> X.
然后像这样测试：
<<"é"/utf8>> = to_utf8(<<"é">>),
<<"Ø"/utf8>> = to_ut
浏览 1提问于2015-05-05得票数 0
回答已采纳
我尝试将UTF8字符串转换为Java Unicode字符串。
String question = request.getParameter("searchWord");
byte[] bytes = question.getBytes();
question = new String(bytes, "UTF-8");
输入的是中文字符，当我比较每个字符的十六进制代码时，它是相同的汉字。所以我非常确定字符集是UTF8。
我哪里错了？
浏览 16提问于2010-10-29得票数 7
我希望索引utf8字符串中的字符，该字符串不一定只包含ascii字符。我希望在javascript中得到与我相同的行为：
> str = "lλך" // i.e. Latin ell, Greek lambda, Hebrew lamedh
'lλך'
> str[0]
'l'
> str[1]
'λ'
> str[2]
'ך'
按照的建议，我代表我的混合字符长度字符串，就像c中的任何其他刺一样-而不是使用wchars。
问题是，在C语言中，不能访问字符串的第16个字符:只有16个字节。因
浏览 0提问于2019-01-25得票数 4
2回答
我正在使用一些python脚本，得到了一个使用UTF8编码的原始字符串。首先，我将其解码为utf8，然后进行一些处理，最后将其编码回utf8并插入到数据库(Mysql)中，但是数据库中的字符并不是以真实格式显示的。
str = '<term>Beiträge</term>'
str = str.decode('utf8')
...
...
...
str = str.encode('utf8')
在txt文件中找到了该字符串的真实形式，但在MYSQL_DB中找到后，我发现它是这样的
<term>"Be
浏览 1提问于2011-05-17得票数 2
1回答
git-p4消息和作者编码
、、、、
今天，我可以将一些非常古老的存储库迁移到git。虽然这很有趣，但有一件事引起了我的注意。提交消息中的所有特殊字符，甚至作者名称都没有使用正确的编码。
所以我试着去调查问题的来源。
首先，perforce服务器不支持unicode，因此设置P4CHARSET只对Unicode clients require a unicode enabled server.没有影响。
然后，我检查了简单命令的输出，比如p4 users where，确实在ANSI中(根据file -bi对重定向输出进行咨询notepad++或ISO8859-1)。
locale命令是LANG=en_US.UTF-8
浏览 7提问于2015-05-13得票数 5
回答已采纳
1回答
我有一个名为hinditext.csv的csv文件，其中包含印地语文本。
现在，当我尝试此代码时，它会输入数据，但输入的是？道路。我试过设置utf。但这似乎并不管用。
任何帮助我们都深表感谢。
<?php
$file = fopen("hinditest.csv","r");
$arr = fgetcsv($file);
fclose($file);
header( 'Content-Type: text/html; charset=utf-8' );
mysql_connect('loc
浏览 3提问于2016-05-18得票数 0
2回答
也许这不是问题，但我希望收集SO的智慧来帮助我找出答案。
我们正在努力确保跨平台的编码是一致的。要走的路显然是UTF8。然而，不幸的是，一些平台使用了扩展的ASCII (通常是某种形式的Windows代码页)，我们担心当使用比方说从Windows代码页到UTF8的变音进行编码时，在UTF8中有多种可能的字符选择。
在不同的平台(Linux、Mac )上，我们如何确保选择的UTF8字符是一致的？
正如我所说的，也许这不是问题。也许有一些我不知道的标准映射。我们还没有看到任何问题，但一位同事刚刚提出了这个问题，所以我正在寻找信息。
提前感谢大家。
浏览 4提问于2012-10-10得票数 0
我在将Windows-1257文件转换为UTF-8时遇到问题。原始文件的顶部有<?xml version="1.0" encoding="windows-1257"?>，我尝试使用以下代码对其进行转换：
iconv_set_encoding("internal_encoding", "UTF-8");
iconv_set_encoding("output_encoding", "ISO-8859-1");
$baltic_xml = file_get_contents($remote_
浏览 21提问于2018-08-15得票数 -1
回答已采纳
我想将一个QString隐藏为utf8或latin1 QByteArray，但今天我以utf8的身份获得了一切。
我正在用高于0x7f的latin1的较高部分中的一些字符来测试这一点，德国人就是一个很好的例子。
如果我真的喜欢这个：
QString name("\u00fc"); // U+00FC = ü
QByteArray utf8;
utf8.append(name);
qDebug() << "utf8" << name << utf8.toHex();
QByteArray latin1;
latin1.appe
浏览 2提问于2011-03-13得票数 6
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
