print u'\xe4\xf6\xfc'.encode('utf-8')
print unicode(u'\xe4\xf6\xfc')
回溯：
盲枚眉
Traceback (most recent call last):
File "D:\zjm_code\a.py", line 6, in <module>
print unicode(u'\xe4\xf6\xfc')
UnicodeEncodeError: 'ascii' codec can't encode c
浏览 5提问于2010-01-08得票数 1
回答已采纳
2回答
问题: Azure DataFactory v1中JSON文件中的额外字符。
我有两个文件，它们是来自两个Cosmos db集合的直接副本。
我使用Data v1 (选择默认值)将集合复制到Blob存储容器中，然后使用将JSON文件复制到Windows10桌面。
使用编辑器vi/Notrepad/Wordpad/Ultra Edit/Visual代码查看文件，它们看起来很好。
B.当我试图将文件读入一个简单的Nodejs(v9)应用程序时，我得到JSON解析错误：
SyntaxError: C:\Users\ricko\Desktop\whippy\MorpheusDataProduction
浏览 3提问于2018-01-12得票数 0
回答已采纳
1回答
我正在我的JS中读取CSV文件，但字符带有重音(á，ó...)替换为黑色正方形问号(�)。
我在PHP中总是遇到这样的问题，但是，我使用的是JS，我不知道如何解决这个问题。
问题出在文件的UTF8编码中，有没有办法在代码中解决这个问题？
谢谢
浏览 2提问于2012-10-31得票数 1
回答已采纳
1回答
源到源转换
、、、
我希望在python中使用字符串操作将input.js转换为output.js。
这是input.js
let k=document.createElement("div");
k.innerHTML='<style>\n .wrapper {\n opacity: 0;\n transition: visibility 0s, opacity 0.25s ease-in;\n }\n\n .overlay {\n height: 100%;\n position: fixed;\n top
浏览 3提问于2022-05-14得票数 0
3回答
在python中，字符串可以是unicode ( utf-16和utf-8 )，也可以是具有不同编码的单字节( cp1251、cp1252等)。可以检查一下编码字符串是什么吗？例如,
time.strftime( "%b" )
将返回一个文本名称为月份的字符串。在MacOS下，返回的字符串将是utf-16，在具有英语本地语言的Windows下，它将是带有ascii编码的单字节，而在非英语语言环境下，它将通过语言环境的代码页进行编码，例如cp1251。我该如何处理这样的字符串？
浏览 0提问于2009-05-01得票数 0
回答已采纳
代码如下：
>>> z = u'\u2022'.decode('utf-8', 'ignore')
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
File "/usr/lib/python2.6/encodings/utf_8.py", line 16, in decode
return codecs.utf_8_decode(input, errors, Tru
浏览 4提问于2011-02-24得票数 45
回答已采纳
4回答
我在想..。
(除了查询字符串中的base64 64‘s加号“+”符号的问题--它被翻译成“空格”并可以通过%2b解决)：
这两个函数都可以通过JS命令使用：
btoa
encodeUriComponent
所以我问自己(还有你)：
什么时候我应该使用什么？(我总是本能地使用encodeUriCompoonent )。
定义不同的问题-但实现可能是相似的.
编辑
我想我找到了问.的理由。(为什么以前没人问)
浏览 5提问于2012-04-22得票数 29
回答已采纳
使用python2.7.3，以下内容不会引发TypeError。
>>> unicode(u'')
u''
但是，传递errors参数会引发TypeError: decoding Unicode is not supported
>>> unicode(u'',errors='replace')
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
Type
浏览 1提问于2014-02-20得票数 1
2回答
使用Java，我将多语言文本持久化为UTF-16格式的文件。为了节省磁盘空间，我想切换到使用UTF-8。
-8可以表示与UTF-16相同的字符集范围？。
这将使我能够避免在不同的人类语言中进行回归或广泛的测试。我的大部分内容都是英文的，所以我希望节省磁盘空间。
浏览 0提问于2015-03-02得票数 1
回答已采纳
>>> teststring = 'aõ'
>>> type(teststring)
<type 'str'>
>>> teststring
'a\xf5'
>>> print teststring
aõ
>>> teststring.decode("ascii", "ignore")
u'a'
>>> teststring.decode("ascii", "
浏览 3提问于2010-09-08得票数 4
回答已采纳
我从用Delphi7编写的应用程序中生成graphml文件。一切都很好，除了当我使用yEd图形编辑器打开我的一些graphml文件时，它会像这样抛出错误。
test.graphml.
at B.A.A.I.A.ā(Unknown Source)
at B.A.A.I.D.ā(Unknown Source)
at B.A.A.I.D.ă(Unknown Source)
at B.A.A.B$4.run(Unknown Source)
at B.A.A.U.Ċ(Unknown Source)
at B.A.A.U$1.run(Unknown Sour
浏览 0提问于2012-01-23得票数 0
回答已采纳
我想在类文件中设置一个unicode字符，如下所示：
TextView tv = ...;
tv.setText("·");
在.java文件中使用unicode字符有什么潜在的错误吗？
谢谢
浏览 3提问于2012-06-06得票数 3
回答已采纳
我在阅读JavaScript的一本书时发现了这句话：
JavaScript程序使用Unicode字符集编写。
我不明白的是，JavaScript文件如何确保，无论我在.js文件中写什么，都是一个Unicode字符集？
这是否意味着每当我在电脑上输入键盘时，它都会使用Unicode？它怎麽工作?
浏览 1提问于2018-08-20得票数 0
回答已采纳
在我使用“添加文件夹到工作区”之前，它显示正常。
使用“将文件夹添加到工作区”后，新建的创建文件显示混乱。
我的javascript文件像这个<script type="text/javascript" src="x.js" charset="GBK"></script>
我的项目是GBK
我的项目是GBK，我需要你的帮助！
浏览 5提问于2014-11-04得票数 2
我了解了Huffman Coding并试图申请。所以我制作了一个非常基本的文本阅读器，它只能打开和保存文件。并编写了一个可用于在保存(使用Huffman Coding)之前压缩文本的装饰符。
有一个bug我找不到，经过大量调试，我发现当我压缩文本时，字符�可能在压缩的文本中。例如，文本',-.:BCINSabcdefghiklmnoprstuvwy被压缩为앐낧淧翵�ဌ䤺큕㈀。
我发现bug存在于保存函数中。当我保存压缩文本时，它会将�的每次发生更改为?。例如，在保存앐낧淧翵�ဌ䤺큕㈀时，我得到了앐낧淧翵?ဌ䤺큕㈀。
当我试图读取保存的文件来解压缩它时，我会得到一个不同的字符
浏览 2提问于2020-05-16得票数 0
回答已采纳
我有一个带有UTF8字符的JSON对象。当我试图将对象打印到控制台(在Windows8.1中)时，它会抛出这个错误：UnicodeEncodeError: 'charmap' codec can't encode character '\u2026' in position 3706: character maps to <undefined>，因为控制台不支持某些UTF8字符的显示。我检查了，但是没有一个解决方案有效，因为JSON对象不能被编码和解码。如何解决JSON的编码问题？
def getTweets(self, company):
浏览 4提问于2015-01-08得票数 0
回答已采纳
我正在用P5.js编写一个游戏，它将表情符号吸引到canvas中。
最初，我使用崇高的文本编辑器将特殊的ASCII字符直接复制到工作正常的代码中，但我现在只访问了似乎不接受这种方式的nano。
Nano设法将我已经做过的事情转换成不同的角色。想必，这就是Nano解释ASCII字符的方法。
我之所以这样做，是因为手机和浏览器现在会自动将这些ASCII字符转换成表情符号。
示例：
当您打开文件时，heart emoji将从特殊的ASCII字符♥转换为Nano中的âö¥。
我想知道是否有一个参考资料，在哪里，我可以找到其他转换的表情，我想使用。
浏览 3提问于2017-10-24得票数 0
回答已采纳
我已经尝试了不少于5种不同的“解决方案”，但我不能得到它的工作，请帮助。
这就是错误
'ascii' codec can't decode byte 0xc3 in position 1: ordinal not in range(128)
Traceback (most recent call last):
File "/base/python_runtime/python_lib/versions/1/google/appengine/ext/webapp/__init__.py", line 636, in __call__
h
浏览 0提问于2011-05-01得票数 3
回答已采纳
2回答
Node.js缓冲区编码问题
、、、、
我在理解node.js中的字符编码时遇到了问题。我正在传输数据，由于某种原因，编码会导致某些字符被其他字符替换。我所做的是在客户端进行base64编码，然后在node.js中进行解码。
为了简单起见，我把范围缩小到下面这段失败的代码：
new Buffer("1w==", 'base64').toString('utf8');
1w==是×字符的Base64编码。现在，当将这个带有'base64'参数的字符串传递给缓冲区，然后执行.toString('utf8')时，我希望得到的是相同的字符，但我没有得到，而是得到
浏览 2提问于2011-08-03得票数 4
回答已采纳
在保存带有非ascii字符的值的文档时，使用mongoengine和mongodb获取UnicodeDecodeError (mongoengine通过unicode()调用包装值)
有什么办法来处理它？
浏览 4提问于2011-05-09得票数 0
回答已采纳
根据上的旧AntiXss文章，AntiXss.UrlEncode用于编码链接href (以下示例中的不可信输入)：
<a href="http://search.msn.com/results.aspx?q=[Untrusted-input]">Click Here!</a>
我的理解是，UrlEncode应该只在设置URL时使用，比如在使用JS设置document.location时。那么，为什么我不在前面的示例中使用HtmlAttributeEncode来编码不可信的输入呢？另一方面，如果我像上面的例子一样使用UrlEncode编码超文本标记语言属性
浏览 0提问于2010-08-26得票数 2
回答已采纳
在一个项目的代码中有以下部分：
$companies = $db->fetchAll("SELECT id FROM companies where contact_person like '%num%\"". $num. "\"%'");
例如，$num = 'ЦВ123456‘(ЦВ-西里尔符号)。但是在db中，ЦВ存储在unicode -ЦВ中。所以没有命中。那么，如何将$num转换为unicode，从而使查询变成...contact_person like '\u0426\u0412123456？
浏览 2提问于2022-03-29得票数 0
首先，我创建了一个unicode对象，类似；
test = u'\u015f\xfckr\xfc\xe7a\u011fl\xfcli'
当我打印这个物体时；
>>> print test
şükrüçağlüli
然而，当我运行这个命令时，我会得到一个UnicodeEncodeError；
>>> print str(test)
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
UnicodeEncodeEr
浏览 1提问于2014-08-28得票数 0
回答已采纳
1回答
据我所知，当连接字符串和Unicode字符串时，Python将根据默认编码自动解码字符串，并在连接之前转换为Unicode。
如果默认值为'ascii'，我假设这样的情况(如果错误，请更正)：
-> ->十六进制字节-> Unicode字符串
例如，如果在连接之前直接将UnicodeDetectionError转换为u'a' + u'Ӹ'，那么这不是更容易并产生更少的u'a' + 'Ӹ'吗？为什么需要先解码字符串？如果字符串包含非ASCII字符(如果它将被转换为Unicode )，它为什么重要？
浏览 1提问于2016-07-13得票数 0
回答已采纳
是的，另一个杂乱无章的unicode问题。
我有一个代码片段：
from __future__ import unicode_literals
import requests
from lxml import etree
class Review(object):
def __init__(self, site_name):
self.parser = etree.HTMLParser()
# other things
def get_root(self, url):
# snip snip
resp = r
浏览 0提问于2016-01-29得票数 0
在调用foursquare API的iOS应用程序中处理unicode字符的正确方式是什么？
我们当前的设置从iOS应用程序调用foursquare API，并返回XML (是的，我们将其更改为JSON)。
在测试我们的应用程序时，我们发现这个foursquare 借用了我们的应用程序--显然是因为我们没有设置来处理地点名称中的两个表情字符。
在每个级别上处理unicode字符的正确方式是什么？
在Objective-C中，我们如何调用foursquare API？在我们的WCF web服务中，当我们将XML数据返回给应用程序时？在SQL Server 2008中，当我们存储可能包含unico
浏览 3提问于2012-03-03得票数 1
我有下面的字符串"◣⛭◣◃✺▲♢"，我想把这个字符串变成"\u25E3\u26ED\u25E3\u25C3\u273A\u25B2\u2662"。和这个站点的完全一样
我想知道这在python中是否可行。我尝试过从unicode文档中为python分配一些东西，但不幸地失败了。
我以前尝试过的例子：
#!/usr/bin/env python
# -*- coding: latin-1 -*-
f = open('js.js', 'r').read()
print(ord(f[:1]))
我会很感激你的帮助！
浏览 6提问于2016-02-13得票数 4
回答已采纳
2回答
由于“遗留”的原因，我们的很多数据都是以标准varchar列的编码方式存储的。
我正在处理一个批量上载例程，在该例程中，我希望将一个xml字符串传递给一个存储过程(从C#)。xml字符串将全部采用unicode，每个元素都有一个属性，指示所需的目标编码(例如，日语的Shift-JIS )。
SQL Server中是否有一些内置机制可用于在Transact-SQL中执行此类转换？
浏览 1提问于2012-06-26得票数 1
回答已采纳
2回答
我尝试使用python和igraph库来创建一个graphml文件。我可以构造igraph的图形对象，并使用以下命令将其写入文件：
g.write_graphml("mygraph.graphml")
一切似乎都很成功，但当我尝试使用以下命令将文件读回python时：
g = Graph.Read_GraphML('mygraph.graphml')
我得到了这个错误：
igraph.core.InternalError: Error at .\src\foreign-graphml.c:1024:
Input is not proper UTF-8, ind
浏览 0提问于2012-01-22得票数 1
因此，我有以下代码从url中获取JSON字符串
url = 'http://....'
response = urllib2.urlopen(rul)
string = response.read()
data = json.loads(string)
for x in data:
print x['foo']
问题是x['foo']，如果像上面看到的那样试图打印它，我就会得到这个错误。
警告:不正确的字符串值：'\xE4\xB8\xBA Co.‘列“description”在第1行
如果我使用x['foo&#
浏览 0提问于2015-10-07得票数 0
回答已采纳
1回答
自然语言模型的加密解密
、、、、
我要自然语言模型的加密解密。我想使用自然语言字符作为重点和文本，我的分析工作如下。我怎样才能做到这一点
from Crypto.Cipher import AES
import os
BLOCK_SIZE = 32
PADDING = '0'
pad = lambda s: s + (BLOCK_SIZE - len(s) % BLOCK_SIZE) * PADDING
EncodeAES = lambda c, s: c.encrypt(pad(s))
DecodeAES = lambda c, e: c.decrypt(e.rstrip(PADDING
浏览 4提问于2014-04-30得票数 0
回答已采纳
我正在从Java移植一个库。这个库以字符串的形式传递所有参数和返回，我必须保持这种方式，然后执行相应的步骤。我注意到，当我将rune/int8 8数组转换为string，并将其转换回rune/int8 8数组时，会得到不同的值。我相信这是由Unicode字符引起的。有办法得到相同的值吗？
package main
import "fmt"
func main() {
runes := make([]rune,3)
runes[0] = 97
runes[1] = -22
runes[2] = 99
s := string(ru
浏览 0提问于2018-02-10得票数 3
回答已采纳
我正在尝试将nsstring (密码)转换为MD5和base64。对于Ascii，所有的字符都工作得很好，但是当我尝试测试‘am’或'?‘时。sign，MD5给了我一些垃圾价值。它在我的服务器端出故障了。
NSData *pwdData = [password dataUsingEncoding:NSUTF16StringEncoding allowLossyConversion:YES];
unsigned char result[CC_MD5_DIGEST_LENGTH];
CC_MD5(pwdData.bytes, pwdData.len, result);
[Base64
浏览 0提问于2014-11-19得票数 0
在Python2中，我想将一个整数值为k的Unicode字符写入文本文件。
我该怎么做？
(例如，对于ASCII，如果我想写值为65的字符，则应该在文本文件中显示为'A')。
然后，如何将文件读回整数值？
最后一个问题是，总共有多少Unicode字符？(据我所知，有多个Unicode字母，如UTF-8、UTF-16等)
非常感谢
浏览 1提问于2016-05-31得票数 0
我有一个问题，URL-用javascript编码文本。我在德国，我们有这些"Umlaute“(Umlaute)，这些信件造成了一些问题。
在线编解码器返回单词“pfel”(apples)的下列结果。
pfel >>> url-编码>>> %C3%84 pfel
%C3%84 pfel >>> url-解码>>> pfel
为了进行测试，我创建了以下没有php内容的php.file (poc.php)，只是javascript：
<script type="text/javascript">
浏览 3提问于2019-02-16得票数 0
回答已采纳
1回答
在输出中引入非法令牌
、、、
我的网站项目有几个JavaScript库依赖项，我正在使用gulp-concat插件将它们捆绑在一个库中，而不是单独包含它们：
gulp.src(['src/js/angular.min.js',
'src/js/angular-route.min.js',
'src/js/angular-sanitize.min.js',
'src/js/domador.min.js',
'src/js/megamark.min.js',
浏览 3提问于2015-11-18得票数 1
我有一个应用程序，我想展示旁遮普的文字。文本在HTML文件中。我有自定义字体"Anmol.ttf“下的css/样式。在3.0Android版本以上的设备中，文本显示得很好。然而，在较低的版本中，它几乎到处都有错误，加上在一些手机中它看起来像盒子一样。其他具有相同语言的应用程序是很容易查看的，我不知道该如何解决这个问题。我花了将近4个月的时间来寻找解决方案，但没有运气。请查看下方版本文本与较高版本文本之间的差异图片。
下面是"0.html“文件，我正在试图上传。
public class MainActivity extends Activity {
@Override
浏览 0提问于2013-07-30得票数 0
2回答
也许这不是问题，但我希望收集SO的智慧来帮助我找出答案。
我们正在努力确保跨平台的编码是一致的。要走的路显然是UTF8。然而，不幸的是，一些平台使用了扩展的ASCII (通常是某种形式的Windows代码页)，我们担心当使用比方说从Windows代码页到UTF8的变音进行编码时，在UTF8中有多种可能的字符选择。
在不同的平台(Linux、Mac )上，我们如何确保选择的UTF8字符是一致的？
正如我所说的，也许这不是问题。也许有一些我不知道的标准映射。我们还没有看到任何问题，但一位同事刚刚提出了这个问题，所以我正在寻找信息。
提前感谢大家。
浏览 4提问于2012-10-10得票数 0
1回答
我用PyQt4制作了一个有两个条目的Python2GUI应用程序。第一个是文件名，第二个是文本写入文件。
我想在这两种语言中输入阿拉伯文本，所以我编写了以下函数：
def makefile(self):
self.name_file=str(self.lineEdit.text()).decode("utf-8")
self.string=str(self.lineEdit_2.text()).decode("utf-8")
file=open(self.name_file,"w")
file.write(self
浏览 1提问于2016-03-25得票数 1
回答已采纳
1回答
晚安,
我目前正在开发一个非常简单的基于正则表达式匹配的C#人类语言词法分析器，我目前面临的问题是指定一个正则表达式，它可以匹配目标语言中所有可能的标点符号，另一个可以匹配所有类型的空格。在Stack Overflow和另一个站点中搜索后，我发现我可以分别使用Regexs \p{P}表示标点符号，使用\p{Z}表示空格，并且它在读取文本文件时有效。问题是，在最终的程序中，将需要从SQL数据库读取记录，并使用这个词法分析器处理它们，而我不知道数据库中记录的编码。在这种情况下，这会是一个问题吗？上面提到的正则表达式可以匹配输入的每个标点符号和空格字符吗，不管它们的编码是什么？
非常感谢。
浏览 3提问于2010-11-21得票数 0
回答已采纳
1回答
我正在尝试read_csv一个带有西里尔字符的csv文件和。
import pandas
data = pandas.read_csv('dataset.csv', delimiter='\|\|', engine='python', encoding='utf-8')
print type(data.name[0])
<type 'str'>
在这里，我期望得到unicode，就像
print type(u'hello')
<type 'unicode'>
浏览 0提问于2017-04-04得票数 1
回答已采纳
我对Python2.x中的unicode非常困惑。
我正在使用BeautifulSoup来抓取一个网页，并试图将我找到的内容插入到字典中，并以名称作为键，url作为值。
我正在使用BeautifulSoup的find函数来获取我需要的信息。我的代码开头如下：
name = i.find('a').string
url = i.find('a').get('href')
这是可行的，除了从find返回的This是一个对象，而不是一个字符串。
这里的事情开始让我困惑
如果我试图在将它赋值给变量之前将其转换为str类型，它有时会抛出一个UnicodeE
浏览 0提问于2012-12-20得票数 1
回答已采纳
我有两个变量(假设是x和y)，它们的值如下：
x = u'Ko\u0161ick\xfd'
y = 'Ko\x9aick\xfd'
它们可能编码相同的名称，但编码方式不同。第一个变量是unicode，第二个是字符串。
有没有办法将字符串转换为unicode (或unicode转换为string)，并检查它们是否真的相同。
我尝试使用encode
x.encode('utf-8')
它返回一些新的东西(第三个版本)：
'Ko\xc5\xa1ick\xc3\xbd'
并使用以下内容：
print x.encode('utf-8
浏览 3提问于2015-12-09得票数 0
我将terminal.app设置为接受utf-8，并且在bash中我可以输入unicode字符、复制和粘贴它们，但是如果我启动python shell，我就不能，如果我试图解码unicode，我会得到错误：
>>> wtf = u'\xe4\xf6\xfc'.decode()
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
UnicodeEncodeError: 'ascii' codec can't
浏览 0提问于2009-04-27得票数 4
回答已采纳
我在使用atmosphere框架流传输一些特殊字符时遇到了问题。
Atmosphere版本: 2.1.0-RC2
Java: 7
某些unicode字符，如“？Ɑ-ƎƏƐƔIIJƖŊŒƆƱK‘sẞ?ƲǷȜ”在使用are时无法正常传输。
在从服务器端进行流传输之前，我将AtmosphereResource CharacterEncoding设置为UTF-8。
res.setContentType("text/plain");
res.setCharacterEncoding("UTF-8");
浏览 13提问于2016-10-10得票数 0
def main():
client = ##client_here
db = client.brazil
rio_bus = client.tweets
result_cursor = db.tweets.find()
first = result_cursor[0]
ordered_fieldnames = first.keys()
with open('brazil_tweets.csv','wb') as csvfile:
csvwriter = csv.DictWriter(cs
浏览 0提问于2015-12-01得票数 2
当我尝试使用node js运行我的echo.js文件时，从终端(powershell)得到以下错误消息
PS C:\Users\ASUS\Dropbox\Web Development\Backend\Intro To Node> node echo.js
C:\Users\ASUS\Dropbox\Web Development\Backend\Intro To Node\echo.js:1
(function (exports, require, module, __filename, __dirname) { ��
浏览 0提问于2018-03-17得票数 4
回答已采纳
我正在尝试实现一个函数来生成node.js和python中的java hashCode等价物，以实现redis分片。我正在遵循下面提到的非常好的博客@链接来实现这个
但是，如果字符串中包含一些不是ascii的字符，如下面的示例所示，我就会被困在hashCode中的差异。对于常规字符串，我可以同时获得node.js和python，它们给了我相同的散列代码。
下面是我用来生成代码的代码：
--Python
def _java_hashcode(s):
hash_code = 0
for char in s:
hash_code = 31*h + ord(char)
浏览 6提问于2014-04-04得票数 7
3回答
我正在尝试使用(比如说) Windows GDI在我的程序中显示一些文本，而一些unicode字符显示为问号？怎么回事？
另请参阅：
浏览 0提问于2008-10-20得票数 10
回答已采纳
我必须创建一个C#应用程序，它在文本框中显示unicode数据。
但是SQL server列存储具有包含unicode数据的varchar数据。但是由于varchar不是基于unicode的，所以它会显示“？”这样的字符串。
嗯，我面临的问题是我不能改变列类型，因为有其他依赖的应用程序在它上面运行。
浏览 5提问于2010-04-27得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
