草庐IT

java - unicode字符首(U+9996)是怎么处理的,java/mysql是如何处理它和它的 friend 的?

coder 2023-10-12 原文

我有一个包含 unicode 字符 U+9996 的 java 字符串(这就是我执行 codePointAt() 时得到的结果)。

如果我在调试器表达式面板(在 eclipse 中)中查看它,那么一切都很好,它看起来像“首页”。但是,如果我将它打印到控制台,我只会得到“?”。问题似乎不是字体,因为我尝试过不同的设置。

我真正的问题是我试图将字符串放入 MySQL 数据库(使用 utf8 编码)。许多其他宽字符在数据库中显示良好,但同样,这个和其他一些类似的字符显示为“?”。所有这些让我相信问题出在 Java 方面。

在追查这个错误的过程中,我对 Unicode Normalization 有了一些了解。和java.text。 Normalizer这看起来在这种情况下可能是相关的。我了解到 U+9996 是 U+2FB8 的规范版本。 U+2FB8 在显示方面存在与上述完全相同的问题,无论如何我为什么要转换为非规范表示(即使我可以,但我认为我不能)?

无论如何,我发现了一个我一直无法理解的潜在线索。 This page包含“U+9996 不是有效的 unicode 字符”字样,没有进一步解释。然后继续展示如何在各种 unicode 编码中对这个假定无效的 unicode 字符进行编码。所以我的问题基本上是:WTF?


更新

  • 我在使用 Mac。
  • 我说的是 Eclipse 控制台。
    • 我在 Run > Common 下将控制台编码设置为 UTF-8
    • 我将 -Dfile.encoding=UTF-8 添加到 JVM 参数(默认为 MacRoman)
    • 控制台(Eclipse 和 Terminal.app)现在显示正确的字符。万岁!
  • 我最感兴趣的是数据如何正确地进入数据库,当然我想全面了解这里发生的事情。
  • 我想我已经解决了数据库问题。我忘记在连接 上设置编码。现在我不明白为什么有些亚洲角色能通过而不是其他人。
  • 呸,stackoverflow 发展很快。很难跟上。谢谢大家。

最佳答案

您是否已验证存储在数据库中的值实际上是 U+003f(问号)?对于如何显示所选字体中不存在的字符,以及如何将它们显示为 ?',有各种约定。相当普遍。

很可能,字符被正确存储,并且出于某种原因,简单地显示为“?”。基本上,忽略它是如何呈现的,并查看数据库中存储的代码点。是 U+9996 还是 U+003f(或完全不同的东西)? 不要盲目地假设仅仅因为它呈现为一个问号,它实际上是一个存储在数据库中的问号。

关于java - unicode字符首(U+9996)是怎么处理的,java/mysql是如何处理它和它的 friend 的?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/342392/

有关java - unicode字符首(U+9996)是怎么处理的,java/mysql是如何处理它和它的 friend 的?的更多相关文章

  1. ruby - 如何从 ruby​​ 中的字符串运行任意对象方法? - 2

    总的来说,我对ruby​​还比较陌生,我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础,我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用

  2. Ruby 解析字符串 - 2

    我有一个字符串input="maybe(thisis|thatwas)some((nice|ugly)(day|night)|(strange(weather|time)))"Ruby中解析该字符串的最佳方法是什么?我的意思是脚本应该能够像这样构建句子:maybethisissomeuglynightmaybethatwassomenicenightmaybethiswassomestrangetime等等,你明白了......我应该一个字符一个字符地读取字符串并构建一个带有堆栈的状态机来存储括号值以供以后计算,还是有更好的方法?也许为此目的准备了一个开箱即用的库?

  3. ruby-on-rails - 在 Rails 中将文件大小字符串转换为等效千字节 - 2

    我的目标是转换表单输入,例如“100兆字节”或“1GB”,并将其转换为我可以存储在数据库中的文件大小(以千字节为单位)。目前,我有这个:defquota_convert@regex=/([0-9]+)(.*)s/@sizes=%w{kilobytemegabytegigabyte}m=self.quota.match(@regex)if@sizes.include?m[2]eval("self.quota=#{m[1]}.#{m[2]}")endend这有效,但前提是输入是倍数(“gigabytes”,而不是“gigabyte”)并且由于使用了eval看起来疯狂不安全。所以,功能正常,

  4. ruby-on-rails - unicode 字符串的长度 - 2

    在我的Rails(2.3,Ruby1.8.7)应用程序中,我需要将字符串截断到一定长度。该字符串是unicode,在控制台中运行测试时,例如'א'.length,我意识到返回了双倍长度。我想要一个与编码无关的长度,以便对unicode字符串或latin1编码字符串进行相同的截断。我已经了解了Ruby的大部分unicode资料,但仍然有些一头雾水。应该如何解决这个问题? 最佳答案 Rails有一个返回多字节字符的mb_chars方法。试试unicode_string.mb_chars.slice(0,50)

  5. ruby - 将差异补丁应用于字符串/文件 - 2

    对于具有离线功能的智能手机应用程序,我正在为Xml文件创建单向文本同步。我希望我的服务器将增量/差异(例如GNU差异补丁)发送到目标设备。这是计划:Time=0Server:hasversion_1ofXmlfile(~800kiB)Client:hasversion_1ofXmlfile(~800kiB)Time=1Server:hasversion_1andversion_2ofXmlfile(each~800kiB)computesdeltaoftheseversions(=patch)(~10kiB)sendspatchtoClient(~10kiBtransferred)Cl

  6. ruby-on-rails - Rails 常用字符串(用于通知和错误信息等) - 2

    大约一年前,我决定确保每个包含非唯一文本的Flash通知都将从模块中的方法中获取文本。我这样做的最初原因是为了避免一遍又一遍地输入相同的字符串。如果我想更改措辞,我可以在一个地方轻松完成,而且一遍又一遍地重复同一件事而出现拼写错误的可能性也会降低。我最终得到的是这样的:moduleMessagesdefformat_error_messages(errors)errors.map{|attribute,message|"Error:#{attribute.to_s.titleize}#{message}."}enddeferror_message_could_not_find(obje

  7. ruby - 如何以所有可能的方式将字符串拆分为长度最多为 3 的连续子字符串? - 2

    我试图获取一个长度在1到10之间的字符串,并输出将字符串分解为大小为1、2或3的连续子字符串的所有可能方式。例如:输入:123456将整数分割成单个字符,然后继续查找组合。该代码将返回以下所有数组。[1,2,3,4,5,6][12,3,4,5,6][1,23,4,5,6][1,2,34,5,6][1,2,3,45,6][1,2,3,4,56][12,34,5,6][12,3,45,6][12,3,4,56][1,23,45,6][1,2,34,56][1,23,4,56][12,34,56][123,4,5,6][1,234,5,6][1,2,345,6][1,2,3,456][123

  8. ruby - 什么是填充的 Base64 编码字符串以及如何在 ruby​​ 中生成它们? - 2

    我正在使用的第三方API的文档状态:"[O]urAPIonlyacceptspaddedBase64encodedstrings."什么是“填充的Base64编码字符串”以及如何在Ruby中生成它们。下面的代码是我第一次尝试创建转换为Base64的JSON格式数据。xa=Base64.encode64(a.to_json) 最佳答案 他们说的padding其实就是Base64本身的一部分。它是末尾的“=”和“==”。Base64将3个字节的数据包编码为4个编码字符。所以如果你的输入数据有长度n和n%3=1=>"=="末尾用于填充n%

  9. ruby - 如何指定 Rack 处理程序 - 2

    Rackup通过Rack的默认处理程序成功运行任何Rack应用程序。例如:classRackAppdefcall(environment)['200',{'Content-Type'=>'text/html'},["Helloworld"]]endendrunRackApp.new但是当最后一行更改为使用Rack的内置CGI处理程序时,rackup给出“NoMethodErrorat/undefinedmethod`call'fornil:NilClass”:Rack::Handler::CGI.runRackApp.newRack的其他内置处理程序也提出了同样的反对意见。例如Rack

  10. ruby - 如何使用文字标量样式在 YAML 中转储字符串? - 2

    我有一大串格式化数据(例如JSON),我想使用Psychinruby​​同时保留格式转储到YAML。基本上,我希望JSON使用literalstyle出现在YAML中:---json:|{"page":1,"results":["item","another"],"total_pages":0}但是,当我使用YAML.dump时,它不使用文字样式。我得到这样的东西:---json:!"{\n\"page\":1,\n\"results\":[\n\"item\",\"another\"\n],\n\"total_pages\":0\n}\n"我如何告诉Psych以想要的样式转储标量?解

随机推荐