PostgreSQL插入问号而不是unicode字符

Question

SAVEPOINT "DAO"
LOG:  execute <unnamed>: insert into foo values ($1,$2,$3)
DETAIL:  parameters: $1 = '23', $2 = '34bcb5f2-e7ee-40cf-9103-f2d1bf2ac7acd853d7c6-1703-44d2-aa99-6fd1df84da37', $3 = 'Anyone-日本語_l'

23 | 34bcb5f2-e7ee-40cf-9103-f2d1bf2ac7acd853d7c6-1703-44d2-aa99-6fd1df84da37 | Anyone-???_l

我的第一个猜测是，这是一个数据库配置问题，但我已经确认（尽我所知），Postgres确实通过执行以下操作来接受UTF-8：

SHOW server_encoding;
server_encoding
-----------------
UTF8
(1 row)

SHOW client_encoding;
client_encoding
-----------------
UTF8
(1 row)

我还通过手动向数据库中插入一个条目进一步证实了这一点：

INSERT INTO foo values(25, ‘the_id’, ‘ΑΒΓΔΕΖΗΘ’);
INSERT 0 1
25 | the_id | ΑΒΓΔΕΖΗΘ

从上面可以理解，数据库已经接受了我的值，并且已经成功地将Unicode字符添加到数据库中。

jdbc:postgresql://localhost/bar?useUnicode=yes&characterEncoding=UTF-8

我排除了应用程序的代码，因为它是一个非常大的项目的一部分，并且相关的部分在这里和那里是支离破碎的。但是，我认为它们与问题无关，因为Postgres日志清楚地显示了它接收到的参数。

查询和数据库接收的unicode数据是正确的，那么是什么导致了这个问题呢？

OS: RHEL 6.6
Postgres version: 9.3.5
JDBC Connector: Tried a couple (8.1, 9.3)
JRE: 1.7

数据库确实需要UTF-8:

psql -U postgres -h localhost --list

Name      |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges
----------------+----------+----------+-------------+-------------+--------------
bar       | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 |

SELECT foo_name::bytea FROM foo;

foo_name
--------------------------
\x416e796f6e652d3f3f3f5f6c

数据库中其实已经插入了问号：

SELECT * FROM foo WHERE foo_name LIKE 'Anyone-?%'
23 | 34bcb5f2-e7ee-40cf-9103-f2d1bf2ac7acd853d7c6-1703-44d2-aa99-6fd1df84da37 | Anyone-???_l

我还抓取了我的一个测试的字节序列，该测试是由JDBC控制器生成的，然后将其提供给PGStream。

{65, 110, 121, 111, 110, 101, 45, -26, -105, -91, -26, -100, -84, -24, -86, -98, 95, 105}

我通过执行以下操作（在独立应用程序中）将其转换为UTF-8字符串：

String result = new String(bytes, StandardCharsets.UTF_8);

Answer 1

在深入研究遗留代码之后，我发现并修复了这个问题。

数据库层工作得很好；当系统试图使用ByteArrayInputStream将相同的值重新插入数据库时发生问题。

通过在包含foo_name的字符串中执行getBytes（）填充ByteArrayInputStream。但是，在调用此方法时应定义UTF-8编码。

通过更改：

String name = "日本語";
InputStream is = new ByteArrayInputStream(name.getBytes());

致：

String name = "日本語";
InputStream is = new ByteArrayInputStream(name.getBytes(StandardCharsets.UTF_8));