- ubuntu12.04环境下使用kvm ioctl接口实现最简单的虚拟机
- Ubuntu 通过无线网络安装Ubuntu Server启动系统后连接无线网络的方法
- 在Ubuntu上搭建网桥的方法
- ubuntu 虚拟机上网方式及相关配置详解
CFSDN坚持开源创造价值,我们致力于搭建一个资源共享平台,让每一个IT人在这里找到属于你的精彩世界.
这篇CFSDN的博客文章PostgreSQL去掉表中所有不可见字符的操作由作者收集整理,如果你对这篇文章有兴趣,记得点赞哟.
问题描述 。
数据库中的某些数据中包含了某些不可见字符。ASCII码中的0-31,127属于控制字符,不可见.
这些不可见字符往往是不需要的,我们要想办法删除它.
解决办法 。
写一函数,将所有字段中的不可见字符替换为空格.
测试流程 。
环境准备 。
建表,并插入带不可见字符的记录。注:下列数据中的不可见字符在粘贴过来的时候自动去掉了,请按ALT+数字键加入.
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
|
CREATE
TABLE
public
.test_table
(
xm
character
varying
(50),
pinyin
character
varying
(200),
sm
character
(15)
)
WITH
(
OIDS=
FALSE
);
ALTER
TABLE
public
.test_table
OWNER
TO
postgres;
-- ----------------------------
-- Records of test_table
-- ----------------------------
INSERT
INTO
ry_syrk_copy
VALUES
(
'周小星xx'
,
'xx测试'
,
'测试'
);
INSERT
INTO
ry_syrk_copy
VALUES
(
'李华'
,
'测试xx'
,
'世xx界'
);
|
注:因不可见字符无法在CSDN中无法打出,故用xx代替。实际上在其它地方可以用ALT+数字键打印出来.
去掉表中所有的不可见字符 。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
|
-- 函数说明:将表test_table中所有的不可见字符替换掉
CREATE
OR
REPLACE
FUNCTION
delete_special_char()
RETURNS
int8
AS
$$
DECLARE
row RECORD;
BEGIN
-- 查询表中所有类型为字符串的列
FOR
row
in
select
column_name
from
information_schema.columns
where
table_name =
'test_table'
and
data_type
like
'character%'
LOOP
FOR
i
IN
1..31 LOOP
--替换所有的不可见字符为空格(除了chr(0)之外)
EXECUTE
'update test_table set '
|| row.column_name ||
' = replace('
|| row.column_name ||
', chr('
|| i ||
'), '
' '
' )'
;
END
LOOP;
END
LOOP;
RETURN
1;
END
;
$$ LANGUAGE plpgsql;
|
执行函数 。
执行函数–select * from delete_special_char(),之后查看表数据,所有的不可见字符都被替换为空格.
补充–如何删除chr(0) 。
值得注意的是上述函数并不能删除chr(0)的不可见字符,见如下测试.
但oracle中上述语句却可以成功执行,下面我就来讲一讲吧~ 。
Oracle中varchar2字段的不可见字符处理 。
在以前的项目中,曾经出现加密后的字符串数据丢失,加密内容无法正常解密的情况,经查找原因,发现是数据库表的varchar2字段中有chr(0)的不可见字符(即我们通常所说的\0),当出现这种情况时,由于java和c++中对字符串处理的不同,将会导致所取得的字符串长度不同.
在java中,字符串的长度可以通过取字符串的字节数组来获得,这样得到的字符串长度为字符串实际的大小(汉字2个字节,其他1个字节);在c++中通过strlen函数获得的字符串长度为第一个字节\0之前的字符长度.
当我们在编写jni的时候,经常会遇到将java的字符串转换为c++中的字符串的情况,这样,当java中的字符串包含\0的空字节时,在对c++转换后的字符串求取长度时,不要使用strlen函数,否则,其仅仅对\0字节之前的内容求取长度,与实际大小不同.
解决该类问题,根据所属应用的不同,可通过三种手段解决:
在数据库层解决:
Oracle数据库中,可在查询语句中使用函数replace来去除字符串中的非可见字符,例如:
select replace(content,chr(0),null) from bossquery_request where sky_command = '02',
以后大家如果遇到类似情况,可通过replace(字段名,chr(ASCII码值),null)来去掉其中对应的ASCII码值的字符.
在java程序中解决:
在java程序中,大家可通过获取String对象的所有字节内容,对字节内容进行扫描,来去掉其中不需要的字节.
在JNI层解决:
在JNI层解决该问题的方式是,不要使用strlen函数来获取字符串长度,可通过GetArrayLength取字节数组长度函数或者其他类似函数来获取字符串长度,则可避免该情况发生.
以上为个人经验,希望能给大家一个参考,也希望大家多多支持我。如有错误或未考虑完全的地方,望不吝赐教.
原文链接:https://blog.csdn.net/u012948976/article/details/52917218 。
最后此篇关于PostgreSQL去掉表中所有不可见字符的操作的文章就讲到这里了,如果你想了解更多关于PostgreSQL去掉表中所有不可见字符的操作的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。
我正在努力做到这一点 在我的操作中从数据库获取对象列表(确定) 在 JSP 上打印(确定) 此列表作为 JSP 中的可编辑表出现。我想修改然后将其提交回同一操作以将其保存在我的数据库中(失败。当我使用
我有以下形式的 Linq to Entities 查询: var x = from a in SomeData where ... some conditions ... select
我有以下查询。 var query = Repository.Query() .Where(p => !p.IsDeleted && p.Article.ArticleSections.Cou
我正在编写一个应用程序包,其中包含一个主类,其中主方法与GUI类分开,GUI类包含一个带有jtabbedpane的jframe,它有两个选项卡,第一个选项卡包含一个jtable,称为jtable1,第
以下代码产生错误 The nested query is not supported. Operation1='Case' Operation2='Collect' 问题是我做错了什么?我该如何解决?
我已经为 HA redis 集群(2 个副本、1 个主节点、3 个哨兵)设置了本地 docker 环境。只有哨兵暴露端口(10021、10022、10023)。 我使用的是 stackexchange
我正在 Desk.com 中构建一个“集成 URL”,它使用 Shopify Liquid 模板过滤器语法。对于开始日期为 7 天前而结束日期为现在的查询,此 URL 需要包含“开始日期”和“结束日期
你一定想过。然而情况却不理想,python中只能使用类似于 i++/i--等操作。 python中的自增操作 下面代码几乎是所有程序员在python中进行自增(减)操作的常用
我需要在每个使用 github 操作的手动构建中显示分支。例如:https://gyazo.com/2131bf83b0df1e2157480e5be842d4fb 我应该显示分支而不是一个。 最佳答
我有一个关于 Perl qr 运算符的问题: #!/usr/bin/perl -w &mysplit("a:b:c", /:/); sub mysplit { my($str, $patt
我已经使用 ArgoUML 创建了一个 ERD(实体关系图),我希望在一个类中创建两个操作,它们都具有 void 返回类型。但是,我只能创建一个返回 void 类型的操作。 例如: 我能够将 book
Github 操作仍处于测试阶段并且很新,但我希望有人可以提供帮助。我认为可以在主分支和拉取请求上运行 github 操作,如下所示: on: pull_request push: b
我正在尝试创建一个 Twilio 工作流来调用电话并记录用户所说的内容。为此,我正在使用 Record,但我不确定要在 action 参数中放置什么。 尽管我知道 Twilio 会发送有关调用该 UR
我不确定这是否可行,但值得一试。我正在使用模板缓冲区来减少使用此算法的延迟渲染器中光体积的过度绘制(当相机位于体积之外时): 使用廉价的着色器,将深度测试设置为 LEQUAL 绘制背面,将它们标记在模
有没有聪明的方法来复制 和 重命名 文件通过 GitHub 操作? 我想将一些自述文件复制到 /docs文件夹(:= 同一个 repo,不是远程的!),它们将根据它们的 frontmatter 重命名
我有一个 .csv 文件,其中第一列包含用户名。它们采用 FirstName LastName 的形式。我想获取 FirstName 并将 LastName 的第一个字符添加到它上面,然后删除空格。然
Sitecore 根据 Sitecore 树中定义的项目名称生成 URL, http://samplewebsite/Pages/Sample Page 但我们的客户有兴趣降低所有 URL(页面/示例
我正在尝试进行一些计算,但是一旦我输入金额,它就会完成。我只是希望通过单击按钮而不是自动发生这种情况。 到目前为止我做了什么: Angular JS - programming-fr
我的公司创建了一种在环境之间移动文件的复杂方法,现在我们希望将某些构建的 JS 文件(已转换和缩小)从一个 github 存储库移动到另一个。使用 github 操作可以实现这一点吗? 最佳答案 最简
在我的代码中,我创建了一个 JSONArray 对象。并向 JSONArray 对象添加了两个 JSONObject。我使用的是 json-simple-1.1.jar。我的代码是 package j
我是一名优秀的程序员,十分优秀!