alex_82712 2022-02-04 16:16 采纳率: 0%
浏览 19
已结题

请问如何用scala把emoji表情符号替换但是要保留一些各国语言的文字譬如英文,法文等

现在要把一个结果集中表情符号全部替换为空字符串,但是我发现把一些外国文字也替换了。

scala>     val df = Seq(
     |       (8, "bat★☆😂 😆 ⛱󰀄󰀄 ✨🚣♂⛷🏂❤🤍🪵֎۩ᴥ★ Lôa Créole♥"),
     |       (64, "bb")
     |     ).toDF("number", "word")
df: org.apache.spark.sql.DataFrame = [number: int, word: string]

scala> df.show(false)
+------+------------------------------------------------+
|number|word                                            |
+------+------------------------------------------------+
|8     |bat★☆😂 😆 ⛱󰀄󰀄 ✨🚣‍♂️⛷🏂❤️🤍🪵֎۩ᴥ★ Lôa Créole♥|
|64    |bb                                              |
+------+------------------------------------------------+

我在网上搜了一个这样的

regexp_replace(df("word"), """[^ 'a-zA-Z0-9,.?!]""","")
scala> df.select($"number", $"word", regexp_replace(df("word"), """[^ 'a-zA-Z0-9,.?!]""","").alias("word_revised")).show(false)
+------+------------------------------------------------+---------------+
|number|word                                            |word_revised   |
+------+------------------------------------------------+---------------+
|8     |bat★☆😂 😆 ⛱󰀄󰀄 ✨🚣‍♂️⛷🏂❤️🤍🪵֎۩ᴥ★ Lôa Créole♥|bat    La Crole|
|64    |bb                                              |bb             |
+------+------------------------------------------------+---------------+


scala> 

ô 和 é 这两个是我想要保留的,请问如何改善一下呢?
谢谢

  • 写回答

1条回答 默认 最新

  • 有问必答小助手 2022-02-07 10:39
    关注

    你好,我是有问必答小助手,非常抱歉,本次您提出的有问必答问题,技术专家团超时未为您做出解答


    本次提问扣除的有问必答次数,将会以问答VIP体验卡(1次有问必答机会、商城购买实体图书享受95折优惠)的形式为您补发到账户。


    因为有问必答VIP体验卡有效期仅有1天,您在需要使用的时候【私信】联系我,我会为您补发。

    评论

报告相同问题?

问题事件

  • 系统已结题 2月12日
  • 创建了问题 2月4日

悬赏问题

  • ¥15 用windows做服务的同志有吗
  • ¥60 求一个简单的网页(标签-安全|关键词-上传)
  • ¥35 lstm时间序列共享单车预测,loss值优化,参数优化算法
  • ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
  • ¥100 为什么这个恒流源电路不能恒流?
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值
  • ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题,上传的坐标文件里是怎么对无序点进行编号的,以及xy坐标在处理的时候是进行整体模型分片处理的吗
  • ¥15 一直显示正在等待HID—ISP
  • ¥15 Python turtle 画图