倦35 2022-01-07 22:17 采纳率: 50%
浏览 81
已结题

读取txt文件用spark怎么跳过标题行

读取txt文件用spark怎么跳过标题行或者怎么把标题行删除

  • 写回答

2条回答 默认 最新

  • 鱼摆摆 2022-01-20 14:06
    关注

    以测试文件txtFile.txt为例:
    #1,#2
    line1,1
    line2,2
    line3,3

    标题行如果有用:spark.read.option("header","true").csv("txtFile.txt")
    如果要跳过的是注释行,那就好办了:spark.read.option("comment","#").csv("txtFile.txt")
    如果要跳过的行不是注释行,那就给他注释掉。。。

    评论

报告相同问题?

问题事件

  • 已结题 (查看结题原因) 5月8日
  • 创建了问题 1月7日

悬赏问题

  • ¥100 Jenkins自动化部署—悬赏100元
  • ¥15 关于#python#的问题:求帮写python代码
  • ¥20 MATLAB画图图形出现上下震荡的线条
  • ¥15 关于#windows#的问题:怎么用WIN 11系统的电脑 克隆WIN NT3.51-4.0系统的硬盘
  • ¥15 perl MISA分析p3_in脚本出错
  • ¥15 k8s部署jupyterlab,jupyterlab保存不了文件
  • ¥15 ubuntu虚拟机打包apk错误
  • ¥199 rust编程架构设计的方案 有偿
  • ¥15 回答4f系统的像差计算
  • ¥15 java如何提取出pdf里的文字?