认真敲代码的李同学 2021-08-12 10:03 采纳率: 25%
浏览 32

如何加快数据处理效率

如果重数据库里面查询出来17000千条员工信息，员工信息中有一个特殊字段里面的值是用特殊符号分割，这个字段假设为“100@@35@@45”，分别代表为周末加班工资、每日加班工资、加班餐补。这时我们需要将这17000条数据处理好按部门分组给前端，需要显示的是：部门、部门周末加班支出、部门每日加班支出、部门加班餐补。怎么做才能快速处理这些数据，数据库指定 oracle

  • 写回答

3条回答 默认 最新

  • syyyyyyyyyyyyyyh 2021-08-12 10:24
    关注

    一万多条也不多啊，正常读切割就好

    评论

报告相同问题？

  • 数据仓库 大数据 apachhive hive 大数据 数据仓库
    2023-02-24 15:51
    回答 1 已采纳 是的，Apache Hive的分层就是指把不同维度的数据抽取出来，并根据不同的维度进行分类存放。通过这种方式，可以更好的管理数据，便于后续的查询和分析处理。
  • 数据科学与大数据技术和数据科学与大数据技术（智能信息处理） 大数据 有问必答
    2022-01-11 20:09
    回答 2 已采纳 学习的基础都是一样的，带括号就代表学习路线更倾向于智能信息处理，数据科学与大数据技术的方向有很多的，那个只是其中一个，出来后你也不一定会走那个路线，主要看自己的选择，就比如说软件工程专业的倾向于Jav
  • python数据处理 python 大数据 数据分析
    2023-03-07 18:50
    回答 3 已采纳 参考GPT和自己的思路，你可以使用pandas和numpy库来完成这个任务。以下是一个可能的解决方案： import os import pandas as pd # 指定文件夹路径 folder_
  • 我的《海量数据处理与大数据技术实战》出版啦！
    2020-08-28 01:21
    冰 河的博客 书中大数据处理实战案例篇章的内容是真正的企业级大数据实战内容，其可稍加修改便可以直接应用于企业大数据的生产环境中。 看到这里，小伙伴们是不是想入手一本了呢？《海量数据处理与大数据技术实战》已经在天猫、...
  • 运用matlab处理大数据 matlab
    2017-08-17 04:59
    回答 1 已采纳 X = one(1:1000); %坐标点X轴 Y = one(1:1000); %坐标点Y轴 NodeId = zero(); % 标号序列 NodeCount = 0; %某区间符合条件的个
  • 计算机视觉与大数据处理 大数据
    2022-03-25 18:04
    回答 2 已采纳 这个主要还是看自己的爱好吧，计算机视觉一般工业上用的比较多，大数据的话一般做数据分析的比较多。
  • 大数据离线数仓遇到工作瓶颈 大数据 数据仓库
    2022-08-06 14:55
    回答 2 已采纳 看你是要横向发展还是纵向发展了，如果继续大数据离线数仓的纵向发展工作，那么对各种数据库，nosql，olap的操作方式，每种工具底层原理都要比较熟悉，其实不管怎样，核心关注的都是时间复杂度和空间复杂度
  • 大数据中台、数据仓库、大数据平台、数据治理经验总结
    2022-02-28 17:47
    大数据中台包括数据接入、数据处理、数据服务和数据安全等多个层面，通过构建统一的数据标准和接口，使得业务部门可以便捷地获取和应用数据，提高数据价值的挖掘效率。 数据仓库是大数据处理中的关键组件，它是专门...
  • 在sql中多大的数据才算是大数据？ java mysql 数据库
    2022-03-31 17:24
    回答 4 已采纳 其实没有实际的标准明确定义多少数据量算大数据，不过阿里开发手册中建议，表数据超过500万条时，建议考虑分表，以防影响查询效率，不过我们公司也有单表超过几千万条的数据，效率确实不高，所以理论上百万级别以
  • 数据科学与大数据专业怎么学呀。 学习方法 考研 职场和发展
    2022-10-08 19:39
    回答 2 已采纳 按照学校的安排学吧。我也大二，虽然我也感觉学校的培养计划没啥用，但是考研要考，就按照学校的要求学，只不过可能学校的安排比较基础，你可以学习深一点的
  • 大数据离线数仓的学习路线是什么？ 大数据 数据仓库 有问必答
    2021-11-03 15:23
    回答 1 已采纳 Java或者python基础 hdfs zookeeper flume kafka hive mysql sqoop azkaban,离线数仓只是大数据一部分内容，发展方向这个不好说，你不能只靠这一个
  • 大数据时代投资统计数据处理技术探究.pdf
    2021-08-15 00:56
    因此，加强对投资统计大数据处理技术的研究，有助于提升统计数据的处理效率和质量，促进信息生成和应用价值的最大化。 投资统计数据的特征分析是研究中的一个重要环节。在投资系统中，数据可以分为联网直报房地产...
  • excel数据处理问题 大数据
    2022-07-26 14:54
    回答 2 已采纳 先用excel筛选功能出作废票据的数据行，然后选择整个列直接赋值0不就可以了 然后点击筛选，会把列变成下拉框一样选择，然后你勾选作废票据，它会显示所以作废票据，然后你把左边列全选赋值0
  • 大数据的误区：数据统计≠大数据
    2022-10-29 00:58
    大数据不同于数据统计，数据统计是基于已有数据的纵向归类，而大数据是基于对已有海量数据的处理，对还未产生的数据作出预测和推荐。 大数据的核心是人工智能，包括数据挖掘和机器学习等技术。通过这些技术，大数据...
  • 大数据时代下电力运营监控数据处理.pdf
    2021-08-15 08:49
    随着科技水平的飞速发展，我国已经迈入了大数据时代，数据处理能力成为了各行业和企业发展的关键资源。在这个背景下，电力行业作为国家经济发展的基础支撑，正面临着利用大数据进行运营监控数据处理的新挑战和机遇。...
  • 没有解决我的问题, 去提问

问题事件

  • 创建了问题 8月12日

悬赏问题

  • ¥15 两台交换机分别是trunk接口和access接口为何无法通信，通信过程是如何？
  • ¥15 C语言使用vscode编码错误
  • ¥15 用KSV5转成本时，如何不生成那笔中间凭证
  • ¥20 ensp怎么配置让PC1和PC2通讯上
  • ¥50 有没有适合匹配类似图中的运动规律的图像处理算法
  • ¥15 dnat基础问题,本机发出,别人返回的包,不能命中
  • ¥15 请各位帮我看看是哪里出了问题
  • ¥15 vs2019的js智能提示
  • ¥15 关于#开发语言#的问题：FDTD建模问题图中代码没有报错，但是模型却变透明了
  • ¥15 uniapp的h5项目写一个抽奖动画