今天面试官说现在公司有业务数据2000G,n个Excel 文件且字段个数不一样，提取有用信息。怎么用工具或程序处理，这块对大数据懂得不多，请问有没有好点解决方案
1条回答 默认 最新
- 2022-07-25 19:10回答 2 已采纳 阿里云负载均衡里面也有超时设置的，好像最大设置180秒，更大需要提交工单
- 2021-09-27 15:25回答 1 已采纳 在发送文件前，先把数据报的大小发送过去。接收端接收到数据后，记录这个数据报的大小（假设为SS），然后根据这个大小接收数据，当接收到一次数据后（假设接收大小为T），就从SS中减去T（如果SS小于T，那么
- 2021-09-02 14:23回答 2 已采纳 tomcat的默认并发量是150个，这个文档里有说明。tomcat是采用阻塞式的Socket通信，每个请求都需要创建一个线程处理，也可以说是150个线程。
- 2020-08-30 18:08主要为大家详细介绍了java导出大批量即百万以上数据的excel文件，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
- 2015-05-07 10:58回答 6 已采纳 先把数据写到文件（比如csv格式），上传到服务器，导入的SQL很简单（注意是服务器上文件路径） ``` BULK INSERT table1 FROM 'D:\mydata.csv' WITH
- 2022-10-22 22:56回答 2 已采纳 可以用eval把要执行的有规律的代码拼起来，用一个for就可以解决
- 2022-09-13 18:39回答 2 已采纳 分页同步。10w可能超内存了，或者你可以试试加大jvm内存
- 2023-09-12 14:14importExcel 方法接收一个 Excel 文件对象、批大小 batchSize 和线程数 threadCount 作为参数。首先，使用 ExcelReader 对象读取 Excel 文件，并计算出总行数和分片大小和数量；然后，创建一个固定数量的线程池，...
- 2019-01-29 16:24回答 6 已采纳 首先你的request最好设置一下超时，如果某个链接长时间没响应，你就会阻塞在那里；然后得百分百确认你的xpath是正确的，且是匹配里面所有url的，这个地方可以打个日志，看看是阻塞在某次循环了，还是
- 2022-12-18 16:40回答 1 已采纳 ChatGPT尝试为您解答，仅供参考在转换大量数据时，使用 UPDATE 语句或存储过程可能会很慢。 如果您正在使用 MySQL 数据库，则可以使用 "LOAD DATA INFILE" 语句加载数据
- 2015-07-18 16:17回答 5 已采纳 使用同步机制 进程中线程同步的四种常用方式： 1、 临界区（CCriticalSection） 当多个线程访问一个独占性共享资源时，可以使用临界区对象。拥有临界区的线程可以访问被保护起来的资源或
- 2023-08-30 07:26藏经阁-大批量处理excel文件到ODPS中方案.pdf
- 2015-04-28 08:28回答 4 已采纳 如果是不同表的话，可以拆分用多线程处理，减少等待时间。另外页面刷新影响不到后台线程执行吧
- 2022-07-23 22:29youandme520的博客 前面提供了一种excel文件上传服务器后端处理的防范。但是指适用于10m以内的文件使用。普通小文件前端使用了vue带ajaxPost将文件转码base64Str字符串的方式来传送文件到后端服务器上。这里是将excel格式文件转换层xml...
- 2021-02-23 20:38刘妮卡的博客 Its relatively simple to use, but requires a basic understanding of the parts of an Excel file (or willingness to learn). The advantage provided is that you can read an XLS with a relatively small ...
- 没有解决我的问题, 去提问
悬赏问题
- ¥30 win c++ socket
- ¥15 CanMv K210开发板实现功能
- ¥15 C# datagridview 栏位进度
- ¥15 vue3页面el-table页面数据过多
- ¥100 vue3中融入gRPC-web
- ¥15 kali环境运行volatility分析android内存文件，缺profile
- ¥15 写uniapp时遇到的问题
- ¥15 vs 2008 安装遇到问题
- ¥15 matlab有限元法求解梁带有若干弹簧质量系统的固有频率
- ¥15 找一个网络防御专家，外包的