我需要将一个一千多万的数据导入到datatable中，可是导入8388608行之后就报异常，outofmemory，csdn上说datatable最大容量可以达到一千六百多万条，我算了下正好是8388608的两倍，不知道为什么只能填充容量的一半
4条回答
Neoze 2015-11-19 09:48关注要知道每条数据的数据量是不一样的，不知道为什么要把这么多数据导出一起处理，这种方法是极其不合理的，读取写入都很慢，而且极容易崩溃，最好是分批次进行处理
解决 无用评论 打赏举报
分享
- 2025-01-04 00:17一键难忘的博客 在物联网中，传感器通常用于采集环境数据，如温度、湿度、压力等，这些数据会通过网络传输至中央处理系统进行分析和处理。在物联网系统中，实时数据采集与处理至关重要。MATLAB能够高效地与IoT设备连接，采集实时...
- 2019-05-23 22:54IT技术猿猴的博客 最近在做一个项目，涉及到将数据导出到excel，因此花了一天多时间，从网上查询了一些相关方法：下面做一下总结： 下面这个项目里面的步骤是本人已经成功应用到项目中的。 第一步骤：将NPOI DLL文件引用到项目中： ...
- 2021-04-07 10:05标题 "将SQL批量复制与LINQ-to-SQL数据上下文一起使用" 描述了如何在C#编程环境中，利用.NET Framework 4中的LINQ-to-SQL技术进行大规模数据的高效导入。这一主题对于处理大量数据的数据库操作尤其重要，因为它可以...
- 2025-09-09 00:50motor的博客 本文深入探讨了机器学习算法及其在企业数据科学中的应用。内容涵盖支持向量机（SVM）模型评估、K-Means聚类技术、神经...同时，文章还介绍了云计算（特别是AWS）在企业数据科学中的作用，并提供了技术平台选择的建议。
- 2025-08-15 16:22Liu Baihua的博客 EPPlus是一个流行的.NET库，它允许开发者创建和操作Excel文件，无需在服务器上安装Microsoft Office。EPPlus库使用Open Packaging Conventions (OPC)来创建或者读取现有的Excel文件（.xlsx格式）。
- 2011-11-05 23:557. **DataReader和DataSet的比较**：DataReader适用于大容量数据流式处理，而DataSet则适用于需要在内存中进行复杂数据操作的场景。 8. **XML支持**：ADO.NET还集成了对XML的支持，可以方便地在XML文档和DataSet...
- 2020-09-09 12:10子胤的博客 参考资料： ... ... ... 一、基本概念 Hash和红黑树是两种数据存储的方式。除了这两种存储方式，最常用的是线性结构存储，比如数组和链表List等...对于线性存储的数据，如果想检索一个数据，需要把所有数据都遍历一遍，然后找
- 2009-08-14 10:14- **DataReader**：提供一种高效的方式读取数据库中的数据，它是一个只进、只读的数据流，通常用于大容量数据的检索。 - **Transaction**：处理数据库事务，确保数据的一致性和完整性。 3. **数据访问流程** ...
- 2009-06-13 09:20SQL Server是微软公司推出的一款强大的关系型数据库管理系统，广泛应用于企业级数据存储、处理和分析。下面将详细阐述SQL Server的主要知识点。 1. **SQL Server基础** - 数据库概念：理解数据库的基本原理，包括...
- 2019-09-28 14:27anmei1912的博客 Expression构建DataTable to Entity 映射委托 1 namespace Echofool.Utility.Common { 2 using System; 3 using System.Collections.Generic; 4 using System.Data; 5 using Sy...
- 2019-08-06 12:29weixin_30872671的博客 概述：本文提供了在多层.NET应用程序中实施基于ADO.NET的数据访问层的指导原则。其重点是一组通用数据访问任务和方案，并指导你选择最合适的途径和技术（68张打印页）。 目录 ADO.NET简介 管理数据库链接 ...
- 2022-02-28 10:36tl110110tl的博客 在不使用EF获取IQueryable数据前提下，如何使用IPagedList进行分页。
- 2022-09-21 06:20SQL Server是微软公司推出的一款关系型数据库管理系统，广泛应用于企业级数据存储、管理和分析。它以其强大的性能、高可用性和安全性在IT行业中占据重要地位。本文将深入探讨SQL Server在数据库编程开发和ADO.NET...
- 2017-11-08 15:12weixin_34013044的博客 实现报表有很多种方式，最简单的就是直接用纸质写出来展示，这种方式不需要任何IT系统的支持，使用比较简便，但是一般只适用比较小的企业，如果企业稍大一些，数据量增大后，这种方式就显得力不从心，随着使用的不断...
- 2019-09-22 14:53acwy94512的博客 在这里我将试图考察一下目前.NET平台的下的Ajax框架，我也试图从中总结出来一种方法，使得你可以在众多基于.NET平台的Ajax框架和工具包中 找到你所合适的一种，同时也希望你在考察、预研和使用这些流行的这些Ajax-...
- 2021-03-31 03:596. **多线程**：对于大容量的存储系统，多线程技术可能用于提高并发性能。C#的System.Threading命名空间提供了Thread、Mutex、Semaphore等类，用于控制并发访问。 7. **UI设计**：MaxStoore可能有一个用户界面供...
- 2017-01-17 15:18Andrewniu的博客 近期帮朋友开发了一个小型WINFORM的软件，即在软件窗体中显示相关表格的数据。由于长时期未操作WINFORM了，有点手生，尤其是对于EXCEL表格的操作，在没有第三方控件辅助的基础上，更感到了吃力。 但所幸功夫不负有心...
- 2024-11-07 23:31.yuri的博客 数据库各表之间的关系图： 建立好数据库后可以在数据库中添加一些数据方便后面增删改查 （需要注意的是添加数据的时候设置有外键约束的字段需要根据你的依赖关系进行数据添加） 创建好数据库后需要通过Visual ...
- 2014-05-27 09:04空中海的博客 在每一代中，整个种群的适应度被评价，从当前种群中随机地选择多个个体（基于它们的适应度），通过自然选择和突变产生新的生命种群，该种群在算法的下一次迭代中成为当前种群。 光看定义，可能思路并...
- 没有解决我的问题, 去提问
