• 所有问题

    • c语言处理文件里的大数据

    c语言处理文件里的数据，一般是从文件读入，存入数组，然后进行操作。
    如果不知道文件里数据多少，无法确定数组开多大怎么办，是不是要用malloc动态存储？
    如果文件数据太大，超过内存，怎么处理数据？

    举报该问题
    推荐答案   推荐于2016-08-23
    　　C语言处理大数据一般有三种处理方法：
    　　1、分段处理，即无论文件多大，程序中使用的永远只是一小段部分，可以使用一个缓冲区，根据用户交互输入，分段的输出。
    　　2、使用内存文件映射，这是最常用的文件的处理方法，Linux和Windows都提供一种内存文件映射的机制，以Windows为例，可以调用 CreateFile()、 CreateFileMapping()以及 MapViewOfFile()三个函数来完成内存文件映射。
    　　3、使用数据库，借助SQL查询语言对大数据进行操作。
    温馨提示：答案为网友推荐，仅供参考
    其他回答
    第1个回答  2014-03-31
    只能分块处理了，读入一块、处理一块、存储一块，数据库就是这么干的。
    第2个回答  2014-03-31
    什么系统下？追问

    windows呀

    追答

    抱歉，那我就不知道了。。。

    相似回答
    c语言处理文件里的大数据答：说清楚点！最简单大文件分割成小文件，加缓存分批读取小文件进行处理，处理结果存储起来，再将每个小文件处理结果综合起来。当然具体问题具体分析，这是最基本的思路。借助工具的话，数据库，根据需求设计表，然后将文本文件导入数据库，为了处理速度，注意分表分区，检索语句也要注意效率问题。http://www.u...
    c语言文件处理:大数据排序,我知道用ftell,fwrite...归并排序,但如何实 ...答：如果你不想把硬盘搞坏，不要直接操作文件读写排序，大数据而且速度也会很慢。建议把文件数据读入到动态分配内存，再进行数据排序，排序完成后，再写入到文件，这样做速度性能快。按你代码那样不停读写硬盘来实现排序，是非常不好的方式，因为硬盘是比较慢的设备，导致程序排序起来非常慢，频繁读写硬盘对硬...
    处理大数据,读写大于4GB的文件,不要告诉我用内存映射的方法;答：写入时可通过WriteFile的lpOverlapped参数设置偏移值，能支持更大的文件。参数虽然多一点，可是总能解决你的问题。如果调用的地方很多，你可以把这几个函数封装一下，很多参数调用时都是一样的。希望对你有帮助。DWORD WINAPI GetFileSize(__in HANDLE hFile,__out_opt LPDWORD lpFileSizeHigh );BOOL...
    C语言用数组存储大型数据的算法答：void multiple(){int i=0;carry=0;while(i<=pa)/*i指向当前处理的元素a[i],每一轮用一个位与阶数p相乘*/ {a[i].b=a[i].b*p+carry;/*计算结果，要考虑来自低位的进位*/ carry=a[i].b/10000;/*计算进位*/ a[i].b=a[i].b%10000;/*计算余数*/ i++;...
    C语言大数据问题答：那你可以用long long 啊，在C++支持long long 是64位，话说long应该可以啊
    怎么用C语言代码实现超高精度的大数据除法运算?要求结果保留到小数点后...答：LEN + 10];char b[MAX_LEN + 10];int va[MAX_LEN + 10]; //被除数, an1[0]对应于个位int vb[MAX_LEN + 10]; //除数, an2[0]对应于个位int vc[MAX_LEN + 10]; //存放商，aResult[0]对应于个位//长度为 nLen1 的大整数p1 减去长度为nLen2 的大整数p2//结果放在p1 里，...
    用C语言实现求一个大数据如(2的63次方)的绝对值答：double 有效数字15位 MS VC++ 6.0 整型可以用 _int64 型 , 但也不能满足 2的64次方精度。include<stdio.h> include<math.h> int main(){ double y;y = pow(2,64);printf("y=%lf abs=%lf\n",y,fabs(y));y = -pow(2,64);printf("y=%lf abs=%lf \n",y,fabs(y))...
    大家正在搜
    c语言一般文件的处理过程c语言保存数据到文件c语言从文件中读取数据c语言将数据写入文件c语言打开文件读取数据c语言怎么将数据写入txt文档c语言怎么读取文件c语言保存文件c语言打开文件
    相关问题
    怎么用c语言处理大数据？
    c语言中怎么处理一个特别大的数据的运算
    【C语言】处理大量数据
    C语言中怎么实现大量数据的处理？？
    如何读取txt文件中的大数据
    处理txt大数据文件用编程语言可以快速地解决？
    C语言大数据问题
    处理大数据，读写大于4GB的文件，不要告诉我用内存映射的方法...