pomalé načítavanie zo súboru

Zdravím, ide asi o toto: Mám rozsiahle - stovky MB - .asc súbory, kde sú len čísla, jedno číslo na riadok a hneď nový riadok.... je to surový výstup z AD prevodníka. No a chcem to načítať ako pole čísel do RAM. Som začiatočník, tak som použil niečo takéto: ( je tam pol milióna čísel-na skúšku)

#include <stdio.h>
#include <stdlib.h>
#define n 500000
static float Y1[n];
int main()
{
int i;
FILE *F1;
F1= fopen("C:\001.asc","r");
for(i=0;i<n;i++)
{
fscanf(F1,"%f\n",&Y1[i]);
}
fclose(F1);
return 0;
}

No pri 4MB súbore to načítava až 3sekundy. HDD je sata a DDR2. Ako by som to mohol urýchliť? Vďaka za pomoc

Myslim, ze sa to uz nebude dat, pri takom pocte cisel...

Ide o to, že ten 4MB súbor kopíruje do RAM 3 sek. A to je strašne dlho či nie?

Možno by nepatrne pomohlo mapovanie súboru (nie som si istý, opravte ma, ak sa mýlim) - http://msdn.microsoft.com/en-us/library/aa366556(VS.85).aspx
No v každom prípade, pri niekoľko 100 MB súbore ti to nenačíta za 10 sekúnd

On sa nielen kopíruje, ale každý znak sa musí aj skontrolovať, či zodpovedá formátu zadanému v scanf().
Najviac by si to zrýchlil tak, keby si z prevodníka vedel nejako získať dáta v binárnom formáte a nie textovom. Potom by ti na načítanie stačil iba jediný fread(), a rýchlosť by bola limitovaná iba rýchlosťou hdd - bežne niekoľko desiatok Mb/s. Bonus - v binárnom formáte by tie súbory zaberali menej miesta.
Mohol by si ich zmeniť na binárny formát aj dodatočne, ale oplatí sa ti to len ak plánuješ pracovať s jedným súborom viackrát.

imcold: Máš pravdu, niečo takéto som mal na mysli, no nevedel som to pomenovať. Po každom čísle je newline, ak by som ten odstránil, jednoduchým programom, potom by to bolo síce nečitateľné, ale nestačilo by zmeniť koncovku súboru na .bin a potom by som to z RAM už načítaval po 4bytových úsekoch-keďže ide o floaty? Neviem,lebo som z bin. nerobil, len s textovými. Ja totižto z toho HDD ten súbor potrebujem natiahnuť do RAM len raz a potom sa nad ním vykonáva veľa operácií. Chcel by som, aby to išlo ako pri kopírovaní vo wine, kde to je aj 30 MB/s.

už to behá, odstránil som \n, skonvertoval som ten .asc na .bin a načítal cez fread po 4 bytoch a dostal som sa na cca 30MB/s pri čítaní z HDD do RAM. diky za pomoc

das sem ten novy zdrojak rad by som sa pozrel

Takže tu je to len tak narýchlo:
mám už binárny súbor na danej ceste, zatiaľ najväčší súbor čo som mal obsahoval 15e6 čísel tak preto je ich tam práve toľko. Aby som to mohol kvázi odmerať,tak som tam vložil ten getchar().


#include <stdio.h>
#include <stdlib.h>
#define n 15000000
static float Y[n];
int main()
{
char z;
FILE *F;
F= fopen("C:/data.bin","rb");
printf("filling data to RAM will start\n");
z=getchar();
fread(Y,sizeof(float),n,F);
printf("data transfer completed\n");
z=getchar();
return 0;
}