Dear all,<br><br>I received a file from others which contains ~30 million lines and in size of ~500M. <br>I try read it with numpy.genfromtxt in ipython interactive mode. Then ipython crashed. <br>The data contains lat,lon,var1,year, the year ranges from 1001 to 2006. Finally I want to write the <br>
data to netcdf for separate years and feed them into the model. I guess I need a better way to do this?<br>anyone would be any idea is highly appreciated.<br><br><br>lon,lat,year,area_burned<br>-180.0,65.0,1001,0<br>-180.0,65.0,1002,0<br>
-180.0,65.0,1003,0<br>-180.0,65.0,1004,0<br>-180.0,65.0,1005,0<br>-180.0,65.0,1006,0<br>-180.0,65.0,1007,0<br clear="all"><br>thanks and cheers,<br><br>Chao<br>-- <br><div>***********************************************************************************</div>

<div>Chao YUE<br>Laboratoire des Sciences du Climat et de l&#39;Environnement (LSCE-IPSL)<br>UMR 1572 CEA-CNRS-UVSQ<br>Batiment 712 - Pe 119<br>91191 GIF Sur YVETTE Cedex</div>
<div>Tel: (33) 01 69 08 29 02; Fax:01.69.08.77.16<br></div>

<div>************************************************************************************</div><br>