配列データのダウンロード

 いろいろと思うところありて、どうもぱぶめどの検索をあてにせずに解析した方がよさそうに思え、非常にブロードな条件に合致する75万件のデータをXMLフォーマットでダウンロード開始。
 データ転送速度が平均14 Mbsを越えているのに感激しつつ、データがすでに70 GBを越えてどこまで肥大するとも知れぬのに恐懼。NTFSのファイルの容量上限が2 TBであることは確認しているが実際のHDは残り240 GBしかない。万が一、ハードディスクの空き容量を使い切って起動ディスクの機能不全をきたすようでは大変な不都合が生じる。というより、これをデータベースに読み込んで、条件検索にかけるというような処理法はすでに破綻したとみるべきであろう。[XML]

本ブログではamazon associate広告を利用しています。