[請教]大文件拷貝速度問題

moneynet

有一個比較大的物理文件filea,沒有key,需要取出小部分?jǐn)?shù)據(jù)到fileb(比如最近20天的數(shù)據(jù),大概占10%),

請問以下方法哪個更快?

1.rpg 事先查出文件rrn范圍,用rrn來讀文件,讀一條,寫一條至新文件.

2.sql
    insert into fileb
    select * from filea where date>'2006-07-10'

3. sql (事先查出文件rrn范圍)
    insert into fileb
    select * from filea where rrn(fileb)>900000

4.cpyf ,指定FROMRCD 參數(shù)

5.其他??

qingzhou

說效率應(yīng)該是1的方法通過RPG處理會好些；說簡便應(yīng)該是通過2的方法一條SQL語句就搞定。
3、4方法都得先走查詢記錄RRN的步驟后才能執(zhí)行，SQL會比CL命令更消耗系統(tǒng)資源些。

如果這個PF不是很夸張的話，還是用SQL語句來得簡單。不要把問題搞得太復(fù)雜。

moneynet

原帖由 qingzhou 于 2006-8-3 11:04 發(fā)表
說效率應(yīng)該是1的方法通過RPG處理會好些；說簡便應(yīng)該是通過2的方法一條SQL語句就搞定。
3、4方法都得先走查詢記錄RRN的步驟后才能執(zhí)行，SQL會比CL命令更消耗系統(tǒng)資源些。

如果這個PF不是很夸張的話，還是用SQL ...

超過100G吧,打算用4做了,謝謝.

胖有型

支持4，到底是IBM的內(nèi)部命令，效率應(yīng)該是最高的

qingzhou

建議LZ每個測試過去，然后看看哪個時間最節(jié)��？哈哈~~~

然后把情況說說。。。

coolk

如果這個文件很大的話，覺得采取1或者3比較好點！1中還可以采取分段多作業(yè)同時進(jìn)行！這就看的你需求了！^_^

[ 本帖最后由 coolk 于 2006-8-4 21:49 編輯 ]

fxf_china

下賭：4.cpyf ,指定FROMRCD 參數(shù)

胖有型

跟莊

hanyu

我以前測過，后來還是選的cpyf，大概每分鐘300兆左右，單CPU的情況下應(yīng)該cpyf最快了。

子樵

文件的記錄數(shù)應(yīng)該超過千萬了.用2,3,4的風(fēng)險都很高,機(jī)器差點跑都跑不完.
最好的方法是1,最重要的是前面有人提到的多進(jìn)程處理,充分利用了系統(tǒng)資源是一個合理的方案.其實還是量的問題,很多時候量大就是問題.