读书人

[] 求千万数据量表的抽取方案

发布时间: 2013-07-01 12:33:04 作者: rapoo

[求助] 求千万数据量表的抽取方案
问题:B库C表数据抽到A库C表,C表结构相同,数据量接近5千万,类似如此的操作有20+张表。
1.安全起见,不允许试用DBLINK.
2.之前通过WebService实现,效率太低。
3.目前考虑B端查询数据生成CSV文件,zip压缩,调用A端接口修改A端状态表“准备状态”及“zip的URL”。A端扫描后下载ZIP,解压、解析入库。

请问有更好的方法吗?最好能提供资料(java)。谢谢! 邮箱:andsion@foxmail.com 数据抽取?java?
[解决办法]
应该是oracle吧,你的第三条可以改成import出来dump文件,不用csv,如果非用这种平面文件的话,改用ldr去做速度能快些

另外压缩平面文件可以考虑其他的压缩算法
[解决办法]
不可以导入导出么?

读书人网 >J2EE开发

热点推荐