关闭 x
IT技术网
    技 采 号
    ITJS.cn - 技术改变世界
    • 实用工具
    • 菜鸟教程
    IT采购网 中国存储网 科技号 CIO智库

    IT技术网

    IT采购网
    • 首页
    • 行业资讯
    • 系统运维
      • 操作系统
        • Windows
        • Linux
        • Mac OS
      • 数据库
        • MySQL
        • Oracle
        • SQL Server
      • 网站建设
    • 人工智能
    • 半导体芯片
    • 笔记本电脑
    • 智能手机
    • 智能汽车
    • 编程语言
    IT技术网 - ITJS.CN
    首页 » SQL Server »SQL Server海量数据导入的最简洁的操作方法

    SQL Server海量数据导入的最简洁的操作方法

    2010-06-28 14:41:00 出处:ITJS
    分享

    此文章主要向大家讲述的是SQL Server海量数据导入的最简洁的操作方法,我前两天在相关网站看见SQL Server海量数据导入的最简洁的操作方法的资料,觉得挺好,就拿出来供大家分享。

    该文主要讲解了实现SQL Server海量数据导入的最快的方法,其更多内容请参考下文:最近做某项目的数据库分析,其主要目的要实现对海量数据的导入问题,就是最多把200万条数据一次导入sqlserver中,假如使用普通的insert语句。

    这篇论坛文章(赛迪网技术社区)详细讲解了SQL Server海量数据导入的最快方法,更多内容请参考下文:

    最近做某项目的数据库分析,要实现对海量数据的导入问题,就是最多把200万条数据一次导入sqlserver中,假如使用普通的insert语句进行写出的话,恐怕没个把小时完不成任务,先是考虑使用bcp,但这是基于命令行的,对用户来说友好性太差,实际不大可能使用;

    最后决定使用BULK INSERT语句实现,BULK INSERT也可以实现大数据量的导入,而且可以通过编程实现,界面可以做的非常友好,它的速度也很高:导入100万条数据不到20秒中,在速度上恐怕无出其右者。

    但是使用这种方式也有它的几个缺点:

    1.需要独占接受数据的表

    2.会产生大量的日志

    3.从中取数据的文件有格式限制

    但相对于它的速度来说,这些缺点都是可以克服的,而且你假如愿意牺牲一点速度的话,还可以做更精确的控制,甚至可以控制每一行的插入。

    对与产生占用大量空间的日志的情况,我们可以采取在导入前动态更改数据库的日志方式为大容量日志记录恢复模式,这样就不会记录日志了,导入结束后再恢复原来的数据库日志记录方式。

    具体的一个语句我们可以这样写:

    alter database taxi  set RECOVERY BULK_LOGGED  BULK INSERT taxi..detail FROM 'e:out.txt'  WITH (    DATAFILETYPE = 'char',    FIELDTERMINATOR = ',',    ROWTERMINATOR = 'n',   TABLOCK  )  alter database taxi  set RECOVERY FULL  

    这个语句将从e:out.txt导出数据文件到数据库taxi的detail表中。

    以上的相关内容就是对SQL Server海量数据导入的最快方法的介绍,望你能有所收获。

    SQL Server海量数据导入的最快方法

    上述的相关内容就是对SQL Server海量数据导入的最快方法的描述,希望会给你带来一些帮助在此方面。

    上一篇返回首页 下一篇

    声明: 此文观点不代表本站立场;转载务必保留本文链接;版权疑问请联系我们。

    别人在看

    电脑屏幕不小心竖起来了?别慌,快捷键搞定

    Destoon 模板存放规则及语法参考

    Destoon系统常量与变量

    Destoon系统目录文件结构说明

    Destoon 系统安装指南

    Destoon会员公司主页模板风格添加方法

    Destoon 二次开发入门

    Microsoft 将于 2026 年 10 月终止对 Windows 11 SE 的支持

    Windows 11 存储感知如何设置?了解Windows 11 存储感知开启的好处

    Windows 11 24H2 更新灾难:系统升级了,SSD固态盘不见了...

    IT头条

    Synology 更新 ActiveProtect Manager 1.1 以增强企业网络弹性和合规性

    00:43

    新的 Rubrik Agent Cloud 加速了可信的企业 AI 代理部署

    00:34

    宇树科技 G1人形机器人,拉动一辆重达1.4吨的汽车

    00:21

    Cloudera 调查发现,96% 的企业已将 AI 集成到核心业务流程中,这表明 AI 已从竞争优势转变为强制性实践

    02:05

    投资者反对马斯克 1 万亿美元薪酬方案,要求重组特斯拉董事会

    01:18

    技术热点

    大型网站的 HTTPS 实践(三):基于协议和配置的优化

    ubuntu下右键菜单添加新建word、excel文档等快捷方式

    Sublime Text 简明教程

    用户定义SQL Server函数的描述

    怎么在windows 7开始菜单中添加下载选项?

    SQL Server 2016将有哪些功能改进?

      友情链接:
    • IT采购网
    • 科技号
    • 中国存储网
    • 存储网
    • 半导体联盟
    • 医疗软件网
    • 软件中国
    • ITbrand
    • 采购中国
    • CIO智库
    • 考研题库
    • 法务网
    • AI工具网
    • 电子芯片网
    • 安全库
    • 隐私保护
    • 版权申明
    • 联系我们
    IT技术网 版权所有 © 2020-2025,京ICP备14047533号-20,Power by OK设计网

    在上方输入关键词后,回车键 开始搜索。Esc键 取消该搜索窗口。