ITeye博客

baobaojinjin的博客

baobaojinjin · 共 169 篇文章

SQL Server的Bulk Insert

SQL Server的Bulk Insert语句可以将本地或远程的数据文件批量导入到数据库中,速度非常的快。远程文件必须共享才行,文件路径须使用通用约定(UNC)名称,即"\\服务器名或IP\共享名\路径\文件名"的形式。 * 1. 由于Bulk Insert通常配合格式化文件批量导入数据更方便,所以这里先介绍bcp工具导出格式化文件的方法。 bcp是SQL Server提供的命令行实用工具提供了数据的导出、导入、格式文件导出等功能,导出格式化文件的语法如下: Sql代码 bcp 数据库名.用户名.表名 format nul -- 这里的nul必须存在,用于不是导出和导入数据的情况下 -f …

2015-08-25 10:49 · sqlserver 学习 · 评论(0)

索引的最佳实践(转)

指导方针 要了解跑在数据库上的应用程序/用户 使用索引的主要目的是为了提高跑在数据库上应用程序读取和操作数据的速度,如果你不知道程序主要对数据库进行什么操作,索引优化就无从谈起。 当然,如果你全程参与了程序的设计和开发,那再好不过。但这种情况少之又少,大多数情况都是你直接接手数据库和应用程序,这时你就需要两步走的了解你所接手的东西-通过外部和内部。 外部方法包括从用户那里了解程序相关的信息,观察他们使用程序的过程,阅读用户文档和交接文档。 内部方法是去看程序本身对数据库产生的操作。比如说Activity Monitor, Profiler等工具,也可以使用sys.dm_db_index us…

2015-08-24 15:09 · sqlserver 学习 · 评论(0)

SqlServer处理大数据

这是给某数据中心做的一个项目,项目难度之大令人发指,这个项目真正的让我感觉到了,商场如战场,而我只是其中的一个小兵,太多的战术,太多的高层之间的较量,太多的内幕了。具体这个项目的情况,我有空再写相关的博文出来。 这个项目是要求做环境监控,我们暂且把受监控的设备称为采集设备,采集设备的属性称为监控指标。项目要求:系统支持不少于 10w 个监控指标,每个监控指标的数据更新 不大于20秒 ,存储延迟 不超过120秒 。那么,我们可以通过简单的计算得出较理想的状态——要存储的数据为: 每分钟30w,每个小时1800w,也就是每天4亿3千两百万 。而实际,数据量会比这个大5%左右。(实际上大部分是信息…

2015-08-24 10:49 · sqlServer项目 · 评论(0)

SQL Server 链接服务器的安全

一.本文所涉及的内容(Contents) 本文所涉及的内容(Contents) 背景(Contexts) 安全设置(Security Settings) 实现效果:用户A能看见能使用,B用户不能看见这个链接服务器; 实现效果:用户A能看见能使用,B用户能看见但是没有权限使用; 总结 参考文献(References) 二.背景(Contexts) 当需要用远程服务器数据库和本地进行数据交互的时候(例如导数据等),我们通常会在本地创建一个远程服务器的数据库链接,关于创建创建链接服务器可以参考: SQL Server 创建链接服务器 ,但是我们很少去关注链接服务器的安全性问题。 为了控制链接服务器…

2015-08-21 11:30 · sqlserver 学习 · 评论(0)

SqlServer链接服务器

sqlserver如何创建链接服务器 遇到下列问题: 线上服务器A,中转服务器B,本地服务器C 数据在A上面,想在B上面操作类似 select * from [A].[database].table这样的SQL,不用去链接服务器,直接把处理结果导入B然后生成报表。 结果报错如下: 消息 7202,级别 11,状态 2,第 1 行 在 sys.servers 中找不到服务器 'A'。请验证指定的服务器名称是否正确。如果需要,请执行存储过程 sp_addlinkedserver 以将服务器添加到 sys.servers。 解决思路:问题很明显就是在B中没有服务A,奇怪了B上面的本地导入导出就可以…

2015-08-21 10:41 · sqlserver 学习 · 评论(0)

在T-SQL语句中访问远程数据库(openrowset/opendatasource/openquery)

1、启用Ad Hoc Distributed Queries 在使用openrowset/opendatasource前搜先要启用Ad Hoc Distributed Queries服务,因为这个服务不安全所以SqlServer默认是关闭的 启用Ad Hoc Distributed Queries的方法 SQL Server 阻止了对组件 'Ad Hoc Distributed Queries' 的 STATEMENT'OpenRowset/OpenDatasource' 的访问,因为此组件已作为此服务器安全配置的一部分而被关闭。系统管理员可以通过使用 sp_configure 启用 'Ad…

2015-08-20 08:47 · sqlserver 学习 · 评论(0)

解决SQL Server 阻止了对组件 'Ad Hoc Distributed Queries'

SQL Server 阻止了对组件 'Ad Hoc Distributed Queries' 的 STATEMENT'OpenRowset/OpenDatasource' 的访问,因为此组件已作为此服务器安全配置的一部分而被关闭。系统管理员可以通过使用 sp_configure 启用 'Ad Hoc Distributed Queries'。有关启用 'Ad Hoc Distributed Queries' 的详细信息,请参阅 SQL Server 联机丛书中的 "外围应用配置器 解决方法如下: 1.开启Ad Hoc Distributed Queries组件,在sql查询编辑器中执行如下语…

2015-08-19 17:35 · sqlserver 学习 · 评论(0)

批处理教程

第一章 批处理基础 第一节 常用批处理内部命令简介 批处理定义:顾名思义,批处理文件是将一系列命令按一定的顺序集合为一个可执行的文本文件,其扩展名为BAT或者CMD。这些命令统称批处理命令。 小知识:可以在键盘上按下Ctrl+C组合键来强行终止一个批处理的执行过程。 了解了大概意思后,我们正式开始学习.先看一个简单的例子! @echo off echo "欢迎来到非常BAT!" pause 把上面的3条命令保存为文件test.bat或者test.cmd然后执行, 他就会在屏幕上显示以下二行话: 欢迎来到非常BAT! 请按任意键继续. . . 这就是一个简单批处理文件了,这个批处理文件一共就用…

2015-08-14 17:12 · 批处理 · 评论(0)

数据类型优先级 (Transact-SQL)

SQL Server 2014 其他版本 <?XML:NAMESPACE PREFIX = [default] http://www.w3.org/1999/xhtml NS = "http://www.w3.org/1999/xhtml" ?> 当两个不同数据类型的表达式用运算符组合后,数据类型优先级规则指定将优先级较低的数据类型转换为优先级较高的数据类型。 如果此转换不是所支持的隐式转换,则返回错误。 当两个操作数表达式具有相同的数据类型时,运算的结果便为该数据类型。 SQL Server 对数据类型使用以下优先级顺序: 用户定义数据类型(最高) sql_varian t xml dat…

2015-08-13 15:49 · sqlserver 学习 · 评论(0)

SqlServer隐式转换问题

在SQL Server的应用开发过程(尤其是二次开发)中可能由于开发人员对表的结构不够了解,造成开发过程中使用了不合理的方式造成数据库引擎未按预定执行,以致影响业务.这是非常值得注意的.这次为大家介绍由于隐式数据类型转换而造成的死锁及相应解决方案. 现实中有些程序员/数据库开发者会根据数据库的处理机制实现一些应用,如抢座应用,可能会对事务中的查询加一些列的Hint以细化粒度,实现应用的同时使得影响最低,但也有可能因为一些小细节的欠缺而引发错误,从而造成糟糕的用户体验.如下面这个例子 生成测试数据 code create table testlock (ID varchar(10) prima…

2015-08-13 15:16 · sqlserver性能调优 · 评论(0)

插入大量数据时

插入大量数据时,尽量不要使用循环,可以使用CTE,如果要使用循环,也放到一个事务中 这点其实显而易见。SQL Server是隐式事务提交的,所以对于每一个循环中的INSERT,都会作为一个事务提交。这种效率可想而知,但如果将1000条语句放到一个事务中提交,效率无疑会提升不少。 打个比方,去银行存款,是一次存1000效率高,还是存10次100?下面,根据吉日的要求,补个例子,见代码1. CREATE TABLE dbo.TestInsert ( Number INT PRIMARY KEY ); --循环插入,不给力,我的笔记本45秒 DECLARE @index INT; SET @ind…

2015-08-12 14:16 · sqlserver 学习 · 评论(0)

软件版本

一个正规的软件产品少不了要有规范的命名,一个好的软件产品一定要有个规范的版本号,而在命名版本号时有一些约定俗成的规则,下面我来简单介绍下。 1.版本命名规范 软件版本号有四部分组成,第一部分为主版本号,第二部分为次版本号,第三部分为修订版 本号,第四部分为日期版本号加希腊字母版本号,希腊字母版本号共有五种,分别为base、alpha、beta 、RC 、 release 2.软件版本阶段说明 Base:此版本表示该软件仅仅是一个假页面链接,通常包括所有的功能和页面布局,但是 页面中的功能都没有做完整的实现,只是做为整体网站的一个基础架构。 Alpha :软件的初级版本,表示该软件在此阶段以实…

2015-08-12 11:34 · 软件版本 · 评论(0)

批量执行sql脚本

set localdir=%~dp0 set pwd=test osql -S (local) -U sa -P %pwd% -i %localdir%\01.mnis_v3_batch_createdata.sql pause

2015-08-11 17:52 · 批处理 · 评论(0)

批量删除文件

1.批处理脚本 set DaysAgo=-2 set file_a=*.txt set file_b=*.bak set LogPath=E:\test_del\ set FullBackupPath=E:\test_del\full_del\ set filename=D:\delete_old_backup.log echo --------------------begin delete files %Date% - %time%------------------------- >>%filename% FORFILES /P %LogPath% /M %file_a% /D %Da…

2015-08-11 17:48 · 批处理 · 评论(0)

SQL Server删除distribution数据库

在数据库服务器删除复制(发布订阅)后,如何删除掉数据库distribution呢?如果你通过SSMS工具去删除数据库distribution,你会发现根本没有删除选项。 下面介绍一下删除distribution的步骤 步骤1: 查看相关订阅服务器的信息,如果还存在对应的订阅服务器,从注册的服务器中删除订阅服务器名称 exec sp_helpsubscriberinfo ; go exec sp_dropsubscriber 'SubscriberName'; go 步骤2: 查看分发服务器的发布服务器的属性 exec sp_helpdistpublisher; 步骤3: 删除分发发布服务器 …

2015-08-10 16:53 · sqlserver管理 · 评论(0)