SQLSERVER大数据处理---求教
程序员文章站
2022-06-14 10:59:30
...
原先的数据结构是12个库 每个库里有100张表 以QQ群的聚簇方式存储
我做成新的结构,生成新关系表,预计是14亿数据(估计达不到也差不多),我想以QQ号大小来判断分别插入不同的库和表,有15个库,每个库100张表,总共1500张表,每张表存100万条数据,表已经生成了(图3),现在是插入数据,我昨天用PHP处理了下,一张表跑了将近15分钟,这样太慢,有没有更好的办法
这个是昨天做的程序,哪位大侠给点意见优化下,大神们帮帮忙,刚入职给的这个活儿,第三天了,做不出来要走人了
回复内容:
原先的数据结构是12个库 每个库里有100张表 以QQ群的聚簇方式存储
我做成新的结构,生成新关系表,预计是14亿数据(估计达不到也差不多),我想以QQ号大小来判断分别插入不同的库和表,有15个库,每个库100张表,总共1500张表,每张表存100万条数据,表已经生成了(图3),现在是插入数据,我昨天用PHP处理了下,一张表跑了将近15分钟,这样太慢,有没有更好的办法
这个是昨天做的程序,哪位大侠给点意见优化下,大神们帮帮忙,刚入职给的这个活儿,第三天了,做不出来要走人了
推荐阅读
-
mssql sqlserver if exists 用法大汇总
-
SqlServer 数据库 三大 范式
-
大容量csv快速内导入sqlserver方法
-
SqlServer性能优化,查看CPU、内存占用大的会话及SQL语句
-
大容量csv快速内导入sqlserver的解决方法(推荐)
-
在windows server2008 R2企业版上安装 SqlServer 2008错误,请大
-
SQLSERVER大数据处理---求教
-
求教在sqlserver远程连接时出现这个有关问题是什么原因呢
-
发布一个轻量级的SQLSERVER数据处理库 DotNetSQL
-
关于SqlServer四大排名函数NTILE()函数的问题