欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  后端开发

SQLSERVER大数据处理---求教

程序员文章站 2022-05-23 15:41:48
...

原先的数据结构是12个库 每个库里有100张表 以QQ群的聚簇方式存储
SQLSERVER大数据处理---求教

我做成新的结构,生成新关系表,预计是14亿数据(估计达不到也差不多),我想以QQ号大小来判断分别插入不同的库和表,有15个库,每个库100张表,总共1500张表,每张表存100万条数据,表已经生成了(图3),现在是插入数据,我昨天用PHP处理了下,一张表跑了将近15分钟,这样太慢,有没有更好的办法
这个是昨天做的程序,哪位大侠给点意见优化下,大神们帮帮忙,刚入职给的这个活儿,第三天了,做不出来要走人了
SQLSERVER大数据处理---求教
SQLSERVER大数据处理---求教

回复内容:

原先的数据结构是12个库 每个库里有100张表 以QQ群的聚簇方式存储
SQLSERVER大数据处理---求教

我做成新的结构,生成新关系表,预计是14亿数据(估计达不到也差不多),我想以QQ号大小来判断分别插入不同的库和表,有15个库,每个库100张表,总共1500张表,每张表存100万条数据,表已经生成了(图3),现在是插入数据,我昨天用PHP处理了下,一张表跑了将近15分钟,这样太慢,有没有更好的办法
这个是昨天做的程序,哪位大侠给点意见优化下,大神们帮帮忙,刚入职给的这个活儿,第三天了,做不出来要走人了
SQLSERVER大数据处理---求教
SQLSERVER大数据处理---求教

相关标签: sqlserver php