登录
注册
论坛
空间
帮助
会员
界面
简洁版本
在线
微软BI开拓者
数据仓库专区
ETCL设计
看看我的数据ETL,请多指点!
数据库专区
SQL Server管理
SQL Server开发
SQL Azure云数据库
商业智能综述区
BI探讨
BI项目管理
数据仓库专区
ETCL设计
SSIS使用与管理
SSIS二次开发
多维分析专区
多维建模
SSAS配置管理
MDX
SSAS二次开发
数据挖掘专区
数据挖掘建模
DMX
DM应用开发
前端应用专区
SharePoint Excel PowerPivot
SQL Server Reporting Services
PerformancePoint及其相关产品
其他
站务
灌水区
培训相关
求职招聘区
3
/ 3 页
1
2
3
跳转
页
查看:
16859
看看我的数据ETL,请多指点!
reasoncool
个人空间
组别:
新手上路
性别:
来自:
积分:
2
帖子:
17
注册:
2007-10-19
2007-10-24 17:28
|
只看楼主
树型
|
收藏
|
小
中
大
21
回复:看看我的数据ETL,请多指点!
我建了一个事实表 十多个维度表 这些表大部分都是周期更新的(一个小时)
事实表字段都是int 都是维度标的外键
维度表不超过5个字段
发送短消息
查看公共资料
查找该会员全部帖子
UID:
848
精华:
0
威望:
0
金钱:
2.15 元
ProSrv-:
0
状态:
离线
一笑不倾城
echo
个人空间
组别:
版主
性别:
来自:
北京
积分:
88
帖子:
238
注册:
2007-08-31
2007-10-24 17:35
|
树型
|
收藏
|
小
中
大
22
回复: 看看我的数据ETL,请多指点!
引用:
原帖由
reasoncool
于 2007-10-24 17:25:00 发表
ip库是原始数据
我也觉得设计的有问题 我没弄过数据仓库 边学边弄
现在才一亿数据 怕以后崩溃
数据仓库是只进不出的,只要有足够的空间就可以了。我做的项目里一个月的数据就好几千万,不必担心。
关于地区表的设计,我觉得你可以把ip和地区合成一张表。但是你的ip段的数据的具体情况我不清楚,不知道是不是像我刚才举得例子那样。
发送短消息
查看公共资料
查找该会员全部帖子
UID:
537
精华:
1
威望:
3
金钱:
88.35 元
ProSrv-:
0
状态:
离线
The
谭东
个人空间
组别:
管理员
性别:
来自:
湖南
积分:
82
帖子:
298
注册:
2007-04-09
2007-10-29 17:23
|
树型
|
收藏
|
小
中
大
23
回复:看看我的数据ETL,请多指点!
可以提考虑使用表分区
发送短消息
查看公共资料
查找该会员全部帖子
UID:
9
精华:
5
威望:
18
金钱:
82.45 元
ProSrv-:
0
状态:
离线
thethethethethethe@hotmail.com
158587432
zh2005jie
个人空间
组别:
新手上路
性别:
来自:
积分:
0
帖子:
4
注册:
2007-06-18
2007-11-03 18:51
|
树型
|
收藏
|
小
中
大
24
回复:看看我的数据ETL,请多指点!
能写语句实现的话最好不要用工具。
发送短消息
查看公共资料
查找该会员全部帖子
UID:
171
精华:
0
威望:
0
金钱:
0.4 元
ProSrv-:
0
状态:
离线
lanxing2210
Ryan
个人空间
组别:
新手上路
性别:
来自:
广东广州
积分:
24
帖子:
31
注册:
2007-05-10
2008-07-30 16:13
|
树型
|
收藏
|
小
中
大
25
回复:看看我的数据ETL,请多指点!
10W数据 1h 太久了吧
我的 BLOG: http://lanxing2210.bokee.com/
发送短消息
查看公共资料
查找该会员全部帖子
UID:
69
精华:
0
威望:
0
金钱:
23.8 元
ProSrv-:
0
状态:
离线
xiexin_2210@163.com
xiexin_2210@
fengglory
HongfenG
个人空间
组别:
版主
性别:
生日:
1980-3-2
来自:
上海
积分:
27
帖子:
111
注册:
2007-09-29
2009-08-04 15:45
|
树型
|
收藏
|
小
中
大
26
回复:看看我的数据ETL,请多指点!
要是用ETL工具,十万条数据,不需要1个小时!在ETL的过程中,尽量不使用游标
血染的风彩
发送短消息
查看公共资料
查找该会员全部帖子
UID:
748
精华:
0
威望:
0
金钱:
27.4 元
ProSrv-:
0
状态:
离线
fx_love_gll@hotmail.com
32521083
<<
上一主题
|
下一主题
>>
3
/ 3 页
1
2
3
跳转
页
论坛跳转...
数据库专区
SQL Server管理
SQL Server开发
SQL Azure云数据库
商业智能综述区
BI探讨
BI项目管理
数据仓库专区
ETCL设计
SSIS使用与管理
SSIS二次开发
多维分析专区
多维建模
SSAS配置管理
MDX
SSAS二次开发
数据挖掘专区
数据挖掘建模
DMX
DM应用开发
前端应用专区
SharePoint Excel PowerPivot
SQL Server Reporting Services
PerformancePoint及其相关产品
其他
站务
灌水区
培训相关
求职招聘区
内务
服务测试区
我的主题
我的帖子
我的精华
我的空间
帖子标题
空间日志
相册标题
作 者
我的主题
我的帖子
我的附件
我的精华
我的空间