=?ISO-8859-2?Q?Baza_danych_2_TB_-_uda_si=EA_w_PostgreSQL=3F?=
Tomasz Judycki - 06-07-2006 00:21
=?ISO-8859-2?Q?Baza_danych_2_TB_-_uda_si=EA_w_PostgreSQL=3F?=
Witam,
Rozważam pewien projekt, który będzie wymagał stworzenia bazy i wstawiania do
niej ok 10 mln rekordów dziennie, w każdy dzień roboczy, czyli ok 2 mld
rekordów rocznie. Jeden rekord nie będzie duży, ok. 1 KB, czyli baza w ciągu
roku będzie przyrastała o 2 TB. Trzeba będzie na niej wykonywać szereg analiz,
ale akurat to nie będzie problem, bo baza musi działać w typowych godzinach
roboczych, np. od 8 do 20stej, a analizy można wykonywać w nocy.
Czy ktoś z Was ma doświadczenia z tak dużą bazą pod PostgreSQLem? A jeśli nie
to może pod Oraclem, DB2 itp?
--
Wysłano z serwisu Usenet w portalu Gazeta.pl -> http://www.gazeta.pl/usenet/
hubert depesz lubaczewski - 06-07-2006 00:21
On 2006-07-05, Tomasz Judycki <tjudycki@WYTNIJ.gazeta.pl> wrote:
> roku będzie przyrastała o 2 TB. Trzeba będzie na niej wykonywać szereg analiz,
jeśli te analizy będą operowały na całości lub dużej części danych to
sugeruję zainteresowanie się bizgresmpp.
depesz
--
http://www.depesz.com/index.php/2006/06/22/choroby/
dap - 06-07-2006 00:21
> Czy ktoś z Was ma doświadczenia z tak dużą bazą pod PostgreSQLem? A jeśli nie
> to może pod Oraclem, DB2 itp?
No nie 2TB ale tez kilkadziesiat mln duzy wierszy i pod Oraclem dziala.
Ale nie wiem co chcesz uslyszec...
dap
--
,= ,-_-. =. gnu.org
((_/)o o(\_)) polanski.biz
`-'(. .)`-' xoops.pl
\_/
Artur - 11-07-2006 00:10
=?iso-8859-2?q?Re:_Baza_danych_2_TB_-_uda_si=EA_w_PostgreSQL=3F?=
Tomasz Judycki napisał(a):
> Witam,
>
> Rozważam pewien projekt, który będzie wymagał stworzenia bazy i wstawiania do
> niej ok 10 mln rekordów dziennie, w każdy dzień roboczy, czyli ok 2mld
> rekordów rocznie. Jeden rekord nie będzie duży, ok. 1 KB, czyli baza w ciągu
> roku będzie przyrastała o 2 TB. Trzeba będzie na niej wykonywać szereg analiz,
> ale akurat to nie będzie problem, bo baza musi działać w typowych godzinach
> roboczych, np. od 8 do 20stej, a analizy można wykonywać w nocy.
>
> Czy ktoś z Was ma doświadczenia z tak dużą bazą pod PostgreSQLem? A jeśli nie
> to może pod Oraclem, DB2 itp?
>
Tomek,
Pracowałem na DB2 z 8-węzłową bazą ok. 1.6 TB, na której były
wykonywane analizy danych (przekrojowe na całej bazie). Zapytania
raportowe wykonywały się bardzo szybko, ale baza podzielona była na
8 maszyn (architektura "shared-nothing"). Środowisko było dedykowane
pod analitykę, dane ładowane w trakcie pracy systemu, ale dużymi
paczkami.
Możesz napisać trochę więcej o założeniach? Czy system będzie
miał charakterystykę OLTP, czy hurtowni danych, a może tego i tego?
Dokładniej jak będą przeprowadzanie uaktualnienia danych? Wsadowo,
czy online-owo? Jakie będą założenia dotyczące wydajności analiz?
Czy archiwalne dane będą używane, czy tylko "będą" w bazie?
Projekt komercyjny, czy nie (dla projektu akademickiego pozyskasz
licencje bez kosztów, więc możesz szaleć z architekturą)?
Pozdrawiam,
-- Artur Wronski
zanotowane.pldoc.pisz.plpdf.pisz.pleffulla.pev.pl
|
Czy zna (obsługuje) ktoś program Iso Draw ?
MYSQL - kodowanie w ISO-PL
Kodowanie: z iso na utf
postgresql - int/int
postgresql Select count(*) czy raczej Select count(ID)
Postgres - replikcja master-master
Dopasowanie do "najlepszego" dopasowania :) [ PostgreSQL]
Połączenie bazy danych z wykonaniem polaczenia telefonicznego
[mssql] insert do tabeli na podstawie danych z innej tabeli
[MySQL] - Wstawianie aktualnej daty do bazy danych - PHP i MySQL
zanotowane.pldoc.pisz.plpdf.pisz.plnocnerozmowy.xlx.pl
Cytat
Decede mihi sole - nie zasłaniaj mi słonca.
Gdy kogoś kochasz, jesteś jak stworzyciel świata - na cokolwiek spojrzysz, nabiera to kształtu, wypełnia się barwą, światłem. Powietrze przytula się do ciebie, choćby był mróz, a ty masz w sobie tyle radości, że musisz ją rozdawać wokoło, bo się w tobie nie mieści
Hoc fac - tak czyń.
A tergo - od tyłu; z tyłu.
I czarne włosy posiwieją. Safona |
|
