loader

Zalety implementacji in-memory w hurtowniach danych

Posiadając już dane zmagazynowane w jednym miejscu, zaczęto zastanawiać się, jak najsprawniej odczytywać je z dysków, na których były przechowywane. Kluczowym elementem był czas odczytu dużych ilości danych wykorzystywanych w analizach. Optymalizowano wiec organizację danych oraz metody dostępu do nich. Jednym z przykładów była organizacja danych w tzw. „column storage”, gdzie zamiast sekwencyjnego ułożenia kolejnych rekordów, dane są uporządkowane według wartości poszczególnych pól. Jednak najskuteczniejszą i najpopularniejszą metodą szybkiego dostępu do analitycznych danych okazały się wielowymiarowe bazy danych (OLAP – ang. On Line Analytical Processing).

Równolegle stale zwiększano szybkość dostępu do danych na poziomie sprzętowym. Dane były także skuteczniej rozmieszczane na dyskach, indeksowane, dzielono je na sekcje, czyli klastrowano czy przygotowywano coraz sprawniej funkcjonujące macierze. W celu zwiększenia wydajności wykorzystywano także między innymi pamięć podręczną pośredniczącą w wymianie danych z dyskami (tzw. cache).

Dane można jednak przechowywać w miejscach, które same z siebie będą wpływały na zwiększenie szybkości pracy z nimi. Takim alternatywnym wobec dysku miejscem magazynowania danych jest pamięć operacyjna.

Pełna treść artykułu dostępna jest na naszej stronie www.

author avatar
Codec
Codec jest europejskim liderem w zakresie usług doradczych i wdrażania rozwiązań wspierających efektywność organizacji. Pełniąc rolę ogniwa łączącego strategię, controlling i nowoczesne technologie wspieramy naszych klientów w osiąganiu ich celów.Rozwiązania oferowane przez Codec umożliwiają podejmowanie decyzji opartych na solidnych informacjach oraz zarządzanie wydajnością korporacji. Oferujemy rozwiązania dla każdego poziomu cyklu zarządzania wydajnością: od zarządzania strategią, poprzez planowanie, budżetowanie, do generowania raportów i analiz realizacji. Służymy wiedzą i doświadczeniem w zakresie konsolidacji finansowej i zarządczej. Rozwiązania analizują dane i informacje na wskroś przedsiębiorstwa. Dostarczane rozwiązania i usługi w zakresie Business Intelligence (rozwiązania raportowe, karty wyników, hurtownie danych, zapewnienie jakości danych), są wyjątkowe w branży, zarówno pod kątem wydajności i funkcjonalności, jak również unikatowej w skali rynku metodzie wizualizacji informacji. Rozwiązania dają wiele możliwości maksymalnego zaangażowania w pracę użytkowników oraz przynoszą podstawy do szybkiego osiągania zwrotu z inwestycji. Firmy ze wszystkich dziedzin gospodarki używaja naszych rozwiazań dla uzyskania pełnego dostępu do informacji, które są niezbędne do podejmowania trafnych decyzji. Nasze rozwiązania mają charakter kompleksowy: dostarczamy oprogramowanie, merytoryczne konsultacje biznesowe oraz informatyczne, obsługę, szkolenie i wsparcie. Oprócz standardowego wsparcia „on-site”, dostarczamy wsparcie zdalne poprzez scentralizowane centrum konsultingowe. Założony w 1985 Codec zrealizował projekty u ponad 700klientów. Posiadamy biura w Warszawie, Londynie, Dublinie (HQ), Belfaście, Cork oraz Kolonii.

1 2

O autorze