Czas i technologia wciąż przyspieszają, a dane, które zapisujemy, rosną wykładniczo. Tak więc dokładna definicja bardzo dużej bazy danych (VLDB) wciąż się zmienia wraz z nowymi postępami w sprzęcie i oprogramowaniu. Ale zamontowanie VLDB na nowym tablecie, a nawet laptopie, zazwyczaj nie nastąpi, przynajmniej jeszcze nie.
Jak duża jest bardzo duża baza danych?
Wiele autorytetów technologicznych debatuje nad faktycznym punktem wyjścia tego, co stanowi VLDB. Niektórzy twierdzą, że bazy danych mają 100 gigabajtów lub więcej. Inni twierdzą, że VLDB ma rozmiar co najmniej 1 terabajta (1000 GB). Można go również mierzyć liczbą i rodzajem złożonych zapytań i transakcji, które może obsługiwać. Ale niezależnie od dokładnej ilości, można śmiało powiedzieć, że VLDB zawiera ogromną ilość informacji, rozpowszechnianych w bardzo dużej liczbie krotek (wierszy bazy danych) i zajmuje ogromną przestrzeń dyskową w fizycznym systemie plików.
Wiesz, że masz do czynienia z VLDB, gdy sam jego rozmiar wymaga więcej pracy. Brak możliwości wykonania kopii zapasowej bazy danych w rozsądnym czasie oraz ograniczenia finansowe związane z powielaniem bazy danych do celów testowych to tylko kilka problemów, z którymi należy się uporać.
Kto korzysta z VLDB?
Wiele firm i organizacji korzysta z VLDB, w tym gminy, rządowi wykonawcy obrony, firmy badawcze i duże przedsiębiorstwa z branży finansowej. Doskonałym przykładem osoby, która regularnie wykorzystuje VLDB do swojej strategicznej przewagi, jest TAC, w pełni niezależna europejska grupa badawcza świadcząca usługi doradcze w międzynarodowych kwestiach gospodarczych i finansowych dla inwestorów finansowych, firm przemysłowych i organizacji wielostronnych. TAC buduje VLDB, głównie do własnego użytku wewnętrznego, ale niektóre zostały udostępnione publicznie w celach analitycznych monitorowania inwestycji zagranicznych i celów rozwojowych.
Inne firmy używają VLDB do porównywania danych, eksploracji danych, hurtowni danych, replikacji, zapytań, demonstracji i wielu dodatkowych funkcji. Obserwatorzy trendów technologicznych monitorują z nimi. Menedżerowie IT projektują i rozwijają się razem z nimi. Eksperci ds. badań i rozwoju oraz jednostki ds. innowacji śledzą wraz z nimi statystyki. A VLDB odgrywają coraz ważniejszą rolę w zapotrzebowaniu na spersonalizowane informacje w sieci WWW.
Jak więc zarządzać bardzo dużą bazą danych?
Historia David vs. Goliath często przychodzi na myśl, gdy ludzie odkrywają, że ich bazy danych zbliżają się do terabajta. Coraz trudniej jest alokować przestrzeń i przyspieszać zapytania. Tak więc to pozornie niewykonalne zadanie odzyskania przestrzeni i poprawy wydajności musi następnie zostać przydzielone ekspertowi, który ma wiedzę i narzędzia technologiczne, aby podbić tego giganta.
VLDB mogą być skutecznie kontrolowane przez odpowiedni typ systemu zarządzania bazami danych (DBMS); tj. specjalnie zaprojektowane oprogramowanie komputerowe (lub pakiet oprogramowania), które zapewnia interfejs między bazą danych a użytkownikiem końcowym, umożliwiając tworzenie, wyszukiwanie, aktualizację i administrowanie danymi. DBMS utrzymuje również bezpieczeństwo i integralność przechowywanych danych oraz ułatwia odzyskanie informacji w przypadku awarii systemu. Istnieją różne typy DBMS, ale zachowamy tę rozprawę na innym blogu w innym czasie.
Rozwój większości systemów zarządzania bazami danych jest niezwykle złożony i czasochłonny, wymaga ciągłych aktualizacji wraz z postępami w pamięci komputera, pamięci masowej, procesorach i sieciach. Bazy danych stale zwiększają swój rozmiar, zakres i wydajność, ponieważ twórcy oprogramowania starają się nadążać za wymaganiami związanymi ze wzrostem ilości nowoczesnych danych. Jak większość życia w XXI wieku, przebyliśmy długą drogę bardzo szybko i mamy dane, które to potwierdzają!
