Zawartość
- Co to jest Dark Data?
- Różnica między Big Data a Dark Data
- Powody, dla których firmy gromadzą ciemne zasoby danych
- Ciemny potencjał danych
- Przewiduj popyt i rozwiązuj problemy
- Zbuduj mądrzejszy łańcuch dostaw
- Poprawa jakości produktu dzięki opiniom klientów
- Wniosek
Źródło: Agsandrew / Dreamstime.com
Na wynos:
Ciemne dane to dane, które nigdy nie ujrzą światła dziennego, ale te długo ignorowane dane mogą być przydatne dla organizacji.
Istnieją dwa sposoby na sprawdzenie wpływu ciemnych danych w świecie dużych zbiorów danych:
- Jako możliwości ukryte w big data
- Ponieważ ryzyko stanowią ciemne dane
Prawie wszystkie firmy przechowują ciemne dane dla różnych okresów czasu, bez żadnej analizy. Robiąc to, tracą możliwość zdobycia wglądu, jaki mogłyby ujawnić niezanalizowane dane. Przechowywanie ciemnych danych przez tak długi czas wiąże się również z wieloma zagrożeniami, takimi jak ryzyko prawne, finansowe, reputacyjne i utrata przewagi konkurencyjnej. Firmy muszą lepiej wykorzystywać swoje ciemne repozytorium danych, nie tylko w celu poprawy biznesowej, ale także w celu zminimalizowania ryzyka.
Co to jest Dark Data?
Prawie każda firma gromadzi ogromne ilości danych z zamiarem uzyskania lepszego wglądu w takie zachowania, jak zachowanie klientów, procesy opracowywania oprogramowania, terminy spotkań i produktywność, a także użyteczność strony internetowej. Te informacje pomagają firmom reagować na dostarczanie ulepszonych produktów i usług. Zaskakujące może być jednak to, że duży procent danych pozostaje niewykorzystany przez długi czas. Firmy po prostu przechowują go bez przeprowadzania analizy. Ta kategoria danych jest znana jako ciemne dane, a rozmiar tej kategorii jest ogromny. IDC szacuje, że 90% wszystkich wygenerowanych danych to ciemne dane - to znacząca obserwacja. Gartner definiuje ciemne dane jako,
„Informacje, które organizacje zasobów gromadzą, przetwarzają i przechowują podczas regularnych działań biznesowych, ale generalnie nie wykorzystują ich do innych celów (na przykład do analiz, relacji biznesowych i bezpośredniego zarabiania). Podobnie jak ciemna materia w fizyce, ciemne dane często obejmują wszechświat zasobów informacyjnych większości organizacji. Dlatego organizacje często przechowują ciemne dane wyłącznie w celu zachowania zgodności. Przechowywanie i zabezpieczanie danych zwykle wiąże się z większymi kosztami (a czasem większym ryzykiem) niż wartością ”.
Jakie dane pozostaną niezanalizowane? Stwierdzono, że następujące kategorie danych kwalifikują się do kategorii ciemnych danych:
- Surowe dane wejściowe z ankiety
- Dane klienta
- Poprzednie dane pracownika
- Sprawozdania finansowe
- rozmowy
- Transkrypcje czatu
- Transkrypcje call center
- Dane konta
Różnica między Big Data a Dark Data
Ciemne dane to podzbiór dużych zbiorów danych. Tak więc gromadzone są dwie części dużych danych: analizowane i niezanalizowane. Niezanalizowane dane to ciemne dane. Co ciekawe, niezanalizowane dane stanowią największą część dużych zbiorów danych.
Powody, dla których firmy gromadzą ciemne zasoby danych
Podana powyżej lista typów danych może potencjalnie zapewnić firmie dużą wartość. Jednak zaskakujące jest to, że leżą bez opieki. Jest tego wiele przyczyn, ale najważniejszy wydaje się brak inwestycji. Poniżej podano kilka powodów, dla których gromadzi się ciemna baza danych.
Nie możesz poprawić swoich umiejętności programistycznych, gdy nikt nie dba o jakość oprogramowania.
Powód ten związany jest z brakiem inwestycji. Jeśli gromadzenie danych odbywa się za pomocą technologii, które nie wchodzą ze sobą w interakcje, uniemożliwia to organizacji stworzenie kompleksowej polityki danych. Wiele organizacji z przestarzałymi technologiami ma trudności z integracją danych zebranych z różnych źródeł, takich jak zapisy rozmów na czacie w centrum telefonicznym, dane o kliknięciach witryn i dane z konferencji wideo. Aby przetwarzać i integrować różne formaty, potrzebujesz odpowiedniej technologii.
Ciemny potencjał danych
Nie jest geniuszem zrozumieć, że jeśli 90% dużych zbiorów danych to ciemne dane, potencjalnie jest to kraina nieodkrytych, zaniedbanych możliwości. Jak wskazują powyższe powody, firmy nie wykorzystują ciemnych danych, ponieważ oferują niewielką wartość, ale z powodu własnych ograniczeń. Tak więc ustalono, że ciemne dane mają duży potencjał. Spróbujmy zrozumieć ten potencjał przy pomocy sektora produkcyjnego.
Według badań Frost & Sullivan „Internet przedmiotów, Internet usług, big data i zintegrowany przemysł wywrą decydujący wpływ na wszystkie sekcje łańcucha wartości produkcji.” Sektor produkcyjny otrzymuje cenne dane z następujących elementów:
- Dzienniki maszyn
- Czujniki sprzętowe
- Telematyka produktu
- Strumień kliknięć konsumentów
- Media społecznościowe
Przewiduj popyt i rozwiązuj problemy
Poprzez dokładną analizę danych dotyczących kliknięć klientów i uzyskanie telematyki produktu, firmy mogą dokładnie prognozować popyt i odpowiednio reagować poprzez optymalizację podaży towarów. Firmy mogą również rozwiązywać problemy, izolując je za pomocą ciemnych danych generowanych przez czujniki i telematykę.
Zbuduj mądrzejszy łańcuch dostaw
Aby dokładnie znać czas i wielkość popytu oraz odpowiednio reagować na wymagania, firmy potrzebują inteligentnego i solidnego łańcucha dostaw. Jednym ze sposobów jest uzyskanie szczegółowej informacji o poszczególnych elementach łańcucha dostaw. Szczegółowe informacje umożliwiają firmom uzyskanie jakości oraz dostawy na czas. I tylko ciemne dane mogą dostarczyć szczegółowych informacji o łańcuchu dostaw.
Poprawa jakości produktu dzięki opiniom klientów
W tych zmieniających się czasach klient nie jest już kimś, kto po prostu konsumuje produkty. W pewnym sensie klient jest ambasadorem marki, który może promować produkt za pomocą ustnych poleceń, poleceń i mediów społecznościowych. Bardzo ważne jest, aby zespoły zarządzające produktem, projektanci i inżynierowie wykorzystali opinie klientów i poprawili jakość produktu. Ciemne dane mogą pomóc firmom produkcyjnym, zapewniając 360-stopniowy widok produktu i jego wyglądu na rynku. Co więc może zrobić firma?
- Mają dobrze zaprojektowane ramy analityczne, które wykorzystują ciemne dane i zapewniają dostęp do tych ram wszystkim zainteresowanym stronom.
- Skróć nieplanowane, nieprzewidziane przestoje w rozwoju produktu za pomocą danych z czujników i telematyki, które mogą przewidywać nieprawidłowe działanie lub awarie produktu.
- Zintegruj telematykę z mediami społecznościowymi, aby informacje zwrotne od klientów były rejestrowane w czasie rzeczywistym, a dane przesyłane do odpowiedniego działu.
- Wykorzystaj dane, aby usprawnić funkcje produktu w zwinny sposób.
Wniosek
Potencjał ciemnych danych jest niewątpliwy. Ale firmy muszą również pamiętać o ryzyku związanym z nieograniczonym przechowywaniem i niewłaściwą obsługą ciemnych danych. Ciemne dane mogą zawierać poufne informacje, a każdy przypadkowy lub umyślny wyciek informacji może oznaczać problemy. Firmy muszą mieć dobre technologie znakowania i strukturyzacji danych, aby dane były identyfikowane i kategoryzowane. Jest to konieczne, nawet jeśli nie zamierzają analizować tego pod kątem swojej działalności. W przeciwnym razie może wkrótce dojść do problemów finansowych, regulacyjnych, utraty przewagi konkurencyjnej i problemów prawnych.