Imperatyw w chmurze - Co, dlaczego, kiedy i jak - Transkrypcja 3 odcinka TechWise

Źródło: Solarseven / Dreamstime.com

Na wynos:

Eksperci branżowi omawiają wdrażanie chmury z biznesowego punktu widzenia.

Eric Kavanagh: Panie i panowie, witam i witam ponownie w TechWise. Nazywam się Eric Kavanagh. Będę twoim moderatorem odcinka 3. To nowy program, który zaprojektowaliśmy z naszymi przyjaciółmi z Techopedia, bardzo fajnej strony internetowej, która oczywiście koncentruje się na technologii, i oczywiście tutaj, w The Bloor Group, skupiamy się bardzo na przedsiębiorczości technologia. Tak więc wszelkiego rodzaju oprogramowanie korporacyjne i cały format TechWise został zaprojektowany tak, aby zapewnić naszym uczestnikom naprawdę dokładne spojrzenie na konkretną przestrzeń. Zrobiliśmy na przykład Hadoop, przeprowadziliśmy analizy w ostatnim programie, aw tym konkretnym programie mówimy o chmurze.

Tak się nazywa „Imperatyw w chmurze - co, gdzie, kiedy i jak”. Porozmawiamy dzisiaj z kilkoma analitykami, a następnie z trzema dostawcami. Qubole, Cloudant i Attunity są więc sponsorami dzisiejszego programu. Ogromne podziękowania za tych ludzi za ich dzisiejszy czas i uwagę oraz wielkie podziękowania, oczywiście, wszystkim z was. I pamiętaj, że jako uczestnicy tych programów odgrywasz znaczącą rolę. Chcemy, abyś zadawał pytania, angażował się, działał interaktywnie, dawał nam znać, co myślisz, ponieważ oczywiście jedynym celem tego pokazu jest pomóc wam zrozumieć, co się dzieje w świecie przetwarzania w chmurze.


Imperatywna talia chmur
Przejdźmy więc od razu. Pierwszy gospodarz, twój gospodarz tam, Eric Kavanagh, to ja, a potem mamy doktora Robina Bloora dzwoniącego z lotniska, a nasz dobry przyjaciel Gilbert, Gilbert Van Cutsem, niezależny analityk, również się podzieli kilka myśli z tobą. Następnie usłyszymy od Ashish Thusoo, CEO i współzałożyciela Qubole. Usłyszymy wiadomość od Mike'a Millera, głównego naukowca w Cloudant i wreszcie od Lawrence'a Schwartza, wiceprezesa ds. Marketingu w Attunity. Mamy dziś dla Ciebie całą masę treści.

Tak więc chmura - edykt z góry - to koncepcja, która przyszła mi do głowy innego dnia, kiedy o tym myślałem. Naprawdę, przetwarzanie w chmurze jest obecnie ogromne. To znaczy, naprawdę fascynujące jest obserwowanie ewolucji tych rzeczy, a jednym z przykładów, które często podam, jest sama technologia webcastingu. Oczywiście ci z was, którzy zadzwonili wcześnie, słyszeli kilka interesujących wyzwań technicznych. Jednym z problemów z chmurą jest to, że się zmienia, zmienia format, zmienia standardy, zmienia się interfejs, a czasem, gdy próbujesz połączyć dwa różne obszary razem, masz trochę trudności, masz pewne problemy. Jest to więc jedna z rzeczy, o które należy się martwić w przypadku przetwarzania w chmurze. Uważaj na architekturę! Możesz to zobaczyć w ostatnim punkcie kuli.

Jedną z rzeczy, które robimy, podobnie jak tutaj w przypadku naszego webcastu, jest oddzielny dostawca konferencji telefonicznych. Następnie korzystamy z WebEx. Nie używamy audio WebEx, ponieważ szczerze mówiąc, kiedyś korzystaliśmy z audio WebEx wiele lat temu i rozbił się i spalił w najbardziej nieprzyjemny sposób. Dlatego nie chcemy ponownie ponosić tego ryzyka. Tak więc korzystamy z naszej własnej firmy do nagrywania dźwięku Arkadin i łączymy w czasie rzeczywistym wszystkie te różne rozwiązania. Chodzi o to, że moglibyśmy wtedy mieć osobną aplikację ze slajdami na wypadek, gdyby na przykład WebEx się zawiesił, mówimy wszystkim, aby zadzwonić, poślubić slajdy i po prostu przejrzeć je mniej więcej bez rodzaju WebEx środowisk. Więc sposób na obejście tego rodzaju problemów, ale tego rodzaju problemy są wszędzie.

Chmura ma jednak wiele zalet. Oczywiście, jego niska bariera wejścia na rynek, można spojrzeć na dziecko w chmurze plakatowe to oczywiście salesforce.com, który właśnie zrewolucjonizował biznes, szczególnie automatyzację sił sprzedaży, oczywiście. Ale wtedy masz takie rzeczy jak Marketo i iContact i Constant Contact i Sailthru, i, na litość boską, pod względem marketingu i automatyzacji sprzedaży, jest mnóstwo narzędzi, ale to nie wszystko. HR zajmuje się całą grą w chmurze, analityka jest w grze w chmurze. Spójrz na tę mało znaną firmę Amazon Web Services, co robią z chmurą obliczeniową - jest po prostu ogromna. Pewnego dnia usłyszałem świetny cytat od faceta, z którym dużo współpracujemy z Davidem, który jest teraz w Cisco, właściwie firmie, która kupiła WebEx. Nie jestem pewien, czy zainwestowali tyle, ile chciałbym, żeby mieli w WebEx, ale to nie jest moja decyzja, prawda? Ale obecnie jest w Cisco i miał bardzo zabawny, po prostu zwięzły cytat, a mianowicie: „nie ma jednej chmury, jest wiele chmur” i to jest dokładnie prawda. Tam jest mnóstwo chmur. W rzeczywistości każdy dostawca chmury jest własną chmurą. Jednym z wyzwań jest obecnie połączenie chmury, prawda? Jeśli jesteś pracownikiem handlowym, nie byłoby miło połączyć się bezpośrednio z iContact i Constant Contact i LinkedIn, na przykład, a może z innymi środowiskami, inne chmury tam po prostu naprawiły razem rozwiązania biznesowe, które mają sens dla Ciebie i Twojej firmy .

Oto kilka kwestii, o których należy pamiętać, ale chmura pozostanie. Po prostu wiedz o tym, że oprogramowanie na miejscu pozostanie. Co zatem musimy odkryć w przedsiębiorstwie, a nawet w małych i średnich firmach, jak zdefiniujesz swoją architekturę i utrzymasz ją w taki sposób, abyś mógł wykorzystać chmurę bez tworzenia giganta gdzie indziej poza twoją kontrolą? Oczywiście cała branża hurtowni danych ewoluowała wokół potrzeby konsolidacji kluczowych informacji w celu ich analizy i podejmowania lepszych decyzji.

Cóż, teraz Amazon Web Services ma Redshift. To jedna z największych transmisji internetowych, jakie kiedykolwiek zrobiliśmy, dotyczyła Redshift. To niezła sprawa. Zmieniają dynamikę, zmieniają struktury cenowe. Możesz obserwować, jak ceny spadają w porównaniu z tradycyjnymi licencjami na oprogramowanie dla przedsiębiorstw, częściowo z powodu przetwarzania w chmurze, a częściowo dlatego, że ci ludzie obniżają cenę, wywierając presję na cenę. To dobra wiadomość dla użytkowników końcowych. Warto o tym pamiętać z pewnością każdy, kto próbuje skorzystać z niektórych z tych technologii. Warto więc o tym pamiętać i porozmawiamy o tym dzisiaj w serialu.

Tak więc, analityk dr Robin Bloor będzie naszym pierwszym analitykiem tego dnia. Pójdę więc naprzód i pcham jego pierwszy slajd i wręczam mu klucze. Robin, myślę, że gdzieś tu jesteś, tam jesteś. I z tym oddam, a podłoga jest twoja!

Dr Robin Bloor: Dobra, Eric. Dzięki za wprowadzenie. Natknąłem się… kilka dni temu, w rzeczywistości spotkałem się z ankietą wśród konsumentów, która faktycznie zadała pytanie - czy uważasz, że sztormowa pogoda zakłóca przetwarzanie w chmurze? A ponad 50 procent z nich odpowiedziało tak. Pomyślałem, że dam ci znać, że tak nie jest, jeśli jesteś jednym z tych, którzy w to wierzą. A to trochę przypomina wiarę w to, że wiesz, kiedy w telewizji jest śnieg, bo na zewnątrz pada śnieg.

Chmura, wiesz, jedną z rzeczy jest, wiesz, ważnym, jeśli chcesz, prostym szczegółem chmury jest to, że chmura jest tak naprawdę centrum danych w taki czy inny sposób, lub jakakolwiek konkretna usługa w chmurze jest centrum danych. Jedyne, co to jest, to inne centrum danych niż tradycyjna chmura. Miałem więc mówić w skrócie o chmurze, aby jako twoja kopia zapasowa przejść do bardziej szczegółowych informacji na temat wykorzystania chmury, ponieważ nie ma sensu zajmować tego samego terenu.

Pierwszą kwestią, na którą chciałbym zwrócić uwagę, jest to, że chmury są usługą, rozumiesz? Jedną z rzeczy, które faktycznie dzieją się z powodu przetwarzania w chmurze, jest to, że ... no cóż, nazywam śmierć marek, cała seria marek oprogramowania miała strasznie dużo mocy i nadal ma moce w przetwarzaniu korporacyjnym. Gdy dotrzesz do chmury, nie mają już dużej mocy, wiesz? Kupując usługę w chmurze, dbasz o aplikację, oczywiście zależy Ci na poziomie usługi, jaki zapewni Ci chmura, nie chcesz, aby usługa w chmurze często ulegała awarii, zależy Ci na kosztach użytkowania i zależy Ci na nich rzeczy, ponieważ jest to usługa, ale nie obchodzi Cię już to, że nie obchodzi Cię, na jakim sprzęcie działa, szczególnie nie obchodzi Cię technologia sieciowa, nie obchodzi Cię, jaki system operacyjny działa, nie obchodzi Cię, co systemy plików są, nie obchodzi cię nawet, czym jest baza danych i która jest faktycznie używana przez dowolne usługi baz danych poza chmurą, wiesz? Wpływ tego jest taki, że chmura jest okropna, wiele marek oprogramowania nie ma w niej prawdziwej wartości, ponieważ, wiesz, wchodzisz do chmury w taki czy inny sposób, aby uzyskać coś, co jest usługą, a nie produkt. Pomyślałem, że mógłbym zrobić kilka slajdów z powodów, dla których nie korzystam z chmury, i to są wszystkie, jeśli chcesz, wiesz, cholernie proste, oczywiste powody, ale ktoś musiał je podać, więc ja myślałem, że to zrobię.

Powody, dla których nie mam ... nie korzystać z chmury - jeśli nie są w stanie zapewnić danych i zarządzania procesami, których chcesz, wiesz, to po prostu nie spełnia twoich kryteriów. Jeśli nie dadzą oczekiwanej wydajności, nie spełni kryteriów. Jeśli chmura daje elastyczność w zakresie przenoszenia rzeczy, to nie będzie spełniać kryteriów. To tylko oczywiste powody, dla których określone usługi w chmurze nie byłyby odpowiednie dla tak wielu ludzi, jak inne osoby zajmujące się obliczeniami korporacyjnymi.

Możesz tego nie zrobić, ponieważ możesz to zrobić taniej. Chmura nie zawsze jest najtańszą opcją. Niektórzy ludzie myślą, ponieważ często jest to niedroga opcja, zawsze będzie tańsza, nie zawsze jest tańsza. Inną kwestią jest to, że jeśli pobierasz aplikację z chmury, nie integruje się ona dobrze z tym, co robisz, to prawdopodobnie nie zamierzasz iść naprzód, a to są powody, dla których musisz się odwrócić.

Oto powody do adopcji. Wiesz, jedną z rzeczy, które możesz zrobić w chmurze, właściwie kuloodporne, jest prototypowanie. Jeśli albo możesz prototypować w chmurze i wdrażać w centrum danych, jest to całkowicie wykonalne i robi to mnóstwo ludzi. Możesz przesyłać prace z centrum danych za pomocą niekrytycznych aplikacji, ponieważ prawdopodobnie będą one w stanie znaleźć pewnego rodzaju usługi w chmurze, które spełnią Twój poziom usług do rzeczy bezkrytycznych. Możesz przesyłać określone aplikacje, takie jak salesforce.com i podobne oferty, do standardowych aplikacji. Każdy ma taką możliwość w tym obszarze, a dziedzina nie jest wyspecjalizowana, a wiesz, tradycyjne ... wszystko, co jest dostępne w chmurze, prawdopodobnie będzie tym, z czym idziesz.

Ostatnią rzeczą, którą chciałem powiedzieć, jest to naprawdę interesująca rzecz, kiedy naprawdę szukasz chmury, jednym ze sposobów zrozumienia jest seria ekonomii skali. Chodzi o to, że, wiesz, prowadząc tam centrum danych i masz zamiar połączyć się z tym centrum danych z tego czy innego miejsca i korzystać z niego, a zatem byłoby lepiej, lepiej byłoby w głównej taniej, niż gdyby zrób to sam. Wiesz, naprawdę chodzi o korzyści skali.

Dostawcy chmury wybierają lokalizację centrum danych, a najlepsze miejsce do zlokalizowania centrum danych znajduje się tuż obok elektrowni, a zwłaszcza niedrogiej elektrowni. Tak więc jedna elektrownia na północy, która okazuje się być hydroelektryczna lub coś w tym rodzaju. Zwykle jest najtańszy, wiesz? Możesz faktycznie zlokalizować tam centrum danych, a przekonasz się, że jest to łatwiejsze. Taniej jest zatrudniać ludzi w takich lokalizacjach, niż w centrum Nowego Jorku czy San Francisco. Możesz ustandaryzować cały obiekt pod względem klimatyzacji i mocy. Dzięki temu zaoszczędzisz dużo, ponieważ oznacza to, że wiesz, że możesz oddać mu cały budynek i to właśnie robią wszyscy operatorzy chmury. Standaryzują się na sprzęcie sieciowym, standaryzują na sprzęcie komputerowym, którego używają, zwykle towarowe płyty x86, często same je montują. Tak więc niektórzy nawet budują całość. Będą korzystać z oprogramowania Amazon, które mogą, ponieważ w rzeczywistości oznacza to brak kosztów jego przyjęcia. Będą one standaryzowane we wszystkich programach. Tak więc nigdy nie zaktualizują niczego poza aktualizacją naraz. Zorganizują wsparcie. Będą więc płacić wsparcie wielu różnym dostawcom, którzy mają po prostu własne wsparcie. Będą mieli możliwość zwiększania i zmniejszania skali w tym sensie, że będą działali więcej niż kiedykolwiek będą świadczyć tego rodzaju usługi i będą monitorować ich użycie w sposób, którego większość centrów danych nie może, ponieważ są mili obsługi tylko jednej znormalizowanej usługi, ale w większości centrów danych działa cała seria rzeczy.I o to właśnie chodzi w chmurze, i to w pewien sposób może określić, czy Cię interesuje, czy też nie, dla jakiejkolwiek konkretnej aplikacji. Tak więc, wiesz, mój rodzaj surowej zasady jest taki, że tam, gdzie możliwe są korzyści skali, chmury przejdą wcześniej lub później. Ale sposób, w jaki innowacje i elastyczność oraz bardzo specyficzne rzeczy, którymi się kierujesz, naprawdę nie może. Chmury zawsze będą na drugim miejscu.

W porządku. Pozwól, że przekażę to Ericowi lub Gilbertowi.

Eric Kavanagh: Dobra, Gilbert, dam ci klucze do WebEx. Czekaj. Po prostu kliknij dowolne miejsce tego slajdu i użyj strzałki w dół na klawiaturze.

Gilbert Van Cutsem: Myślę, że mam kontrolę.

Eric Kavanagh: Masz kontrolę.

Gilbert Van Cutsem: W porządku. No to ruszamy. Imperatyw chmurowy - niebo jest granicą, czy to miejska legenda, a co byś o tym pomyślał? To tylko kilka rozmów i rzeczy do rozważenia.

Po pierwsze, z przodu „co” wiesz, jak wszyscy wiemy, nie sądzę, żeby ktokolwiek w to wątpił. SaaS-ification pozostanie, ponieważ oprogramowanie nigdy nie umiera, po prostu przenosi się do chmury, prawda? Myślę, że powiedziałem to wcześniej w poprzedniej edycji tego. O nie, albo Eric powiedział mi to w poprzednim wydaniu. Wydaje mi się, że oczywistym powodem jest to, że Robin w pewnym sensie jest taki, że po stronie korporacyjnej harmonogram firmy jest dość łatwy. CMO zawsze potrzebuje wszystkiego i potrzebuje go teraz. Jest więc czas na wprowadzenie na rynek. Tak smutne, to dla niego dobra wymówka. CIO jest jednak trochę zaniepokojony SaaS i chmurami, ponieważ cały problem elastyczności oznacza, że ​​to, co idzie w górę, musi również spaść. Musisz być gotowy na skalowanie, ale także na skalowanie. Więc trochę się tym denerwuje. Dyrektor finansowy nie jest zdenerwowany, nie bardziej niż zwykle, ale mówi: „Hej, to jest… ile to nas cofnie?” To, jak wiesz, niesławne wydatki inwestycyjne a dyskusja OPEX. Jest dość stary, ale bardzo, wiesz, bardzo ważny na tym świecie. I wreszcie, oczywiście, prezes. Mówi: „Och! Ograniczanie ryzyka! Chłopaki, wszyscy jesteście podekscytowani, ale czy jesteśmy na to gotowi?” Ponieważ ryzyko jest tym, o czym myśli.

Jakie jest ryzyko? Kilka myśli, prawda? Mamy tu do czynienia z myślowym przywództwem, ale na niedokończonej ścieżce, ponieważ są to całkiem nowe rzeczy, całkiem nowe. Naprawdę nie mamy wielu punktów danych, jeśli się nad tym zastanowić. Tak więc my, po stronie ryzyka, musimy poradzić sobie z wprowadzaniem na pokład, wiesz, ludzie podpisujący umowy mówią: „Tak, tego właśnie chcemy, drogi”, rejestrują się, ale potem To nie wystarczy. Wiesz, musisz pokładać ludzi i pamiętasz filmy? Wracając do tłumaczenia, to jest trochę, wiesz, o co chodzi w pokładzie. A potem, jak powiedział właśnie Robin, wiesz, że premia niekoniecznie odejdzie od razu. Musisz więc zintegrować oba światy. To świat hybrydowy. Jak to zrobisz? Jego 80-20, zasada 80-20 Pareto, jest w porządku? Czy to wystarczy? A następnie podłączanie / wyrzucanie śmieci po podłączeniu systemów. Czy to jest ok? Czy to jest trwałe? Ponieważ wiesz, czy zamierzasz przeprowadzić migrację, czy zamapujesz swoje przedsiębiorstwo na system root, jak to zrobisz? A następnie ostatnia, która moim zdaniem jest niezwykle ważna, to architektura wielodostępna, co oznacza, że ​​prywatność danych na twoich danych, czasami nazywana „posiadaj własne dane”, staje się bardzo ważna, rozumiesz? Sto osób korzystających z tego samego systemu, jedna baza danych znajduje się pod systemem, kto zobaczy moje dane? Tylko ja, prawda? Jesteś tego absolutnie pewien? Prywatność danych, bezpieczeństwo danych pomaga ekspertom. Jeśli jesteś CIO, to przywraca „ja” do CIO, ponieważ teraz jesteś odpowiedzialny za informacje. To bardzo interesujące, jeśli jesteś CIO.

Porozmawiajmy więc trochę o tym „dlaczego”. Tak więc myślę, że strategiczny cel tego wszystkiego jest bardzo, bardzo prosty. Jeśli jesteś subskrybentem, istnieje presja rynkowa. Jeśli jesteś dostawcą usług, istnieje presja konkurencyjna. Jeśli masz rówieśników, istnieje presja rówieśników. Jeśli jesteś subskrybentem, to tylko psychologia rynkowa. Każdy chce iść do chmury, SaaS lub jakkolwiek to nazwiesz, cloud SaaS, wszyscy potrzebujemy i chcemy tam iść. Powodem jest zazwyczaj sytuacja finansowa. To oczywisty powód, ale jeśli myślisz o aspekcie finansowym, dochodzisz do tego, co nazywam paradoksem rachunek w stosunku do budżetu. Czy wybierzesz abonament, systemy, w których możesz jeść, 50 USD, 500 USD miesięcznie lub coś w tym rodzaju, czy marzysz o tym, aby opierać się na wykorzystaniu, aby płacić tylko za to, czego naprawdę używasz? A więc, jak to będzie działać, oparte na zużyciu, oparte na zużyciu? Zamierzasz zmierzyć te wszystkie rzeczy? Prawdopodobnie nie stanie się to od razu. Skończysz z mechanizmem hybrydowym, czyli płacę 200 miesięcznie, a może czasami 500, bo muszę płacić za dodatkowe zużycie. Retainer Plus, moim zdaniem prawdopodobnie będzie to właściwa droga.

Ale jest też coś, co nazywam ukrytą intencją na szerokim froncie i wierzę, że wiesz, to jest absolutnie prawdziwe. To zmiana kontroli, CIO kontra CMO, przesunięcie mocy lub walka o władzę między CMO, „Chcę to wszystko i chcę teraz”, a CIO, który mówi: „Hej, to wszystko o danych, wiesz? Kiedyś działałem 20 lat temu, chodziło o systemy sprzętowe. Dziesięć lat temu było o aplikacjach. Dziś chodzi o dane. A skoro jestem CIO - informacja - chodzi o ja. Mam kontrolę. ” Jest to więc rodzaj zmiany władzy lub walki o władzę, która, jak sądzę, dzieje się teraz między nimi, CMO i CIO.

Ostatecznie wszystko to jest tak młode, że nikt tak naprawdę nie wie, czy jesteśmy w środowisku innowatora, czy w środowisku wczesnego odbiorcy. Uważam, że jesteśmy w środowisku wczesnego adoptującego, a nie wczesnej większości, tylko wczesnym adoptującym, ale wiesz, w pewnym sensie w połowie drogi. I tak, wiesz, dla klienta, użytkownika końcowego, subskrybenta, chodzi o uzyskanie przewagi, ponieważ CMO chce przewagi, prawda? Dlatego ważne jest, aby nie skończyć z tym, co nazywamy malejącymi zwrotami. Ograniczający początek może prowadzić do zmniejszenia zysków. Właśnie dlatego niezwykle ważne jest, wiesz, znalezienie, zaufanie stronom, które mogą upewnić się, że pojedynczy punkt awarii nie stanowi problemu i że przestrzegane jest bezpieczeństwo danych. Będzie to wymagało sporo zarządzania zmianami. I w końcu - prawie gotowe, to już ostatni slajd - jak to zrobimy? Jak przejście do chmury, przejście do SaaS będzie, wiesz, płynne i łatwe? Cóż, robiąc dwie rzeczy: zwracając uwagę - dostarczanie - naprawdę ważne, i on-boarding, jeszcze ważniejsze.

Eric Kavanagh: W porządku ...

Gilbert Van Cutsem: I w takim przypadku niebo jest granicą. Dziękuję Ci.

Eric Kavanagh: Tak. To było świetne. Uwielbiałem bardzo prowokujące pomysły, podoba mi się sposób, w jaki to wszystko zepsułeś. Myślę, że to ma sens. I chodźmy dalej i pchnij pierwszy slajd Ashishsa, a ja przekażę ci klucze do WebEx, Ashish. Okej, śmiało. Po prostu kliknij dowolne miejsce tego slajdu i użyj strzałki w dół na klawiaturze. Proszę bardzo.

Ashish Thusoo: W porządku. Dzięki, Eric. Cześć wszystkim, to jest Ashish i zamierzam wam powiedzieć o Qubole. Więc na początek, Qubole, zasadniczo zapewnia duże zbiory danych jako platformę usług. Jest to platforma oparta na chmurze hostowana w chmurze Amazon i chmurze Google, a my zapewniamy technologie takie jak Hadoop, Hive, Presto i kilka innych, o których powiem, wszystko pod klucz, aby nasi klienci mogli zasadniczo wyjść z wszystkie zamieszanie w świecie infrastruktury dużych zbiorów danych lub faktyczne zarządzanie działającą infrastrukturą i skupienie się na danych i transformacjach, które chcą przeprowadzić na swoich danych. O to właśnie chodzi w Qubole.

Jeśli chodzi o wymierne korzyści, jeden sposób myślenia o Qubole, wiesz, oczywiście, że jest to „pod klucz”, samoobsługowa platforma do analizy dużych danych i integracji dużych danych zbudowana wokół Hadoop, ale bardziej zasadniczo to, co robi, to wiedz, że dla wszystkich mechanizmów dużych zbiorów danych, takich jak Hadoop, Hive, Presto, Spark, Chartly i tak dalej, oferuje wszystkie zalety chmury dla tych mechanizmów dużych zbiorów danych oraz niektóre kluczowe przejawy, które przynosi z perspektywa chmur polega na dostosowaniu infrastruktury i dostosowaniu, mam na myśli zarówno zwinność, jak i elastyczność w stosunku do obciążeń obsługiwanych przez którykolwiek z tych silników, a także sprawia, że ​​silniki te są o wiele bardziej samoobsługowe i współpracują w tym sensie, że: wiesz, Qubole zapewnia interfejsy, w których możesz korzystać z tych konkretnych technologii nie tylko do rozwoju lub, wiesz, zadań zorientowanych na programistów, ale nawet inni analitycy danych mogą również zacząć czerpać korzyści z tych technologii do samoobsługi w powierzchnia

Dostajemy dużo, jeśli chodzi o ten konkretny, webinarium, wiesz, to jedna z naszych perspektyw, jakie korzyści z chmury zapewnia Qubole dla dużych zbiorów danych. Tak więc, jeśli po prostu porównasz sposób uruchamiania, powiedzmy, Hadoop i pozwól mu pracować w ustawieniach wstępnych, w ustawieniach wstępnych, zawsze myślisz w kategoriach klastrów statycznych, wiesz, naprawiasz klastry, być może dostosujesz je do swojego maksymalnego wykorzystania i utrzymasz je tam, a następnie, jeśli będziesz musiał je zmienić, musisz przejść cały proces pozyskiwania, wdrażania, testowania i tak dalej. Qubole zmienia to, że tworząc klastry całkowicie na żądanie, nasze klastry są całkowicie elastyczne, używamy obiektów przechowywanych w chmurze do faktycznego przechowywania danych i pojawiają się klastry, a wiesz, że pojawiają się na podstawie zapotrzebowania generowanego przez użytkownicy i odchodzą, gdy nie ma popytu. To sprawia, że ​​ta infrastruktura jest o wiele bardziej elastyczna, elastyczna i dostosowuje się do obciążeń.

Innym przykładem elastyczności jest, wiesz, dzisiaj mogłeś stworzyć tutaj swoje statyczne klastry, wiesz, mając na uwadze pewne obciążenie pracą, a jeśli twoje obciążenia zmienią się, a twoja infrastruktura będzie musiała zostać zaktualizowana, być może potrzebujesz więcej pamięci na swoich komputerach i podobne rzeczy. Znów, robiąc to w chmurze za pomocą Qubole, na przykład, sprawia, że ​​jest to proste. Zawsze możesz wypożyczyć nowe, różne typy maszyn i, wiesz, uruchomić klastry, klastry 100-węzłowe i uruchomić w ciągu kilku minut, w przeciwieństwie do tygodni, na które musiałeś czekać na Hadoop przedpremierowy.

Inną kluczową rzeczą, w której Qubole odróżnia się od prem-on, jest to, że Qubole jest zasadniczo usługą oferującą, więc wszystkie narzędzia i infrastruktura potrzebne do zintegrowania usługi, nie musisz ... gdziekolwiek na -prem, wiesz, to przede wszystkim bierzesz oprogramowanie, musisz sam je uruchomić, sam je zintegrować i zrobić te wszystkie korzyści, wszystkie zalety modelu SaaS są wskazówką, wiesz, jak oferuje Qubole duże zbiory danych w przeciwieństwie do samodzielnego uruchamiania Hadoop.

Ten slajd ogólnie dotyczy naszej architektury. Opieramy się oczywiście na chmurze, przechowujemy nasze dane na obiektach w chmurze w chmurze, Google Cloud i Google Compute Engine lub Amazon Web Services. Bierzemy pod uwagę wszystkie projekty ekosystemów Hadoop i wokół tego, opracowaliśmy kluczowe IP w zakresie automatycznego skalowania i samodzielnego zarządzania, dokonaliśmy wielu optymalizacji w chmurze, aby te komponentowe technologie działały naprawdę dobrze w chmurze, ponieważ, wiesz, infrastruktura chmurowa jest bardzo różni się od zwykłego działania na gołym metalu i całej gamy konektorów danych, aby umożliwić przenoszenie danych z tej platformy. To porównuje platformę chmurową i umożliwia to, wiesz, to jest klucz ... kluczową cechą jest to, jak zrobić całą samoobsługę, abyś nie musiał mieć silnej ... nie masz bardzo duża stopa operacyjna podczas działania, ale łączymy to z naszym warsztatem danych, czy są to narzędzia dla analityków, czy są to narzędzia do zarządzania danymi, czy są to narzędzia do tworzenia szablonów itp., abyś mógł przynieść korzyści tej technologii, nie tylko dla programistów, ale także dla innych użytkowników biznesowych i przedsiębiorstw. I oczywiście łączymy również tę platformę chmurową z narzędziami, z których ludzie mogą już korzystać, niezależnie od tego, czy są to narzędzia do wykorzystania, czy tylko Tableau, czy też używają, wiesz, więcej rodzajów produktów do magazynowania danych, takich jak Redshift i itd. itp.

Dziś usługa działa na dość dużą skalę, obecnie przetwarzamy prawie 40 petabajtów danych każdego miesiąca w naszej bazie klientów. Nasze klastry różnią się wielkością od klastrów 10-węzłowych do klastrów 1500-węzłowych, a jeśli chodzi o zakres skali, który możemy przetwarzać i ogólnie, zgodnie z moją najlepszą wiedzą, prowadzimy prawdopodobnie jedne z największych klastry w chmurze, jeśli chodzi o Hadoop, a my przetwarzamy do około 250 000 maszyn wirtualnych w ciągu jednego miesiąca w naszych klastrach. Pamiętaj, że nasz model to klastry na żądanie, które mają ogromne zalety w zakresie zmniejszania obciążeń operacyjnych, a także ulepszania itd.

Wreszcie, wiesz, jeden z naszych, to tylko próbka tego, jak Qubole przekształcił się w różne firmy. Pinterest jest przykładem naszego klienta. Byli już w chmurze, na przykład uruchomili Elastic MapReduce w chmurze, a wykorzystanie danych było tam dość ograniczone. Mieli około 30 użytkowników, którzy mogliby korzystać z tej technologii. Dzięki Qubole udało się to rozszerzyć na ponad 200 użytkowników w firmie, którzy widzieli rozwój przypadków użycia dużych zbiorów danych i naprawdę przynieśli, jak to nazywamy, definicję zwinnej platformy dużych zbiorów danych i że stał się naprawdę centralny dla wielu obciążeń analitycznych.

Więc, żeby się zamknąć, wiesz, to był krótki podkład na Qubole. Zasadniczo naszą wizją jest to, w jaki sposób zwiększamy elastyczność przedsiębiorstw w zakresie dużych zbiorów danych, a przede wszystkim korzystamy z zalet chmury i wykorzystujemy technologie dużych zbiorów danych w Hadoop, aby nasi klienci mogli korzystać z zalet zwinności i tych korzyści elastyczności i korzyści z samoobsługi w chmurze, aby stać się o wiele bardziej efektywnymi w stosunku do ich potrzeb w zakresie danych. Więc zatrzymam się i przekażę to Ericowi.

Eric Kavanagh: W porządku. Brzmi świetnie i teraz przekażę to Mike'owi Millerowi z Cloudant. Mike, przekazuję ci teraz klucze. Po prostu kliknij slajd, proszę bardzo. Zabierz to.

Mike Miller: Wygląda na to, że mam klucze. Przepraszam. Straciłem ... Myślę, że zapomniałem wysłać czcionki z moją prezentacją. Mam więc nadzieję, że możesz spojrzeć w przeszłość i wyobrazić sobie, że jest piękna. Ale tak, to jest fajne. Mam tutaj długą listę, prowokujące rzeczy, które usłyszałem, które zapisałem, że chętnie wrócę do ciebie w panelu. Więc spróbuję to szybko przejść.

Zacznę od Cloudant. Cloudant to baza danych jako usługa, nasz dostawca usług w chmurze, a właściwie nie mam nawet nowego logo. Niedawno zostaliśmy przejęci przez IBM. I tak ... Będziemy mówić o naszej usłudze, a szczególnie skupię się na tym, aby sprawić, by nasi użytkownicy i klienci działali sprawnie w zupełnie inny sposób niż poprzedni mówca.

Cloudant zapewnia bazę danych jako usługę i inne usługi związane z danymi dla osób tworzących aplikacje. Dlatego współpracujemy bezpośrednio z programistami i skupiamy się na danych operacyjnych lub danych OLTP, w przeciwieństwie do danych analitycznych, które wcześniej otrzymywaliśmy od Ashisha. Chodzi o to, że cała wartość Cloudants, którą można podzielić na pomaganie naszym użytkownikom w robieniu więcej, pozwala budować więcej aplikacji, rozwijać się i więcej spać. Opowiem o nich trochę szczegółowo, ale ogólna idea jest taka, że ​​jeśli jesteś użytkownikiem, wiesz, że jesteś w przedsiębiorstwie, budujesz nową aplikację, dodając funkcję do istniejącej aplikacji lub sieci mobilny start, powinieneś skupić się na swojej podstawowej kompetencji. A wcześniej, być może jeszcze dziesięć lat temu, informatyka miała wyróżniać się, wiesz, konkurencja, przepraszam, szkody konkurencyjne, nawet prowadzenie bazy danych w celu uzyskania przewagi konkurencyjnej. Ulżyło, że te dni minęły! Dlatego tak naprawdę staramy się współpracować z naszymi użytkownikami, aby zachęcić ich do korzystania z usług kompozytowych, modułowych, wielokrotnego użytku, składających się z myślą, że skraca czas marketingu, zwiększa skalowalność. Ogólna idea polega na tym, że chmura nie jest tylko, no wiesz, czymś nowym, narzucanym użytkownikom, to naprawdę rynek ... to ewolucja rynku, ponieważ sposób, w jaki ludzie budują aplikacje, konsumują aplikacje, urządzenia, na których działają a skala danych zmienia się dość radykalnie w ciągu ostatnich 5-10 lat. To naprawdę podkreśliło istniejącą architekturę aplikacji do tworzenia aplikacji, a także po prostu radzenia sobie z tymi obciążeniami danych i analiz w trybie offline. I tak otwiera cały strumień możliwości.

Cloudant to rozproszona baza danych jako usługa, która, jak sądzę, była wyjątkowa, ponieważ od samego początku była dostarczana ze strategią mobilną i opowiem o tym szczegółowo, ale chodzi o to, że teraz pisanie aplikacji , nie piszesz dla jednej platformy, prawda? Piszesz dla czegoś, co mogę uruchomić w chmurze w skali petabajta, musi też być w stanie płynnie działać na komputerze stacjonarnym lub w przeglądarce i coraz więcej widzimy rzeczy, musimy działać na urządzeniu mobilnym lub częściowo połączone urządzenie lub urządzenie do noszenia lub coś, co nazywamy IOT. Tak więc myślę, że aplikacje, które dobrze sobie radzą i wykorzystują różnych klientów, są niezwykle konkurencyjne na rynku, a my staramy się ułatwić ludziom pojedyncze API w jednym modelu programowania, aby pisać, obsługiwać dane we wszystkich tych różnych urządzeniach, które mają znacznie różną skalę. Interesującą rzeczą jest, wiesz, początkowa absorpcja w internecie i na urządzeniach mobilnych, w tym miejscu obserwowaliśmy nasze duże odejmowanie, ale nawet teraz przed przejęciem, widzimy coraz większą liczbę użytkowników korporacyjnych, nawet w takich rzeczach, co mówię jako konserwatywne jako inwestycje w wierność, słusznie, praca z wirtualnym budynkiem, wirtualną skrytką depozytową. Sądzę więc, że rynek ten jest zdejmowany znacznie szybciej, niż się spodziewaliśmy.

Porozmawiajmy o chmurze i trochę więcej, a następnie odwróć ją. Chodzi o to, że naprawdę ułatwiamy ci budowanie większej ilości i korzystanie z usługi takiej jak Cloudant do przechowywania stanu bazy danych twojej aplikacji, a następnie przeniesienie jej na różne urządzenia i synchronizację oraz rozpoczęcie kontrastu z tym, jak budujesz aplikację , tradycyjny stos lub musisz kupić serwery, o których słyszeliśmy wcześniej, gdzie musisz je zapewnić i zainstalować licencje. Dzięki Cloudant staramy się ułatwić. Wszystkie potrzebne dane, wszystkie usługi wyszukiwania, baza danych itp.dla aplikacji można uzyskać, rejestrując się i uzyskując pojedynczy adres URL punktu końcowego, a następnie rozpoczynając korzystanie z tego adresu URL. Chodzi o to, że jest to usługa, która wykorzystuje wiele indeksów, kilka różnych technologii poniżej, niektóre zastrzeżone i wiele otwartych źródeł, ale używamy ich razem w taki sposób, że końcowy programista lub zespół produktu musi coś zbudować. I tak, analityka bazy danych, zupełnie inna niż na początku, w której mielibyśmy, wiesz, wiersze i kolumny do przechowywania ksiąg biznesowych, teraz musimy rozpocząć dokumenty JSON, które zwykle zdarzają się przez HTTP lub przy użyciu istniejących interfejsów API typu open source i wreszcie dajemy ci rzeczy, które powinna zrobić baza danych, takie jak indeks główny i indeksy wtórne dla, wiesz, pobierania i LTT, a następnie kierowania logiką aplikacji. Ale oprócz tego istnieje bardzo szeroki zakres rzeczy, takich jak wyszukiwanie, geo-specjalne i replikacja między urządzeniami, które są bardzo ważne. To wszystko znajduje się pod naszym API.

Ale naprawdę wyróżniającą się rzeczą, która pozwala naszym użytkownikom na rozwój, i na przykład dlaczego Samsung był jednym z naszych pierwszych i największych klientów, jest fakt, że Cloudant jest teraz pod klastrami. Każdy klaster ma wystarczającą architekturę złożoną z trzech do setek węzłów, ale obsługujemy je w ponad 35 centrach danych teraz na całym świecie, aby zawsze było miejsce na przechowywanie danych w ciągu milisekundy od dowolnego innego dostawcy chmury lub większości istniejących centrów danych. Tak więc jedną z dużych wczesnych rzeczy, przed którymi również stawiamy czoła w chmurze, jest to, jak mogę podzielić architekturę hybrydową dla mojej usługi aplikacji, być może tutaj, a moich serwerów baz danych może gdzie indziej, która nigdy nie będzie działać. Muszą znajdować się na tej samej maszynie lub w tym samym miejscu. Cóż, rzeczywistość jest taka, że ​​łącząc ze sobą różnych dostawców chmury, a my nadal to robimy jako firma IBM, możesz mieć pewność, że twoja baza danych jest zawsze w odległości milisekundy od dowolnego innego miejsca i dbamy o peering umowy i po prostu zdejmij koszty ze stołu, coś, o co się martwimy. Cloudant to tak naprawdę baza danych jako usługa, ale możesz myśleć o niej bardziej jak o CDN, jak w przypadku bazy danych, która zmienia się, wiesz, w skali milisekundowej.

I naprawdę, wreszcie, myślę, że główną zaletą jest to, że jeśli tworzysz aplikację, która odnosi sukcesy, musisz jako organizacja zdecydować, czy chcesz następnie rozwinąć globalnie dystrybuowany 24x7, 365, wiesz, zespół operacyjny zajmuje się tym na dużą skalę, aby sprawdzić, czy jest to również coś, co teraz jest utowarowione. Dlatego bardzo mocno koncentrujemy się na pomocy nowym użytkownikom i nowym klientom na pokładzie i pomagamy im przejść do chmury i budować architektury, które używają analityków chmurowych i działają w bardzo spójny i skalowalny sposób, więc to koniec. , nasi użytkownicy koncentrują się na tworzeniu aplikacji, a nie na przetrwaniu własnego sukcesu.

I po tym powiem tylko dzięki, pomijając kilka slajdów, które zostały pominięte, i zwrócę to Lawrence'owi.

Eric Kavanagh: To fantastycznie. Lawrence, pozwól, że podam ci klucze do WebEx tutaj. Daj mi tylko sekundę. Tutaj jesteś. Klucze są przenoszone. Po prostu kliknij ten slajd w dowolnym miejscu i użyj strzałki w dół.

Lawrence Schwartz: Świetnie! Cóż, dziękuję za przekazanie i, wiesz, dziękuję wszystkim dzisiejszym prezenterom. Fajny sposób na skonfigurowanie wszystkiego i będzie wiele rzeczy do omówienia, gdy przejdę przez prezentację tutaj. Więc znowu jestem Lawrence Schwartz. Prowadzę marketing w Attunity i, wiesz, chcę porozmawiać o niektórych problemach, które widzimy, a następnie o niektórych wyzwaniach w przestrzeni, w której się znajdujemy.

Krótki przegląd i wprowadzenie do Attunity jako firmy i tego, kim jesteśmy. Koncentrujemy się na przenoszeniu danych. Mówimy więc o przenoszeniu dowolnego rodzaju danych w dowolnym miejscu i czasie oraz umożliwieniu ich użytkownikom. Jesteśmy spółką publiczną z siedzibą w okolicach Bostonu lub w pobliżu Bostonu, a kiedy mówimy o chmurze, mamy świetne relacje, jesteśmy częścią sieci AWS, partnera do integracji dużych zbiorów danych i jesteśmy blisko je od czasu wprowadzenia Redshift, nawet pracując z nimi wcześniej. Otrzymaliśmy miłe uznanie za pracę, którą wykonaliśmy i jako firma jesteśmy w ponad 2000 miejscach korzystających z Attunity i jesteśmy w połowie firm z listy Fortune 100. Mamy więc dobre doświadczenia.

Jak widać na dole slajdu tutaj, dużym problemem jest to, że masz dane generowane z różnych rodzajów źródeł w tych dniach z tradycyjnych, wiesz, systemów CRM, różnych miejsc w Internecie, wszystkich różne miejsca, w których dane mogłyby się zacząć, a potem muszą iść do miejsc, które mają być analizowane, do pracy i do obejrzenia, a my rozmawialiśmy, jeśli, wiesz, zdobywając dane, wiesz, gdzie to powinno być. Opowiem więc o naszych rozwiązaniach, które robimy konkretnie w chmurze, a kiedy myślisz o tym, często razy dane, mamy gdzieś na miejscu. Oprócz relacji z miejscami takimi jak Amazon, mamy bardzo bliskie relacje robocze z miejscami takimi jak Teradata, Oracle i Microsoft, wszystkie miejsca, w których dane tradycyjnie istniały na miejscu.

Więc kiedy o tym myślisz, wiesz, i myślę, że to Eric mówił, że on-boarding jest kluczem do całego procesu, prawda? Myślałem o problemach z uzyskaniem danych w systemie. Teraz jesteśmy tylko niektórymi z wąskich gardeł, które istnieją dzisiaj, a kiedy spojrzysz na ludzi przenoszących dane do hurtowni danych lub bazy danych i do chmury, widzimy, że dużo czasu spędza się na tak zwanym procesie ETL, ekstrakcja, transformacja i ładowanie danych z miejsca, w którym się znajdują, do miejsca, w którym musi się udać. Jeśli myślisz o uzyskaniu wartości danych, to nie tam, gdzie chcesz spędzać czas i wysiłki, nie jest to najbardziej produktywny obszar dla naukowca danych. A drugą stroną tego jest to, że bardzo niewielu ludzi jest bardzo zadowolonych z tego procesu. To nie mniej niż 20 procent. Uważamy, że to duży proces. Tak więc istnieje prawdziwy wąski gardło, jeśli chcesz, wchodząc do chmury i wykonując tego rodzaju wsiadanie, które ludzie muszą zrobić, a nawet istnieją, wiesz, prawdziwe problemy z wydajnością, wiesz, możesz wyglądać w jaki sposób dostaniesz rzeczy do chmury i jeśli chcesz dostać, wiesz, kilka terabajtów do chmury, możesz z pewnością wysłać je do chmury, a wciąż są miejsca, które robią to z większymi zestawami danych lub wiele tradycyjnych metod, po prostu nie ma wydajności, aby to zrobić. Jest to więc prawdziwy problem na rynku, ponieważ ludzie myślą o tym, jak się dostają i jak poruszają się w chmurze.

Więc jeśli cofniemy się i spojrzymy na to, co to oznacza lub dlaczego to jest, i wiesz, jak to się stało, wiesz, zarówno Eric, jak i Gilbert rozmawiali o tym, że, wiesz, dane, które są tam dzisiaj , która istnieje dzisiaj, wiesz, prem-on jest tutaj, wiesz, chmura jest tutaj, aby zostać. Tak więc integracja staje się tym ważniejsza, że ​​ludzie często sięgają po narzędzia, którymi muszą się przemieszczać po danych. Znów istnieje wiele ETL lub tradycyjnych narzędzi do przenoszenia danych w partiach, ale jest z tym wiele problemów. Ludzie uważają, że tradycyjne sposoby przenoszenia danych wymagają bardzo dużo czasu i zasobów. Często wymagają dużo skryptów, nawet jeśli są w jakiś sposób autonomiczne, dużo ludzi, dużo siły roboczej. Jest tak wiele źródeł i celów, zwłaszcza dzisiaj, aby przenieść je do chmury, wiesz, wszystkie systemy, o których wspomniałem wcześniej, Oracle, Microsoft, Teradata, niektóre zarządzają całą tą częścią. A potem, no wiesz, patrząc na wydajność w miarę jej przesuwania się, mając możliwość posiadania narzędzi, aby upewnić się, że wszystko buduje się szybko, istnieje wiele systemów myślowych, które istnieją dzisiaj, nie są do tego dobrze przygotowane.

I wreszcie, wiele sposobów myślenia ludzi o przenoszeniu danych odbywa się w procesie wsadowym, a jeśli myślisz o próbie zrobienia więcej w czasie rzeczywistym, nie jest to najbardziej efektywny sposób, rodzaj wykorzystania starych danych, które nie są interesujące dla organizacji. Tak więc, kiedy spojrzysz na to, co robi Attunity na tym etapie i jak my o tym myślimy, jest to inna architektura, na której jesteśmy skupieni, naprawdę zbudowaliśmy to od podstaw i zastanowiliśmy się, kiedy musisz przejść z Pentaho open- źródłową bazę danych do chmury, w jaki sposób upewnić się, że jest to bardzo łatwe i proste do zrobienia? To wymaga ponownego przemyślenia, sposobu monitorowania i rodzaju konfiguracji. To wszystko sprawia, że ​​wystarczy kilka kliknięć, aby rozpocząć. Naprawdę myśli o ruchu i optymalizacji wydajności w kanale i współpracuje z szeroką gamą platform, ponieważ wiele dużych organizacji ma najlepsze podejście i wiele różnych rodzajów baz danych lub hurtowni danych jest gotowych w swoim środowisku . Musisz więc myśleć o tym inaczej. Nie można po prostu wyodrębnić, wiesz, zrzucić dane do jakiegoś rodzaju informacji gdzieś załadowanych. Musisz trochę pomyśleć o zmianie architektury, o tym, jak wykonujesz przetwarzanie, zrób to więcej w pamięci i skoncentruj się na bardziej wydajnej wersji.

Co to oznacza i jak to wygląda? Tak więc jednym z kluczowych czynników pozwalających rozwiązać problem z chmurą jest to, że łatwiej jest skonfigurować. Wiesz, tamten ekran, to tylko niektóre zrzuty ekranu z tego, jak to robimy, ale to, wiesz, 1, 2, 3, trochę wybierz źródło i cel, wybierz to, co chcesz zrobić, chcesz zrobić raz CDC a potem po prostu idź. Wiesz, to nie musi być trudniejsze. Wiem, że właśnie widzieliśmy prezentację Mike'a, który opowiadał o tym, jak łatwo było ludziom rozpocząć korzystanie z Cloudant. Jest to ten sam rodzaj rzeczy, z którym musisz sobie poradzić, trochę zaczynaj w kilku krokach, w przeciwnym razie zaczniesz tracić na wartości. Kiedy myślisz o monitorowaniu i kontroli, istnieje kilka świetnych firm, wiem, że znasz, jak Tableau i inni, którzy wykonali świetną robotę w wizualizacji końcowego produktu danych i jak to zrobić . Ale wiesz, że będąc w stanie zwizualizować proces przemieszczania, zarządzanie lub gdy lokalny zestaw danych, w chmurach i przemieszczaniu się, istnieje opóźnienie, jest wakat. Posiadanie tego punktu widzenia jest niezwykle ważne i stanowi ważną część postępu.

Kolejnym aspektem, który staje się ważny, jest wydajność. Nie można po prostu polegać na standardowym dwukierunkowym protokole FTP, z którego ludzie korzystają od lat. Gdy przenosisz coraz więcej danych, musisz mieć zoptymalizowany protokół kanału pliku, który jest bardziej ukierunkowany na, wiesz, ruch jednokierunkowy przez większość czasu po tym, jak pomyślimy o tym, jak rozbijasz tabele i wysyłasz je i przenieś je na drugą stronę i musisz dać ludziom elastyczność, aby to zrobić, w przeciwnym razie nie będziesz w stanie tego zrobić na czas, a jeśli zrobisz to inaczej, pomyśl o tym inaczej, możesz uzyskać 10-krotną wydajność, ale musisz przemyśleć technologię .

I wreszcie, jak wspomniałem wcześniej, masz wiele różnych miejsc, w których obecnie istnieją bazy danych. Musisz więc być w stanie pracować z tymi wszystkimi i oferować jak najszersze wsparcie, aby ludzie mogli dostać się do chmury. Co to oznacza dla użytkowników i tych, którzy tam są, którzy chcieli, dwa rodzaje szybkich przypadków, w których ludzie mieli problemy z dostaniem się do chmury, widząc wartość, ale mogą to zrobić, jeśli mieć odpowiedni zestaw narzędzi.

Tak więc jedna firma, z którą współpracujemy, Etix, zajmująca się sprzedażą biletów online, główny dostawca w tej przestrzeni i wiem, że Robin mówił o odciążeniu centrum danych, jest w tym przypadku kluczem do chmury. Właśnie to starają się zrobić. Próbowali załadować i zsynchronizować swoje dane z lokalnej bazy danych Oracle z Redshift i zrobić to w odpowiednim czasie. Interesujące jest to, że powróć do tego, co powiedział Gilbert, wiesz, naprawdę ciężko jest mieć problem z wejściem na pokład. Widzieli istotną wartość Redshift, mogli zobaczyć oszczędności kosztów, mogli zobaczyć wszystkie zaawansowane analizy, które szybko zaczęli robić, dla których kontynuowali, znali tę wartość, ale istniała przeszkoda w osiągnięciu tego. W tym przypadku spojrzeli na to i powiedzieli: „Cóż, widzę wartość Redshift, ale zajmie im to, wiesz, trzy miesiące, wysiłek i czas na rozwój, a wiesz, może zatrudnienie DBA i zrobienie tego wszystkiego dodatkowa praca, aby się tam dostać ”. Tak więc na drodze jest prawdziwy blok. Gdy masz do tego odpowiedni zestaw narzędzi, odpowiednią zdolność do integracji danych, byli oni w stanie zrezygnować z, wiesz, miesięcy planowania dosłownie po prostu zacząć w ciągu kilku minut, a to znowu obniża barierę utrudniającą pozyskiwanie ludzi w chmurze, musimy mieć odpowiednie możliwości, aby dotrzymać obietnicy.

Ostatnim, jak wiecie, slajdem, który tu mam, i innym rodzajem zastosowania jest, wiesz, współpracowaliśmy z innymi firmami, Philips, wiesz, dobrze znany w wielu miejscach, pracujemy z ich oddziałem opieki zdrowotnej i znowu próbowali przejść ze źródła lokalnego na Redshift, w tym przypadku SQL Server, i znali wartość, znali wszystkie dane analityczne, które mogliby zrobić i przeprowadzili pewne testy, ale zobaczyli, że bez odpowiednich narzędzi, to było coś, co ich zabrałoby, no wiesz, tygodnie, a oni spędzili tygodnie obracając koła i próbując przenieść rzeczy, kiedy mieli odpowiednie narzędzia, które upraszczają, zdobądź to przenieśli się szybko, byli w stanie zejść na dół i rozpocząć ładowanie w niecałą godzinę, wiesz, ponad 30 milionów rekordów. Czas rzeczywisty trwał więc od kilku miesięcy do około dwóch godzin. A potem byli w stanie robić rzeczy, które chcieli robić. Nie musieli koncentrować się na ładowaniu danych, mogli skupić się na wsparciu operacyjnym. Mają znacznie lepszą matrycę dla wszystkich tych opieki, kosztów i operacji. Więc myślisz o całym wyzwaniu, wiesz, projektujemy te przestrzenie, umożliwiając przenoszenie danych, a teraz bardziej niż kiedykolwiek z chmurą, gdy myślisz, że jest to rodzaj zdalnego miejsca do zbierania danych, wiesz, że to staje się obszar, który, jak wiesz, coraz więcej osób musi rozwiązać, aby skorzystać z tego, co tam jest. To jest przegląd tego, co robimy i dzięki temu przekażę to tobie, Eric.

Eric Kavanagh: Dobra. To brzmi świetnie. Mamy tutaj sporo czasu. Zajmiemy trochę czasu, aby odpowiedzieć na niektóre z waszych dobrych pytań. Zachęcamy do zadawania pytań, a ja sam mam kilka pytań.

Lawrence, chyba zacznę od ciebie. Od dłuższego czasu jesteście w tej dziedzinie, jakby doładowywali przepływ danych, i bardzo uważnie obserwowaliście chmurę, a ja byłem naprawdę zaskoczony, jak długo zajęło to dużym przedsiębiorstwom, firmom z listy Fortune 1000, aby w pełni wykorzystać chmurę. Mam na myśli, oczywiście, wiele poważnych interesów, nazwijmy to w dużych organizacjach, ale z reguły trochę niechęci, która zaczyna słabnąć dopiero w zeszłym roku, przynajmniej z mojego punktu widzenia, ale co widzisz, jeśli chodzi o przyjęcie w chmurze i gotowość przedsiębiorstwa do korzystania z chmury obliczeniowej?

Lawrence Schwartz: Jasne, myślę, że masz rację. To była znacząca zmiana i na pewno zabrało to trochę czasu, wiesz, żartują o tym, wiesz, że udany - sensacja z dnia na dzień - lub naprawdę sukces z dnia na dzień, który naprawdę zajmuje lata, i to było prawdziwe dla chmury , dobrze? To ... widziałeś tego kopnięcia w zeszłym roku, ale to z powodu ciężkiej pracy wielu graczy, takich jak Amazon, którzy robili to od lat, wiesz, aby przyjąć tę usługę, rodzaj, wiesz, udowodnij metal i tamte, wiesz, niepowodzenia i problemy, aby zapewnić różnorodność i elastyczność, jaką mają, to coś, co oferuje Redshift. Więc myślę, że dojrzał już dojrzałość, zdobyło się zaufanie, wiesz ... Myślę, że przeniknęło do wielu firm poprzez małe obszary, wiesz, małe przypadki użycia, małe próby, coś w rodzaju poza tym w pewnym sensie kontrola informatyczna, a dzięki temu, wiesz, udane projekty peryferyjne dowiodły teraz, teraz jest większa gotowość do rozmowy na temat tego, jak się to rozprzestrzeniło. I szczerze mówiąc, wiesz, pojawiło się dodatkowe narzędzie, które, jak wiesz, pojawiło się, aby je ułatwić, podobnie jak to, co robimy, i wiesz, istnieje nie tylko przenoszenie danych, ale także pokazanie wartości BI w chmurze i pokazując to.

Tak więc, w pewnym sensie, jest to z dnia na dzień lub duży wzrost w ostatnim roku, ale duża część tego była ciężką pracą nad tym, aby to osiągnąć. Tak więc teraz jako firma widzimy o wiele więcej adopcji. Jest to biznes dla tego, co robimy, dość mocno urósł, a chmura, wiesz, robimy wiele lokalnych ruchów. Teraz chmura pojawia się w wielu rozmowach jako, wiesz, prawdziwe przypadki biznesowe, prawdziwe przypadki odciążenia tam, gdzie przed rokiem było, wiesz, po prostu bardziej eksploracyjne. Teraz mają do zrealizowania prawdziwe projekty. Miło było widzieć ten ruch.

Eric Kavanagh: Dobra. Wspaniały. I Mike Miller, wspominałeś, że słyszałeś kilka prowokujących oświadczeń, które chciałbyś skomentować, więc, na pewno, co jest dla ciebie interesujące lub o czym chcesz rozmawiać?

Mike Miller: Och, myślę, że Robin, miał rację, a jego drugi do ostatniego slajd kontrastuje tam, gdzie liczy się innowacja. Chmura zawsze będzie drugim co do wielkości i chciałbym usłyszeć o tym trochę więcej, ponieważ w mojej głowie, jeśli myślałem o budowie, wiesz, aplikacji lub jakiejś nowej usłudze, trudno mi myśleć, że moja organizacja, bez względu na to, kim naprawdę są, naprawdę chce iść od inżyniera do inżyniera z Google, Amazon, IBM, Microsoft. Myślę, że może źle zrozumiałem jego punkt widzenia.

Eric Kavanagh: Interesujące. Robin, Mike rzucił rękawicę. Co myślisz?

Dr Robin Bloor: Cóż, chodzi mi o to, że napotkałem wiele sytuacji, w których ... natknąłem się na chmurę i wyszedłem z powrotem, a powodem, dla którego wyszli, było, wiesz, jeśli chodziło o to, aby mieć emocjonalnie, to było napędzane wydajnością, ale wydajność była tak naprawdę sednem aplikacji, która jest budowana, ponieważ nie mogli uzyskać niskiego opóźnienia, którego chcieli, a chmura nie była dla nich użyteczna. I, wiesz, sytuacja polegała na tym, że faktycznie wchodzili w chmurę, nawet jeśli mieli możliwość pomiaru zachowania sieci dla nich w chmurze i że obciążenia w chmurze z czymś, na co absolutnie nie mieli kontroli z tego powodu nie mogli stworzyć usług, których szukali, a to przewaga wydajności. Nie sądzę, że jest coś w kategoriach, wiesz, kodowania, które będą ograniczone, co możesz zrobić w chmurze.Poziom usług, ograniczenie ... jeśli to będzie część twojego krytycznego potencjału, to chmura nie będzie w stanie go dostarczyć.

Mike Miller: Racja. ... Doceniam to wyjaśnienie. Zgadzam się, że przejrzystość jest jedną z wielkich rzeczy, których pragną teraz użytkownicy różnych dostawców. Więc myślę, że poruszyłeś bardzo słusznie. Jeśli chodzi o wydajność, myślę, że tradycyjnie bardzo trudno było, wiesz, udać się do dostawcy usług w chmurze lub dowolnego dostawcy usług w chmurze i znaleźć dokładnie sprzęt, którego szukasz, ale zauważysz, że to rodzaj poprawy ante w wyścigu do zasadniczo darmowej przestrzeni dyskowej między Google a Amazonem i innymi konkurentami, i tak myślę, że widzisz presję, która wywiera na jazdę kosztem dysku SSD, pamięci flash itp. Myślę więc, że fajnie jest patrzeć Naprzód.

Dr Robin Bloor: Och, absolutnie słuszne, wiesz? Chodzi mi o to, że jedną z rzeczy, które się faktycznie dzieją, jest to, że nadchodzi druga fala. Pierwsza fala była, no wiesz, te wspaniale dostosowane usługi, o ile wiesz, to trochę Henry Ford; możesz go ponownie kolorować, dopóki jest czarny, ale wiesz, mimo to, ekstremalne obniżenie niektórych rodzajów kosztów posiadania centrum danych. Albo, po drugie, po zbudowaniu tych ogromnych centrów danych, zaczynają operatorzy chmury, nagle zaczynają odkrywać rzeczy, które naprawdę można zrobić. Nie mogłeś tego zrobić wcześniej, ponieważ nie miałeś skali. Sądzę więc, że jest druga fala, która do pewnego stopnia sprawi, że chmura stanie się jeszcze bardziej atrakcyjna.

Eric Kavanagh: Dobra. Dobry. Pozwólcie, że pójdę dalej i przyprowadzę Ashisha, bo zamierzam rzucić tutaj swoją architekturę. Zawsze uwielbiamy tego rodzaju slajdy architektury, które pomagają ludziom owinąć głowy wokół tego, co się dzieje. Myślę, że jedną rzeczą, która po prostu na mnie wyskakuje, jest oczywiście PRZĘDZA. Rozmawialiśmy o tym na wczorajszej odprawie. YARN nie jest drobną sprawą. Dla tych z was, którzy nie znają tej koncepcji, jest to „kolejny negocjator zasobów”. To naprawdę bardzo interesująca zmiana, ponieważ to, co się wydarzyło, dotyczy ruchu Hadoop, YARN to rodzaj wymiany silnika, jeśli chcesz. Nasz wczorajszy mówca będzie nazywał go systemem operacyjnym. To jest jak nowy system operacyjny Hadoop, który oczywiście składa się z hybrydowego rozproszonego systemu plików pod spodem, który w zasadzie jest przechowywaniem, gdy przejdziesz do niego, a następnie MapReduce jest tym, czego używałeś, aby używać HDFS. MapReduce jest absurdalnie ograniczającym środowiskiem pod względem sposobu wykonywania zadań. Tak więc celem YARN było uczynienie HDFS znacznie bardziej dostępnym i uczynienie całego ekosystemu Hadoop bardziej elastycznym i zwinnym. Ashish, zapytam cię w ogóle, skoro wspominasz tutaj o YARN, zgaduję, że jesteście zgodni z YARN lub mają certyfikat. Czy możesz coś powiedzieć o ... jak widzisz tę zmianę w grze Hadoop i Big Data?

Ashish Thusoo: Tak, jasne. Absolutnie. Więc myślę, że są dwie części ... Więc pozwól mi najpierw porozmawiać, wiesz, dlaczego YARN zostało zrobione, a następnie porozmawiaj o tym, jak to potencjalnie zmienia grę i co zasadniczo pozostaje takie samo, ty wiem, gdzie to nie zmienia gry. Myślę, że jest to ważna rzecz do zrealizowania również dlatego, że wiele razy wiesz, że przyłapujesz się na tym szumie powiedzenia, że ​​jest to nowa, błyszcząca rzecz i wiesz, wszystko idzie, wiesz, wszystkie problemy odejdą i tak dalej, i tak dalej. Ale najważniejsze jest to, że siłą i słabością interfejsu API MapReduce było to, że był to bardzo prosty interfejs API, a właściwie każdy problem, który można zorganizować wokół problemu sortowania, może być reprezentowany , ten interfejs API. A niektóre problemy są oczywiście, wiesz ... można naturalnie przekształcić w to, a niektóre problemy, wiesz, po prostu, jak tylko masz do dyspozycji MapReduce, wtedy próbujesz dopasować się do problemu sortowania.

Myślę więc, że w tym drugim przypadku YARN odgrywa rolę, rozszerzając te interfejsy API o, wiesz, możliwość komponowania, wiesz, map i redukcji oraz, wiesz, całą gamę różnych typów interfejsów API pod względem tego, jak dane mogą być dystrybuowane między tymi dwoma etapami itd. i tak dalej. Właśnie uczyniłeś ten interfejs API o wiele bogatszym. Więc teraz masz do dyspozycji różne sposoby rozwiązania tego samego problemu, prawda? Więc po prostu nie musisz być ograniczony przez interfejs API, a problem zostanie rozwiązany w taki czy inny sposób, wiesz, jeśli jesteś, wiesz, próbujesz przeprowadzić analizę, wiesz, obciążenie pracą, można wyrazić to w MapReduce, można wyrazić to w YARN. Duża różnica, która się zdarza, która zaczyna się zdarzać, to, wiesz, pod względem, wiesz, macierz wydajności, którą zaczynasz widzieć, wiesz, kiedy zaczynasz, powiedz programowanie do YARN, a w niektórych przypadkach, nowszy zestaw rzeczy, na przykład analiza strumieniowa itd., stają się rzeczywistością, kiedy zaczynasz, wiesz, robiąc to, wiesz, te rzeczy w YARN.

Są to różnice, które wiesz, że ta rzecz wniosła do ekosystemu. Myślę, że to dużo, bogactwo jest o wiele więcej po stronie API w przeciwieństwie do bycia innym menedżerem zasobów, szczególnie w chmurze. Jeśli myślisz o tym w chmurze, menedżer zasobów jest w rzeczywistości twoimi ... maszynami wirtualnymi, które wychowujesz, wiesz, masz virt ... wiesz, to niekoniecznie ... Znowu, to duża różnica powiedzmy, na wstępie, jak uruchamiasz klastry Hadoop i jak działasz w chmurze. Wiesz, podoba ci się ograniczony statyczny zestaw maszyn, chcesz rozdzielić te maszyny między różne zasoby i były one używane dla YARN tam. Ale w chmurze można wychodzić z maszyn po lewej i prawej stronie. I tak, tylko z perspektywy bycia menedżerem zasobów, prawdopodobnie nie ma tej większej potrzeby, a konkretnie w chmurze, ale z punktu widzenia zapewnienia tych, wiesz, bogactwa interfejsów API, które pozwalają, na przykład, Hive to inicjatywa, którą mogą teraz zaprogramować Hive, aby nie tylko korzystała z MapReduce, ale ma znacznie bogatsze plany wykonywania zadań i tym podobne. Przynosi te korzyści ekosystemowi. Myślę, że właśnie tam należy prawdziwa wartość YARN. A w chmurze zdecydowanie nie jest to interesujące z punktu widzenia zarządzania zasobami, ale jest o wiele bardziej interesujące pod względem tego, co umożliwia innym projektom, jeśli chodzi o obciążenia, które teraz, może teraz zostać wykorzystanym do zaprogramowania danych lub poprzednich obciążeń, które można wykonać w znacznie bardziej wydajny sposób.

Eric Kavanagh: Racja.

Ashish Thusoo: Miałem, wiesz, jeszcze jeden, wiesz, dodając do Mike'a, wiesz, była jeszcze jedna prowokująca rzecz, która została powiedzona, która jest w pobliżu i, wiesz, która była w pobliżu, hej, jeszcze potraktowanie chmury inne centrum danych. Myślę, że ty ... wiesz, to jest jeden punkt widzenia, na który większość firm, wiesz, patrzy i mówi, okej, wiesz, to jest najłatwiejszy punkt widzenia, żeby spojrzeć na powiedzenie tego, okej, wiesz, oznacza to, że masz na sobie kilka komputerów, wiesz, masz moc obliczeniową, masz pamięć masową i masz sieć w lokalnym centrum danych, a chmura zapewnia to samo. Tak więc zamierzam zrobić dokładnie to samo, co robię we własnym centrum danych na miejscu i zrobić to samo w chmurze i altówce - tak to powinno działać. To, co odkryliśmy, wiesz, po uruchomieniu chmur, dwóch chmur, w których, wiesz, masz możliwość zapewnienia maszyn wirtualnych w ciągu minuty, możliwość użycia wysoce skalowalnych obiektów do przechowywania danych i tego typu rzeczy . Odkryliśmy, że chmura, architektura chmury i te nieodłączne umiejętności umożliwiają różne sposoby robienia rzeczy, wiesz o tym, o czym mówiłem na slajdzie, no wiesz, całe pojęcie ... po prostu wiesz, w ... perspektywie samego Hadoopa, cała koncepcja po prostu uruchamiania klastra statycznego w porównaniu z dynamicznymi klastrami na żądanie, to jest coś, czego nie widzisz, że dzieje się w centrum danych typu pre-prem, wiesz, w przeciwieństwie do, wiesz, prawdziwej chmury, w której, wiesz, jest wystarczająca pojemność, aby móc obsłużyć tego rodzaju obciążenia.

Myślę więc, że zdecydowanie potrzebna jest zmiana. Wiesz, wielki strach dla mnie jest taki, że jeśli traktujesz chmurę jako kolejne centrum danych, tak naprawdę ... podczas gdy ty, wiesz, istnieje wiele innych korzyści, ale jest wiele wewnętrznych korzyści, które możesz zignorować jeśli wiesz, zacznij to robić, bezpieczeństwo to kolejny sposób, w jaki radzisz sobie z bezpieczeństwem i chmurą, istnieje wiele różnic pod względem tego, jak sobie z tym poradzisz, wiesz ... z premii perspektywa itd. Chciałem tylko dodać to z mojej perspektywy.

Eric Kavanagh: Jasne. Tak. Nie ma problemu. Mamy jednego uczestnika, który pyta o różnego rodzaju przypadki użycia, takie jak logistyka, a szczególnie HR, więc zwymiotowałem tę stronę Workday, chciałem zrobić kilka komentarzy na ten temat, a potem Gilbert, może przedstawię wam komentarz cała koncepcja architektury. Tak więc, jeśli chodzi o HR, faktycznie słyszałem raczej dobrze, nazwiję to, powiedzmy komentarz analityka kilka miesięcy temu, kilka miesięcy temu, jak sądzę, kilka miesięcy temu o przejściu do chmury dla działu kadr. Przeprowadziłem pewne badania w tym zakresie, aby dowiedzieć się, że wiele funkcji typu HR jest zlecanych do chmury, z pewnością takie rzeczy jak płace są obecnie dość łatwe do outsourcingu, programy świadczeń i ubezpieczenia, tego rodzaju rzeczy, ale jest naprawdę Poważne zastrzeżenie, o którym należy pamiętać i Gilbercie, chcę to skomentować z perspektywy architektonicznej, o której musisz bardzo uważać, gdy przeprowadzasz się do chmury w celu uzyskania jakiejś krytycznej usługi biznesowej, ponieważ albo chcesz być bardzo strategicznym i bardzo przemyślanym, co oznacza, że ​​przechodzisz przez proces upewnienia się, że rozumiesz, co się dzieje w chmurze i co pozostaje na miejscu, a ludzie z Attunity powiedzą ci, że to naprawdę jedna z rzeczy, które oni specjalizujemy się w nawiązywaniu takich połączeń, aby zapewniały one taką łączność, jakiej potrzebujesz, ponieważ dzieje się to z niektórymi organizacjami, do których się udają, i wykorzystają na przykład Dzień roboczy, aby umieścić niektóre swoje zasoby HR na kl oud, ale nie robią wszystkiego, nie robią wystarczająco dużo lub nie zastanawiają się wystarczająco, a co wtedy? Następnie chcą zarządzać środowiskiem chmurowym i ich oryginalnym środowiskiem lokalnym, co oznacza, zgadnij co? Po prostu zwiększył twój koszt, podwoiłeś obciążenie pracą i stworzyłeś masę bólów głowy dla ludzi, i to zwykle wtedy, gdy ktoś zostaje zwolniony, a facet, który wchodzi, ma prawdziwy bałagan do posprzątania. Tak więc naprawdę musisz przemyśleć architekturę danych, systemów i procesów oraz upewnić się, że umieściłeś wszystkie swoje I i przekreśliłeś wszystkie swoje, a po tym przekażę je Gilbertowi w celu uzyskania komentarzy. Zgaduję, że tak będzie, ale może nie.


Gilbert Van Cutsem: W porządku. Tak. Tak więc, przyszedł mi do głowy kolejny przykład czegoś podobnego, tylko wczoraj. Więc straciłem jednego z moich lekarzy, ponieważ wyszedł z biznesu. Nie wiem. Brzmi niesamowicie. Był kręgarzem i wyszedł z biznesu. Nie wiem dlaczego, ale chodziło o to - nie mam kręgarza i lubię chodzić do kręgarza, wiesz, czasami. Więc znajduję nowy i jest blisko, no wiesz, blisko i tak dalej. Wszystko jest dobrze. I tak idą, jak zwykle, musisz wykonać wszystkie formalności i dać nam znać, jeśli bla, bla, bla. Dobra wiadomość jest taka, że ​​mamy nowy system, ponieważ wiesz, że teraz jesteśmy w Internecie, w chmurze. Wszystko super. Idę, ok, wiesz, a oni mi link i muszę zrobić całą papierkową robotę online, co jest w porządku i umieszczam tam różne rzeczy, rodzaj tajemnicy, jak, wiesz, numery ubezpieczenia społecznego i tego typu rzeczy i kim jestem, ile mam lat ... wszystkie moje szczegóły. Umieszczam to wszystko i przesyłam, ponieważ oczywiście wierzę w technologię.

A potem idę do biura, następnego dnia na moje pierwsze spotkanie, a oni mówią: „Zrobiłeś formularz?” Mówię: „Tak, proszę pani”. „Okej. Później to znajdziemy.” Mówię: „Cóż, zrobiłem to”. I mówi: „Tak, wiemy, ponieważ jesteś dzisiaj piątą osobą, która weszła, podeszła do mnie i narzekała na to, że nie znalazła formy”. I mówię: „Ale nie możesz poważnie o tym mówić. To dość poufna informacja. Gdzie to jest?” Zdarzyło mi się to wczoraj, tak, co przywraca cały problem i cały pomysł, kto naprawdę jest właścicielem danych, prawda?

Wiem, że przenosisz się do chmury i ludzie wprowadzają ją do nowego systemu, tak jak w tym przypadku, mój kręgarz i oni subskrybują nowy system. Jest w chmurze, jest całkowicie bezpieczny, jest w pełni wielodostępny, kiedyś mieli system lokalny, wszystkie dane zostały przeniesione do nowego systemu, ale teraz najwyraźniej nie mogą go wydostać.

Eric Kavanagh: Tak. To nie jest dobrze.

Gilbert Van Cutsem: Więc nie wiem, gdzie są moje dane i zakładam, że naprawdę się wściekła, prawda? Mówi: „Och, to niemożliwe. Płacę ci pieniądze, a moi klienci, moi pacjenci, przepraszam, są niezadowoleni, a gdy dane zniknęły, chcę od ciebie uciec. Chcę przejść do innego systemu, może też w chmurze, prawda? Jak następnie przenieść dane pacjentów w tym przypadku, dane firmy do innego systemu? Jak go najpierw wyciągnąć, a następnie załadować ponownie? Jestem pewien, że ETL w chmurze jest jakoś odpowiedzią i mamy na to ekspertów, ale nie jest to takie proste.

Eric Kavanagh: Tak, ale to prawda i ludzie, wyrzuciłem ten drugi slajd tutaj, ten drugi, kolejny ekran, aby pokazać, gdzie można znaleźć archiwa. Więc za każdym razem, gdy chcesz się sprawdzić - och, jest wnętrze naszej witryny, nie chcę ci tego pokazywać. Oto główna strona, aw prawej kolumnie tutaj możesz zobaczyć inny program. TechWise jest tutaj. Klikasz na to i na te różne strony, na których faktycznie opublikujemy archiwa. Archiwizujemy wszystkie te webcasty.

Właściwie to chcę przekazać Mike'a, a potem także Lawrence'owi, aby skomentować tę historię, którą właśnie opowiedział Gilbert. Mike, jest coś w rodzaju, teraz jest to rodzaj małego biznesu. Jesteście bardziej skoncentrowani na dużym biznesie, ale mimo to, jeśli duża firma, która pracuje z wami i chce pójść gdzie indziej, jak zarządzacie tym przepływem danych i zabezpieczaniem danych i tak dalej?

Mike Miller: Tak. To bardzo dobre pytanie. Ten, który pojawiał się o wiele częściej niż obecnie w rozmowach handlowych, co uważam za interesujący, niepotwierdzony dowód na połączenie. Wiesz, myślę, że przede wszystkim mówimy o wielu technologiach, a przynajmniej o modelach zatrudnienia, które są stosunkowo nowe. To jest bardzo wcześnie w chmurze, prawda? Mówimy o takich rzeczach, jak chmura, aw przypadku danych mówimy o usługach analitycznych, takich jak Hadoop dla baz danych, a następnie formatach NoSQL lub NewSQL. Wiesz, są to zasadniczo nowe technologie, a zwłaszcza takie rzeczy, jak Hadoop i NoSQL, wszystkie usługi pomocnicze, konektory, prawda, ... wiesz, jeśli chcę znaleźć kogoś, kto konsultuje się z Oracle, to coś, co ja można znaleźć, ale cały ekosystem właśnie się teraz rozprasza.

Więc z dnia na dzień coraz łatwiej jest powiedzieć: ok, wiesz, daj mi usługę, która może czytać z tradycyjnego systemu x, umieścić go w Cloudant i zrobić coś z nim, a następnie umieścić z powrotem w tradycyjnym systemie, prawda? Więc teraz są bardzo, wiesz, istnieje sporo tych rzeczy i myślę, że jest to trudniejsze, dla typowego użytkownika, aby zrozumieć, jaki jest najlepszy wybór, prawda, jeśli chcę połączyć wszystkie nowe technologie na -prem, a następnie w chmurze.

Tak więc myślę, że jako dostawca usług w chmurze, to na nas sprzeciwiają się bardzo, aby pomóc użytkownikom przejść przez krajobraz możliwości, ponieważ zmienia się wiele nowych i myślę, że przeciętny użytkownik, czy to CTO, CIO lub czy faktycznie jest deweloperem, dość szybko zbliża się do tej krzywej uczenia się. Myślę, że opracowywanych jest wiele tego rodzaju podstawowych rzeczy, łączniki między chmurami i, wiesz, usuwając naprawdę najbardziej podstawowe obawy związane z powiedzmy, wiesz, kosztem przepustowości i czy wychodzisz na sieć rozległa w porównaniu do ciągłego korzystania z VPN przez cały czas. Wiele z tych rzeczy zostało trochę wyabstrahowanych i jaka jest prawdziwa obietnica chmury.

Ale ogólnie myślę, że widzisz także, wiesz, anegdotę, którą usłyszeliśmy, jest, wiesz, czymś, co prawdopodobnie jest izomorficzne, wiesz, co stanie się z zakupem marki, wiesz, w przeszłe życie, wiesz, co się stanie, jeśli ta marka nie dostarcza, na ile mogę naprawdę ufać tej marce? Myślę, że widzisz dokładnie to samo, co dzieje się w chmurze, i wiesz, myślę, że firmy takie jak Microsoft, Amazon, IBM i Google, wiesz, bardzo się zwiększają i mówią, że będzie co najmniej wiele filarów zaufanie i upewnienie się, że nie wchodzisz do firmy, która zamierza wysuszyć i połknąć twoje dane, albo, co gorsza, utracić je lub rozpowszechnić, prawda? Są więc przynajmniej niezależne i zakotwiczają, wiesz, rozwój takiego ekosystemu. Ale, mówię, aby zamknąć, jest bardzo wcześnie i wiele z tych narzędzi dopiero się zaczyna i, wiesz, myślę, że zobaczysz usługi konsultingowe, wiesz, naprawdę skupiając się na tym bardzo blisko semestr.

Eric Kavanagh: Tak. To naprawdę dobry komentarz, który właśnie tam napisałeś. Podoba mi się ta koncepcja „filarów zaufania”, ponieważ jeszcze jedną rzeczą, o której należy pamiętać, jest to, że po raz kolejny wielu zaciekłych konkurentów walczy o udział w rynku i zasięg IT, tak jak za dawnych czasów. Naprawdę, w dawnych czasach, przez co rozumiem w zeszłym roku, mieliście IBM, Oracle, Microsoft i SAP, a następnie Computer Associates i Informatica oraz wszystkie te firmy, Teradata itp. W nowym świecie, oczywiście, macie , Microsoft z ich Du Jour, masz Google, masz Amazon Web Services, wiesz, masz pewną przewagę. Tak więc masz wszystkie te firmy, które niekoniecznie są tak podekscytowane współpracą, ale masz takie rzeczy jak interfejsy API. I tak, jedną z miłych rzeczy, które API krystalizują się w złączach, które utrzymują razem większą chmurę, i chyba chcę rzucić slajd, aby Lawrence mógł to skomentować.

Tak, Lawrence, oczywiście, wyspecjalizowaliście się w kosmosie od jakiegoś czasu. Więc myślę, że masz niesamowitą przewagę nad być może nowicjuszami.Niemniej jednak są to bardzo poważne obawy, ponieważ sposób przechowywania danych w chmurze jest inny niż sposób przechowywania ich na miejscu. Potem myślę, że Mike ma naprawdę dobrą rację, że cała ta przestrzeń dopiero zaczyna się kształtować i zajmie to trochę czasu, zanim sprawy poważnie się ułożą i zaczną krystalizować. Jakie masz porady dla firm, które ... Zgadzasz się, w zasadzie zgadzasz się z Mikiem, albo co myślisz?

Lawrence Schwartz: Tak. Wydaje mi się, że widzimy to, kiedy ludzie korzystają z chmury dla wielu przypadków użycia w porównaniu z lokalnymi, wiesz, oni patrzą na coś w rodzaju, no wiesz, dwóch różnych rzeczy. Po pierwsze, patrzą, jak rozmawialiśmy o tym trochę wcześniej, jak ja ... jak to stopniowo zwiększa wartość tego, co robię, jak ja, no wiesz, jak to jest dodatek? I tak, wiesz, kiedy wracałem do tego, kiedy mówiłem o Etix jako firmie, w której, wiesz, nie przenoszą wszystkich swoich operacji do Redshift, wiesz, ale na każdy powiedzą, ale mówią: dużo pracy nad Oracle, chcę zaoferować trochę tego rodzaju analizom z różnych środowisk, wiesz, trochę wymyśl, może tam zajmij się piaskownicą, a potem dowiedz się w ten sposób o mojej firmie, i w ten sposób mogą wykroić to, czego chcą, przenieść to tam i wykonać pracę, a wiesz, mniej chodzi o przenoszenie, no wiesz, wszystko inne i wszystkie płyty i tak dalej. Myślę, że postrzegają to jako jeden ze sposobów, aby skorzystać z tego, mając mniej problemów.

Myślę, że drugą rzeczą jest to, że ludzie patrzą również na te przypadki, które są i nie są doskonale dopasowane do chmury, które są bardzo, bardzo trudne do wykonania w inny sposób. W takim razie wezmę inny przykład. Wiesz, współpracujemy z firmą o nazwie Wiesz, NA ŻYCZENIE. Są odtwarzaczem wideo na żądanie. Wykonują tę pracę dla Comcast i tego wszystkiego, i faktycznie, wezmą, wezmą dane, z którymi pracują, wezmą pliki multimedialne i dostarczą je do chmury do przetwarzania, tam przetwarzają , a następnie wykorzystają go z powrotem dla swoich lokalnych klientów. A potem, wiesz, to dostaje się na górę do stron trzecich, które zużywają recenzje. Więc, wiesz, jeśli chcesz pomyśleć o tym, w jaki sposób firma się do tego zbliża, to wiesz, w jaki sposób mogę uzyskać ... jak mogę dodać wartość, jak mogę na początku nie poruszyć całego biznesu , jak uzyskać odpowiednie przypadki użycia, jak dodać wartość przyrostową do tego, co robię? To pomaga w pewnym stopniu budować zaufanie do tego, co robią i jako część procesu, i oczywiście, wiesz, kluczowym elementem jest to, wiesz, upewnienie się, że mogą to zrobić bezpiecznie i niezawodnie, a ty Wiemy, że dbamy o najnowsze poziomy szyfrowania i inne rzeczy, aby zająć się tym tak bardzo, jak to możliwe po stronie transportu. Ale tak myślę, że wiele firm podchodzi do problemu.

Eric Kavanagh: Dobra. Dobry. I może Ashish, zadam ci ostatnie pytanie. Właśnie wymiotuję, właściwie podoba mi się twój slajd architektury. Nawet ten slajd wydaje mi się całkiem fajny. Tak więc, jednym z pytań w, oczywiście, HDFS, z założenia domyślnie jest zapisywanie każdego kawałka danych trzy razy. Możesz to zmienić, oczywiście, możesz zrobić to dwa razy, możesz zrobić to cztery razy, co oczywiście zapewnia pewien czas narzut, ale jest to sposób tworzenia kopii zapasowych danych. W każdym razie, to był cały pomysł, jednym z kluczowych pomysłów, właśnie z HDFS pierwotnie jest nadmiarowość, nie chce tracić danych. Zastanawiam się, jak to wpłynie na takie rzeczy jak serwery replikacji, szczerze mówiąc, kiedy Hadoop robi to natywnie.

Ale jeden z uczestników pyta: „Czy możesz poprosić o fizyczne kopie zapasowe, takie jak taśma do danych w chmurze? Czytam o firmie, której zhakowano konsolę zarządzania chmurą, a ich dane i kopie zapasowe zostały zniszczone”.

Wiesz, cały czas słyszymy o tych naruszeniach, stają się coraz poważniejsi, zabijają główne marki, takie jak Target, jak Home Depot itp. Tak więc bezpieczeństwo jest problemem, a tworzenie kopii zapasowych i przywracanie jest problemem. Czy możesz trochę porozmawiać o tym, jak rozwiązujecie takie kwestie, jak tworzenie kopii zapasowych, przywracanie i bezpieczeństwo?

Ashish Thusoo: Tak, jasne. Więc my ... Więc porozmawiam o tym i najpierw porozmawiam o HDFS. Więc jeśli chodzi o Qubole, wiesz, my ... ponieważ pracujemy w chmurze, używamy przechowywanych tam obiektów do przechowywania danych. I znowu, jest to jedna z innych kluczowych różnic, dlaczego, wiesz, usługa dużych zbiorów danych w chmurze różni się od wstępnej. Na wstępie zawsze rozmawialiśmy o HDFS itd., Ale jeśli przejdziesz do chmury, wiele danych jest faktycznie przechowywanych w ich obiektach. Może to być na przykład S3 w AWS, Google Cloud Storage w Google Cloud, Google Compute Engine i tak dalej.

Teraz wiele z tych magazynów obiektów ma wbudowane możliwości dostarczania rzeczy, wiesz, te magazyny obiektów, nawiasem mówiąc, jednym z dużych wyróżników od prawdziwych chmur do faktycznie własnego centrum danych jest ich obecność sklepy obiektowe i powód, dla którego te magazyny obiektowe są fajnymi technologiami, wiesz, są w stanie zapewnić ci bardzo tanie miejsce do przechowywania, a wraz z tym są w stanie zapewnić ci takie rzeczy, jak, wiesz, posiadanie zdolności do posiadania wbudowana funkcja odzyskiwania po awarii i, wiesz, jako część tego interfejsu, nie musisz o tym myśleć. A także, że są wielopoziomowe, wiesz, tam też jest poziom. Na przykład S3 ma wysoką dostępność i dostęp online, ale jest znacznie droższy. Jest droższy niż, powiedzmy, schowek na lodowcu w AWS, który jest niski, wiesz, daje, wiesz, czas realizacji wynosi około czterech godzin lub coś takiego i jest znacznie tańszy. Więc zaczynasz myśleć o tego typu usługach. Myślę, że dostawcy usług w chmurze zasadniczo świadczą tego rodzaju usługi, aby zwiększyć potrzebę takich rzeczy, jak taśmy i tak dalej. A także, aby zapewnić odzyskiwanie po awarii, a raczej, wiesz, replikację wbudowaną w te systemy, abyś wiedział, że jesteś chroniony przed katastrofami, katastrofami regionalnymi i tym podobnymi.

Tak więc, od tego mocno zależy Qubole, a wielką zaletą jest to, że wielu ... wszystkich dostawców chmury zapewnia to. Są to zasadniczo bardzo trudne problemy do rozwiązania, a ponieważ są wbudowane w niektóre magazyny obiektów, które ci dostawcy chmur zapewniają, wiesz, to kolejny dodatkowy powód przechowywania tych danych w niektórych z tych obiektów przechowuje i używa do tego chmury, a nie próbuje, wiesz, wymyślić, wiesz, replikacja, uruchomić dwa klastry Hadoop w różnych, wiesz, regionach i, wiesz, próbować replikować dane z HDFS z jednego regionu do drugi, co jest wykonalne, robiliśmy to dużo, kiedy wróciłem do uruchamiania tych rzeczy, ale, wiesz, zasadniczo, przechowywanie obiektów w chmurze po prostu ułatwiło to.

Eric Kavanagh: Dobra. Wspaniały! Cóż, ludzie, spaliliśmy około godziny i 15 minut, wiele świetnych pytań i wiele świetnych prezentacji. Bardzo dziękuję dziś wszystkim naszym dostawcom i oczywiście obu naszym analitykom podczas dzisiejszego programu. Ogromne podziękowania, oczywiście, Qubole, Cloudant i Attunity. Zamieścimy archiwum na insideanalysis.com. Pokazałem ci, dokąd to zmierza, a także wielkie podziękowania dla naszych przyjaciół z Techopedia.

Tak więc, dziękuję jeszcze raz za poświęcony czas i uwagę. To kończy odcinek 3 TechWise, naszego stosunkowo nowego programu. Wkrótce nadejdzie odcinek 4. Będzie w ekosystemie dużych zbiorów danych. Więc szukaj informacji na ten temat. I do tego czasu, ludzie, dziękuję bardzo. Spotkamy się następnym razem. Dbać. PA pa.