Jak stworzyć scentralizowany pulpit do monitorowania wielu chmur (Amazon i Google)?

Szukam pojedynczego produktu lub usługi, która mogłaby być używana jako scentralizowany pulpit do monitorowania infrastruktury chmury dostarczanej przez Amazon Web Services i Google Cloud Platform oprócz aplikacji.

Patrzę na kilka opcji, takich jak sensu, które obsługują wszystkie usługi w Amazon Web Services , ale nie znalazłem żadnych wtyczek do monitorowania Google Cloud Platform.

Czy są jakieś inne usługi lub produkty, które pozwalają mi to stworzyć, preferuję Open Source?

Uwaga: każdy ma dostęp do GCP i AWS, a jeśli ktoś coś uruchomi, łatwo będzie mieć jeden pulpit do monitorowania.

Myślę, że szukasz projektu Open Source, który może pobierać dane wejściowe zarówno z Amazon CloudWatch, jak i Google StackDriver ; w tej chwili nie ma tam ogromnej ilości, ale opiszę to, co wiem.

Przyjąłem założenie, że wiesz, jak zaimportować dane telemetryczne aplikacji do poniższych rozwiązań.

Otwarte źródło

Rozwiązania tego problemu dotyczące oprogramowania typu open source opóźniają się ze względu na korzystne ceny SaaS i rozwiązań wbudowanych. Poniższe produkty stale się rozwijają, więc jeśli nie zrobią tego, czego potrzebujesz teraz, mogą być w przyszłości.

• Elastic Stack , wcześniej znany jako stos ELK, składa się z trzech pojedynczych produktów z Elastic.co: ElasticSearch, LogStash i Kibana. Można pobierać dane z CloudWatch za pomocą wtyczki i eksportować dane StackDriver do Google Pub / Sub, a następnie przetwarzać do LogStash .
• Grafana , jest nieco lepszy niż Kibana w wyświetlaniu danych szeregów czasowych. Jednak nie ma wokół tego tak silnego ekosystemu. Grafana ma wbudowaną obsługę Amazon CloudWatch , Google StackDriver nie jest jeszcze obsługiwany . Jednak ktoś pracuje nad tym w formie wtyczki.

Oprogramowanie jako usługa (SaaS)

Oprogramowanie do monitorowania usług jako usługa jest rynkiem wartym wiele miliardów dolarów, ponieważ duże przedsiębiorstwa chętnie zapłacą za SaaS lub gotowe rozwiązanie za wyzwanie związane z deską rozdzielczą.

• New Relic , bardzo dojrzały produkt z szeroką obsługą chmury, w tym przetwarzaniem danych CloudWatch i danych Google Cloud Storage .
• Splunk , nieco bardziej skoncentrowany na logach niż metrykach, ma jednak dobre wsparcie dla AWS CloudWatch i Google Cloud Platform .
• Google Stackdriver , oczywiście ma dobre wsparcie dla Google Cloud Platform, jest również w stanie odczytać wskaźniki wydajności z AWS.
• DataDog jest moim ulubionym, posiada szeroki zakres integracji, w tym obsługę Amazon Web Services i Google Cloud Platform .

Pojedyncza tafla szkła

W ciągu ostatnich trzech lat różne produkty trafiły na rynek jako „pojedyncza tafla szkła” . Zaletami tych produktów są:

• Platformy heterogeniczne - możesz użyć wielu różnych narzędzi i produktów do monitorowania, a następnie ujednolicić je za pomocą pojedynczej tafli szkła.
• Normalizacja danych - większość narzędzi do monitorowania cechuje się osobliwościami w sposobie prezentacji danych. Pojedyncza tafla szkła pomaga znormalizować je, dzięki czemu dane z Google, Amazon i Twojej aplikacji mają sens, gdy są wyświetlane na tym samym wykresie.
• Business View - Pojedyncza tafla szkła zazwyczaj ma możliwość integracji ze nietechnicznymi źródłami danych. Jako przykład wyświetlania danych z narzędzi finansowych, aby pokazać miarę sukcesu w biznesie. Ten widok przedstawia niektóre atrakcyjne kokpity na poziomie C, które pokazują, w jaki sposób technologia zapewnia wartość dla firmy.