SpringOne2GX 2015 回顧:Hadoop 工作流程、分散式 YARN 應用程式與 Spring

新聞 | Pieter Humphrey | 2016 年 3 月 08 日 | ...

於 SpringOne2GX 2015 錄製 演講者:Thomas Risberg Big Data Track 簡報:http://www.slideshare.net/SpringCentral/hadoop-workflows-using-spring-technologies

Hadoop 生態系統變得越來越大且越來越複雜。 使用此生態系統中的多個專案時,您將必須處理這些專案所推廣的哲學和使用模式的差異。"Spring for Apache Hadoop" 專案使用許多 Spring 專案(如 Data、Integration、Batch 和 Boot)來解決許多這些問題。 它透過提供統一的配置模型和易於使用的 API,簡化了 Apache Hadoop 的開發,以便使用 HDFS、MapReduce、Pig 和 Hive。 如果您使用 "Spring for Apache Hadoop" 專案,您可以在跳轉到為 Apache Hadoop 撰寫應用程式和工作流程時,利用您現有的 Java 和 Spring 技能。 在本次簡報中,我們將了解它如何簡化使用 Map Reduce、Spark、Hive 和 Pig 任務開發工作流程,同時提供跨 Apache、Cloudera、Hortonworks 和 Pivotal 發行版的移植性。

我們也將展示 Spring Cloud 在建構可以在 Hadoop YARN 上運行的分散式應用程式時的實用性,這些應用程式使用集中式配置、領導者選舉、分散式鎖定和狀態。

取得 Spring 電子報

透過 Spring 電子報保持聯繫

訂閱

搶先一步

VMware 提供培訓和認證,以加速您的進展。

了解更多

取得支援

Tanzu Spring 在一個簡單的訂閱中提供 OpenJDK™、Spring 和 Apache Tomcat® 的支援和二進位檔案。

了解更多

即將舉行的活動

查看 Spring 社群中所有即將舉行的活動。

檢視全部