storm-core maven

stormcore.jar是一款綜（zōng）合編程類應（yīng）用程序，提供Apache Kafka集成改（gǎi）進（jìn）、Storm SQL數據庫、PMML（預（yù）測模型標記語（yǔ）言）支（zhī）持、HDFS噴口等（děng）功能，是用戶實現（xiàn）匯（huì）編語言的有效助手，綠（lǜ）色資（zī）源網歡迎大家下載官（guān）方（fāng）最新版！

storm core maven官網介（jiè）紹

storm-core1.1.0此版本是Apache Storm發展的重大裏程碑，包（bāo）括大量新功能，可用性和性（xìng）能改進，其（qí）中一些（xiē）在下麵突出顯示。

Storm的SQL支（zhī）持包括以下功能（néng）：

通過ISqlTridentDataSource接口擴（kuò）展附（fù）加數據源

從（cóng）/到（dào）外部來源，包括Apache Kafka，HDFS，MongoDB和Redis

CSV，TSV和Avro輸入/輸出格（gé）式

生成組件的用戶定義的平行

用戶定義函數（UDF）

元組過濾

預測

storm core.jar拓撲部（bù）署增強（qiáng）功能

在以前版本的Storm中，通常需要將所有拓撲依（yī）賴關係包含在陰（yīn）影的“uber jar”中，或者通過使其在Storm的類路徑上（shàng）可用。在Storm 1.1.0中，該storm jar命令（lìng）現在包括在拓撲提交期間上（shàng）傳附加依賴項的選項。該--jars命令（lìng）行選（xuǎn）項允許用戶指定本地（dì）的（de）jar文件（jiàn）上傳。或者，該storm jar命令提供了--artifacts通過（guò）其Maven坐標來指定其他jar文件依賴（lài）關係的選項。最後，對於Maven Central之外的Maven工件，該（gāi）--artifactRepository選項允許用戶指定（dìng）附加存儲庫以進（jìn）行依賴性解（jiě）析。

資（zī）源意（yì）識（shí）調度（RAS）改進

在（zài）Storm 1.0中引入的資源感知調（diào）度程序（xù）添加了（le）一個（gè）考（kǎo）慮了集群中可用的內（nèi）存（堆和堆）和CPU資源（yuán）的（de）調度程序實現。在風（fēng）暴（bào）1.1.0中，RAS算法進行（háng）了大修，大大提（tí）高了集群（qún）資（zī）源利用率，並將機架知名度引入（rù）了調度策略。

有關RAS新功能的更多信息，請參（cān）見RAS文檔和引入新的機架感知算法的JIRA故障單（dān）。

外（wài）部組件移動到Maven Central

大多數外部組件現在（zài）僅在Maven Central中托管。外部（bù）組（zǔ）件目錄（lù）將包（bāo）含README.md文件，但不（bú）包含jar文件。我們鼓（gǔ）勵（lì）用戶利（lì）用Maven風格依賴解析（Maven，Gradle等（děng））構建係（xì）統來（lái）構建拓（tuò）撲jar，並避免手動（dòng）構建拓撲。

這些組（zǔ）件的Maven坐（zuò）標可以如下確定：

組ID：org.apache.storm Artifact ID：組件目錄名稱 版本：1.1.0

二（èr）進製分（fèn）配的（de）重要變化

為了最小（xiǎo）化二進製（zhì）分（fèn）發的文（wén）件（jiàn）大小，不再包含外部組件（即“連接器”）二進製文件和已編（biān）譯的（de）示例。示例僅包含在源（yuán）代碼中，但可以使用Maven mvn install命令輕鬆（sōng）編譯。

HDFS噴口

Storm的HDFS集成現在包括一個從HDFS文件（jiàn）係統（tǒng）連續流式傳輸數據的噴口。Storm的HDFS端口監視（shì）新文件的可配置目錄，並將數據饋入拓撲。當spout完成處（chù）理（lǐ）文件時，它將被移動到已配置的（de）歸檔目錄。如果文（wén）件已（yǐ）損壞（huài）或以其他方式不（bú）可處（chù）理，相應（yīng）的文件（jiàn）將（jiāng）被移動到特定目錄（lù）。通（tōng）過一個確保每個文（wén）件由單個噴口實例“擁（yōng）有（yǒu）”的（de）鎖（suǒ）定機製可以實現噴口的並行性。HDFS端（duān）口支持連接到使用Kerberos身份驗證保（bǎo）護（hù）的HDFS實例。