概要
Apache Hadoopは、Hadoop Common、分散storageのHDFS、resource管理のYARN、batch processingのMapReduceなどを同じsource treeで開発するdata基盤です。長期運用されるclusterや既存Hadoop ecosystemを支えるcomponent群を提供します。
特徴と向いている用途
公式資料に基づく紹介・実機未検証 · 内容確認日:
分散storage・resource管理・batch処理をmoduleで構成する
repositoryのBUILDING.txtは主要moduleとしてHadoop Common、Hadoop HDFS、Hadoop YARN、Hadoop MapReduce、各種toolを列挙します。source tree全体をMaven reactorでbuildし、moduleごとのtestやnative componentも含む大規模なmulti-module projectです。
出典:[2]
既存のHadoop clusterとdata processing資産を保守・拡張する場合
HDFSへ置いた大規模dataをYARN上のjobで処理する既存環境、Hadoop APIやtoolに依存するpipeline、オンプレミスの長期data基盤を維持する組織の候補です。新規採用では、より小さな構成やobject storage、別のquery engineと比べ、運用要員と互換性の価値を評価してください。
出典:[2]
8行のREADMEではなくrelease別公式文書を起点にする
rootのREADME.txtは公式siteとwikiへのリンクだけで、導入・設定・upgrade情報を含みません。trunkのsource buildにはJava、Maven、native toolchainなど複数の前提があり、productionでは選んだreleaseのcomponent別documentと互換表を参照してください。repositoryのlicenseはApache-2.0です。
参考にした公式資料
- [1]Apache Hadoop README.txt(2026-09-13)
- [2]Apache Hadoop BUILDING.txt(2026-09-13)
- [3]Apache Hadoop license(2026-09-13)
編集部からの補足
同名異物の少ない造語で長年の検索資産を持つ一方、root READMEとtopicsが極端に簡素で、外部公式文書が発見を支える例として選びました。
成長
成長の推移 · 直近30日
15,658 Stars
推移データを蓄積中です。
開発アクティビティ
直近90日・週次
- Commit(直近30日)
- 22
- Open PR
- 226
開発アクティビティを蓄積中です。
Built with
カテゴリとタグ
カテゴリ
GitHubデータ
GitHubのデータGitHubの詳細データを見る
GitHub Topics
- hadoop
- Stars
- 15,658
- Forks
- 9,242
- Watchers
- 954
- Open Issues
- 0
- 主要言語
- Java
- ライセンス
- Apache-2.0
- リポジトリ最終更新
- 2026/09/13
あわせて探訪
- Apache Airflow46,842 Stars
PythonでDAGを定義し、batch・data・ML workflowをschedule・実行・監視する基盤。
Python - Apache Spark43,989 Stars
SQL・DataFrame・batch・stream・machine learningを統合する大規模data processing engine。
Scala - Apache Kafka33,715 Stars
data pipeline・streaming analytics・system連携を支える分散event streaming platform。
Java - Apache Flink26,336 Stars
event time・window・exactly-onceを備え、streamとbatchを処理するstateful data framework。
Java - RabbitMQ13,849 Stars
AMQP・MQTT・STOMP対応のqueueとstreamで非同期messageを配送するbroker server。
JavaScript
情報の誤りを報告
掲載内容に誤りや古い情報があればお知らせください。