python和hadoop有啥联系

hadoop 是 java 开发的,但并不是说开发 hadoop 就一定要使用 java.例如:Writing An Hadoop MapReduce Program In Python
■网友
我觉得他是让你学python,写爬虫,收集数据之后再写hadoop的应用去分析你收集的数据
■网友
虽然说Hadoop是java, Spark是scala,但是大数据领域用python的还是很多,一来有诸如numpy/scikit-learn/pandas甚至tensorflow这样的统计/ML framework,二来很多ETL的framework也是用Python写的比如luigi/airflow。
■网友
一个是编程语言,一个是大数据实现,这完全是两个不同领域的概念。我能想到的关系是这样的:如果Hadoop提供对Python的接口的话,就可以用Python调用Hadoop实现大数据的一些功能


    推荐阅读