比较Hadoop、Spark和Kafka大数据框架
大约十年前，大数据开始流行。随着存储成本不断下降，很多企业开始存储他们获取或生成的大部分数据，以便他们可以挖掘这些数据，以获得关键的业务洞察力。 企业分析所有这些数据的需求推动着各种大数据框架的开发，…
- 2026年06月15日
- 星期一
Uber 容器化 Apache Hadoop 基础设施的实行
随着 Uber 的业务持续增长，我们用了 5 年时间扩展 Apache Hadoop（本文中称为Hadoop），部署到了 21000 多台主机上，以支持多种分析和机器学习用例。我们组建了一支拥有多样化…
Hadoop、Spark、Hive究竟是什么，做算法要不要学？
最近我发现，很多萌新说着想要做算法工程师，但是却对这个岗位的要求以及工作内容一无所知。以为学一个Python，再学一些机器学习、深度学习的模型就可以胜任了。工作就是用Python不停地写模型。 显然，…
可算有人把 Hadoop 生态的主要讲明白了！
Hadoop是一个由Apache基金会开发的分布式系统基础架构。开发人员可以在不了解分布式底层细节的情况下开发分布式程序，充分利用集群的威力进行高速并行运算以及海量数据的分布式存储。Hadoop大数据…
使用Hortonworks Hadoop？现在你可以依靠更稳定的关键
软件稳定性是大公司的关键要求，霍顿工厂正在逐步朝着其企业Hadoop软件的新版本Cadence迈出了一大步。 从Hortonworks数据平台开始，该公司现在正在使用，该公司正在采用双管齐下的方法来更…
Yahoo公开Hadoop的源代码
根据国外媒体报道，Yahoo公布了Hadoop的源代码，Hadoop是一个开源的Java并行编程框架，它是Map/Reduce的开源版本，而Map/Reduce则是Google用在计算机簇上对大规模数…
当Hadoop碰到DNA遗传科学
对于Ancestry.com（家谱网）的技术总监Scott Sorensen来说，大数据其实并不陌生。长久以来，Sorensen和他的同事都在使用Apache Hadoop以及其他的开源工具来进行数据…
Hadoop究竟是什么玩意？
文章的标题看上去很幼齿很科普，但实际上那些天天观赏大数据演讲的管理层技术小白来说，他们永远不会公开问出这个问题。 大数据是个铺天盖地的词，而谈论大数据又不可避免地要提到Hadoop，遗憾的是今天大多数…
Hadoop崛起对数据仓库有多大的作用
在过去三年，Hadoop生态系统已经大范围扩展，很多主要IT供应商都推出了Hadoop连接器，以增强Hadoop的顶层架构或是供应商自己使用的Hadoop发行版。鉴于Hadoop的部署率呈指数级的增长…
化繁为简 规划Hadoop有妙招
作为大数据技术的典范，Hadoop一直为采用大数据的企业祝福并诅咒着。Hadoop功能强大，却非常复杂，这使得很多企业都宁愿等待更容易的东西问世，再推出大数据项目。 等待已经结束。Hadoop在稳步前…
