Facebook一直是大數據技術最積極的應用者，因為它擁有的數據量極其巨大，一份資料顯示2011年它擁有的壓縮數據已經有25PB，未壓縮數據150PB,每天產生的未壓縮的新數據有400TB。

在Facebook，大數據技術被廣泛應用在廣告、新聞源、消息/聊天、搜索、站點安全、特定分析、報告等各個領域。 Facebook也是Apache大數據開源項目的最大貢獻者之一。 Facebook是2007年前後正式轉向Hadoop計算框架，隨之它向Apache基金會貢獻了大名鼎鼎的Hive、ZooKeeper、Scribe、Cassandra等開源工具，當前Facebook的開源進程仍在積極推進著。 Facebook大數據技術架構經歷了三個演變階段。

Facebook早期的大數據技術架構是建立在Hadoop、HBase、Hive、Scribe等開源工具基礎上的。日誌數據​​流從HTTP服務器產生，通過日誌收集系統Scribe耗費秒級時間傳送到共享存儲NFS文件系統，然後通過小時級的Copier/Loader（即MapReduce作業）將數據文件上傳到Hadoop。數據摘要通過每天例行的流水作業產生，它是基於Hive的類SQL語言開發，結果會定期會更新到前端的Mysql服務器，以便通過OLTP工具產生報表。 Hadoop集群節點有3000個，擴展性和容錯性方面的問題能夠很好地解決，但是早期系統的主要問題是整體的處理延遲較大，從日誌產生起1～2天后才能得到最終的報表。

Facebook當前的大數據技術架構是在早期架構基礎上對數據傳輸通道和數據處理系統進行了優化，如圖所示，主要分為分佈式日誌系統Scribe、分佈式存儲系統HDFS和HBase、分佈式計算和分析系統（MapReduce、Puma和Hive）等。 Facebook大數據技術架構的演進路線。

其中，Scribe日誌系統用於聚合來自大量HTTP服務器的日誌數據。 Thrift是Facebook提供的軟件框架，用於跨語言的服務開發，能夠在C 、Java、PHP 、Python和Ruby等語言之間實現無縫的支持。採用Thrift RPC來調用Scribe日誌收集服務進行日誌數據匯總。 Scribe Policy是日誌流量和模型管理節點，將元數據傳送給Scribe客戶端和Scribe HDFS，採集的日誌數據存儲在Scribe HDFS。 Facebook對早期系統優化後的數據通道稱為Data Freeway，能夠處理峰值9GB/s的數據並且端到端的延遲在10s以內，支持超過2500種的日誌種類。

Data Freeway主要包括4個組件，Scribe、Calligraphus、Continuous Copier和PTail。 Scribe用於客戶端，負責通過Thrift RPC發送數據；Calligraphus在中間層梳理數據並寫到HDFS，它提供了日誌種類的管理，利用Zookeeper進行輔助；Continuous Copier將文件從​​一個HDFS拷貝到另一個HDFS； PTail並行地tail多個HDFS上的目錄，並寫文件數據到標準輸出。在當前架構中，一部分數據處理仍然以批處理的方式通過MapReduce進行小時級的處理，存儲在中央的HDFS，每天通過Hive進行分析處理。另一部分接近實時的數據流則通過Puma來進行分鐘級的處理。 Facebook對專門分析提供Peregrine（Hipal）工具、對周期性分析提供Nocron工具進行分析。

Facebook未來的大數據技術架構的雛形已經出來。首先開源的是可能替代Hadoop系統中MapReduce的Corona，類似於Yahoo提出的YARN。 Corona最大的一個進步是其集群管理器做到了基於CPU、內存和其他作業處理的需求資源的管理，這可以使得Corona既可以處理MapReduce 作業，也可以處理非MapReduce 作業，使Hadoop集群的應用領域更加廣泛。二是Facebook最新的交互式大數據查詢系統Presto，類似於Cloudera的Impala和Hortonworks的Stinger，解決了Facebook迅速膨脹的海量數據倉庫快速查詢需求。據Facebook稱，使用Presto進行簡單的查詢只需要幾百毫秒，即使是非常複雜的查詢，也只需數分鐘便可完成，它在內存中運行，並且不會向磁盤寫入。第三是Wormhole流計算系統，類似於Twiitter的Storm和Yahoo的Storm-YARN。第四個重要項目是Prism，它能夠運行一個超大的、能夠將全球數據中心都連起來的Hadoop集群，可能在一個數據中心宕掉的時候即時的將數據重新分佈，這是一個與Google的Spanner類似的項目。

Facebook的大數據技術架構演進路徑代表了大數據技術的發展路線，難能可貴的是，開源是Facebook一貫的路線，它和Yahoo等公司一起為大數據技術的發展作出了巨大貢獻。