Mongodb 源码简介。

1. ⼀一个 MongoDB
Command 的前世今⽣生
庄晓丹丹@LeanCloud
2017.06.23

2. 插⼊入⼀一个⽂文档，中间了了发⽣生了了什什么？
• 测试代码： MongodbTest.java

3. Java Driver
• MongoClient 建⽴立和管理理连接
• Cluster
• SingleServerCluster
• MultiServerCluster
• Server
• DefaultServer
• MongoDatabase 和 MongoCollection 指向 DB 和 collection
• 元信息和配置保存
• Document : Binary JSON
• insertOne 发⽣生了了什什么？

4. insertOne(doc)

5. Request-Response Style
• Mongodb Wire Protocol
• sendMessage
• receiveMessage
• WriteCommandProtocol#execute

6. Driver ⼩小结

7. Server
• https://github.com/mongodb/mongo
• cloc 源码统计 src/mongo：

8. ⽹网络和业务框架
• src/mongo/transport, src/mongo/util/net
• TransportLayer
• Listener： 处理理链接接⼊入， select 原语
• MessagingPort： ⽹网络链接，封装 socket
• ServiceEntryPoint ：业务处理理
• Session：链接会话，封装 Connection -> MessagingPort
• 直接⼦子类 ServiceEntryPointImpl 和实现类：
• Mongod： Mongodb 数据库服务器器
• src/mongo/db/service_entry_point_mongod.cpp
• Mongos: MongoDB 分⽚片路路由服务
• src/mongo/s/service_entry_point_mongos.cpp

10. 链接接⼊入
• Listener::initAndListen
• Listener::accepted(AbstractMessagingPort)
• TransportLayerLegacy::_handleNewConnection(AbstractMessaging
Port)
• ServiceEntryPoint::startSession(session)
• ServiceEntryPoint::launchWrappedServiceEntryWorkerThread
• ServiceEntryPoint::_sessionLoop(session)
• ServiceEntryPoint::handleRequest(context, message,
remote)

11. 请求处理理
• ServiceEntryPointImpl::_sessionLoop
• sesson->sourceMessage(inMsg)
• dbresponse = this->handleRequest(ctx, inMsg,
remote)
• session->sinkMessage(dbresponse.response)

12. 可插拔的存储引擎设计
• src/mongo/db/storage
• src/mongo/db/wiredtiger
• src/mongo/db/mmap_v1
• StorageEngine: the StorageEngine class is the top level
interface for creating a new storage engine.
• RecordStore: a RecordStore provides an abstraction used
for storing documents in a collection,

13. 数据库服务器器框架
• ⼊入⼝口：ServiceEntryPointMongod
• 命令处理理： assembly_response.cpp
• assembleResponse(ctx, msg, remote)
• 命令管理理: commands.cpp，查表法
• static CommandMap* _commands;
• 操作： src/mongo/db/ops
• 数据库模型：src/mongo/db/catalog
• 数据库管理理：DatabaseHolder
• typedef StringMap<Database*> DBs;
• DBs _dbs;
• 数据库：Database
• typedef StringMap<Collection*> CollectionMap;
• CollectionMap _collections;
• Collection：Collection
• RecordStore* const _recordStore;

15. 插⼊入命令处理理
• ServiceEntryPointMongod::handleRequest
• assembleResponse(ctx, request, client)
• runCommands(ctx, req, rb)
• WriteCommand:run(ctx, dbname, obj, err, result)
• CmdInsert::runImpl(ctx, dbname, obj, err, result)
• performInserts(ctx, InsertOp)
• insertBatchAndHandleErrors
• CollectionImpl::_insertDocuments
• _recordStore->insertRecords

16. MMapV1 存储引擎
• src/mongo/db/storage/mmap_v1
• 每个 db:
• ⼀一个namespace⽂文件 xxx.ns
• 多个数据⽂文件 xxx.0, xxx.1 …

17. 数据组织
来源：http://www.mongoing.com/archives/1484

18. 更更多
• 索引管理理
• WiredTiger 引擎
• 复制
• 分⽚片
• ……