张友东（林青）_个人页

2020年06月

• 06.28 11:08:05
  发表了文章 2020-06-28 11:08:05

  物联网数据库 IoTDB 解析

  Apache IoTDB 是专为物联网时序数据打造的数据库，提供数据采集、存储、分析的功能。IoTDB 提供端云一体化的解决方案，在云端，提供高性能的数据读写以及丰富的查询能力，针对物联网场景定制高效的目录组织结构，并与 Apache Hadoop、Spark、Flink 等大数据系统无缝打通；在边缘端，提供轻量化的 TsFile 管理能力，端上的数据写到本地 TsFile，并提供一定的基础查询能力，同时支持将 TsFile 数据同步到云端。

  

2019年09月

• 09.30 16:27:52
  发表了文章 2019-09-30 16:27:52

  MongoDB BI Connector 实战指南

  MongoDB 使用 BI Connector 来支持 BI 组件直接使用 SQL 或 ODBC 数据源方式直接访问 MongoDB，在早期 MongoDB 直接使用 Postgresql FDW 来实现 SQL 到 MQL 的转换，后来实现更加轻量级的 mongosqld 来支持 BI 工具的连接。
• 09.29 17:49:26
  发表了文章 2019-09-29 17:49:26

  MongoDB Spark Connector 实战指南

  Why Spark with MongoDB? 高性能，官方号称 100x faster，因为可以全内存运行，性能提升肯定是很明显的 简单易用，支持 Java、Python、Scala、SQL 等多种语言，使得构建分析应用非常简单 统一构建 ，支持多种数据源，通过 Spark RDD 屏蔽...

2019年08月

• 08.26 16:59:38
  发表了文章 2019-08-26 16:59:38

  Redis 混合存储最佳实践指南

  Redis 混合存储实例是阿里云自主研发的兼容Redis协议和特性的云数据库产品，混合存储实例突破 Redis 数据必须全部存储到内存的限制，使用磁盘存储全量数据，并将热数据缓存到内存，实现访问性能与存储成本的完美平衡。
• 08.01 15:53:10
  发表了文章 2019-08-01 15:53:10

  MongoDB Sharding 请勿复用已删除的 namespace

  SERVER-17397: Dropping a Database or Collection in a Sharded Cluster may not fully succeed 是 MongoDB 里老大难的问题，库或集合删除操作如果没有完全执行成功，再新建相同名字的集合，可能导致读到老版本数据的问题。

2019年07月

• 07.26 10:27:19
  发表了文章 2019-07-26 10:27:19

  MongoDB 定位 oplog 必须全表扫描吗？

  MongoDB oplog （类似于 MySQL binlog） 记录数据库的所有修改操作，除了用于主备同步；oplog 还能玩出很多花样，比如 全量备份 + 增量备份所有的 oplog，就能实现 MongoDB 恢复到任意时间点的功能 通过 oplog，除了实现到备节点的同步，也可以额外再往单独的集群同步数据（甚至是异构的数据库），实现容灾、多活等场景，比如阿里云开源的 MongoShake 就能实现基于 oplog 的增量同步。
• 07.17 15:57:24
  发表了文章 2019-07-17 15:57:24

  MongoDB compact 命令详解

  为什么需要 compact 一图胜千言 remove 与 drop 的区别 MongoDB 里删除一个集合里所有文档，有两种方式 db.collection.remove({}, {multi: true})，逐个文档从 btree 里删除，最后所有文档被删除，但文件物理空间不会被回收 db.
• 07.10 11:49:15
  发表了文章 2019-07-10 11:49:15

  MongoDB sharding 集合不分片性能更高？

  最近云上用户用户遇到一个 sharding 集群性能问题的疑惑，比较有代表性，简单分享一下 测试配置 mongos x 2、shard x 3 测试1：集合不开启分片，批量 insert 导入数据，每个 batch 100 个文档 测试2：集合开启分片，随机生成 shardKey，chunk 已...

2019年06月

• 06.21 19:35:03
  发表了文章 2019-06-21 19:35:03

  MongoDB 4.2 新特性解读

  MongoDB World 2019 上发布新版本 MongoDB 4.2 Beta，包含分布式事务、全文检索、Wildcard 索引等多项数据库新特性，本文尝试从技术角度解读。