Update your browser to view this website correctly. Update my browser now
之前做爬虫时，在公司设计开发了一个通用的垂直爬虫平台，后来在公司做了内部的技术分享，这篇文章把整个爬虫平台的设计思路整理了一下，分享给大家。写一个爬虫很简单，写一个可持续稳定运行的爬虫也不难，但如何构建一个通用化的垂直爬虫平台？这篇文章，我就来和你分享一下，一个通用垂直爬虫平台的构建思路。爬虫简介首
Redis作为内存数据库，拥有非常高的性能，单个实例的QPS能够达到10W左右。但我们在使用Redis时，经常时不时会出现访问延迟很大的情况，如果你不知道Redis的内部实现原理，在排查问题时就会一头雾水。很多时候，Redis出现访问延迟变大，都与我们的使用不当或运维不合理导致的。这篇文章我们就来分
一、背景offheap作为摆脱gc的本地缓存来使用，对于缓存大量数据和提升应用的性能大有裨益。EHCache的offheap层直接使用了Terracotta-OSS开源的offheap-store作为底层实现。但是offheap-store包含了一系列的算法和数据结构的设计和使用，很多地方借鉴了操作
翻译自http://www.h2database.com/html/mvstore.html转载请著名出处，及译者信息。第一次翻译，诸多不妥请谅解，谢谢。概述MVStore是一个持久化的、日志结构式的kv存储。本计划用它作为H2的下一代存储子系统，但你也可以在一个不涉及JDBC或者SQL的应用中直接
在之前的一个系列的文章里，我们从基本原理开始，一步步实现了基于VectorTrie的持久化List数据结构。接下来将要研究的是使用HAMT这一数据结构实现持久化HashTable。持久化数据结构简介这篇文章里，我们对比各种可以用来实现持久化数据结构的方案，详细介绍了VectorTrie这种数据结构，