浅入浅出 MySQL 和 InnoDB
作为一名开发人员，在日常的工作中会难以避免地接触到数据库，无论是基于文件的 sqlite 还是工程上使用非常广泛的 MySQL、PostgreSQL，但是一直以来也没有对数据库有一...
数据库高可用和分区解决方案：MongoDB 篇
MongoDB 是当前比较流行的文档型数据库，其拥有易使用、易扩展、功能丰富、性能卓越等特性。MongoDB 本身就拥有高可用及分区的解决方案，分别为副本集(Replica Set...
高并发简单解决方案：Redis 缓存队列 + MySQL 批量入库 + PHP 离线整合
需求背景：有个调用统计日志存储和统计需求，需要存储到mysql中；瓶颈在于直接入库并发太高，直接会把mysql干垮。问题分析问题一：要求日志最好入库；但是，直接入库mysql确实扛...
NoSQL 数据库模型
黑屋在“关系型数据库统治”中提到在关系型数据库之前，层级数据库和网状数据库适应了当时硬件的性能，成为了大型数据库系统的主流。 有趣的是老一代数据库要求应用程序负责数据的获取逻辑，这...
搭建一个 Redis 高可用系统
一、单个实例当系统中只有一台redis运行时，一旦该redis挂了，会导致整个系统无法运行。单个实例二、备份由于单台redis出现单点故障，就会导致整个系统不可用，所以想到的办法自...
Redis 分布式锁的正确实现方式（Java 版）
本博客使用第三方开源组件Jedis实现Redis客户端，且只考虑Redis服务端单机部署的场景。前言分布式锁一般有三种实现方式：1. 数据库乐观锁；2. 基于Redis的分布式锁；...
高性能数据库连接池的内幕
中生代技术群分享第三十一期 讲师：何涛 编辑：友强 注：完美修订版 摘要：如何打造高性能的数据库连接池框架，可以从哪些角度进行优化，连接池的大量优化实践如何为你的系统保驾护航，本...
分库分表技术演进 & 最佳实践（修订篇）
每个优秀的程序员和架构师都应该掌握分库分表，这是我的观点。移动互联网时代，海量的用户每天产生海量的数量，比如：用户表 订单表 交易流水表 以支付宝用户为例，8亿；微信用户更是10亿...
高级的 Redis Java 客户端 Lettuce
1. 前言Spring Boot 2.0中 Redis 客户端驱动现在由 Jedis变为了 Lettuce，这是随意的根据喜好的决定，还是有技术上的原因呢？Lettuce 的确有很...
嘘，啪啪啪的秘密
本文根据京东避孕套的销量情况，分析中国各省对啪啪啪的喜爱程度，以及深度胡扯分析中国人一年四季对避孕套的需求。虽然本文不涉及低俗的内容，但是因为谈论的话题还是成年人的话题，请小司机们...
数据库软件架构设计些什么
缘起：受@萧田国 萧总邀请，上周五晚上在“高效运维1号群”内分享了《58同城数据库软件架构设计与实践》（这个topic今年在数据库大会上分享过），应组织方要求，发出纪要。 一、基本...
团
这些年，你不能错过的 Spark 学习资源
写在前面本系列是综合了自己在学习spark过程中的理解记录 ＋ 对参考文章中的一些理解 ＋ 个人实践spark过程中的一些心得而来。写这样一个系列仅仅是为了梳理个人学习spark的...
Python 数据分析：许巍写歌最喜欢用什么词？
关键词结巴分词 中文分词 TF-IDF 词频 逆文档频率前言自从第一次听到许巍的歌，就深深地迷上了他的歌，感觉每一首都钻到了我的心里，也早已把他的歌听得烂熟了。许巍，我最喜欢的歌手...
Redis 开发运维实践指南
本手册是我在一家中国大陆的中型商业银行做大数据系统工程师中进行的总结归纳，包含开发和运维的各方面的使用、应用场景和最佳实践，以及各个高可用架构的搭建和测试。下载和线上阅读最新版请访...
团
Redis 的并发控制
背景开发活动报名业务，涉及到活动人数限制的问题，当并发量上来的时候，多人同时提交报名信息，将会导致活动已报名人数的不准确，对业务造成影响，如下图： 分析出现问题的原因是，设置操作发...
使用 Redis 实现分布式锁及其优化
目前实现分布式锁的方式主要有数据库、Redis和Zookeeper三种，本文主要阐述利用Redis的相关命令来实现分布式锁。相关Redis命令SETNX 如果当前中没有值，则将其设...
重磅：近 1GB 的三千万聊天语料供出
经过半个月的倾力打造，建设好的聊天语料库包含三千多万条简体中文高质量聊天语料，近1G的纯文本数据。此语料库全部基于2万部影视剧字幕，经由爬取、分类、解压、语言识别、编码识别、编码转...
团
[译] 从 MySQL 到 Kafka，如何管理每天实时发布的几十亿条消息？
当你的系统每天要实时从MySQL到Kafka发布几十亿条消息时，你会怎么管理这些数据的模式信息呢？当你的系统要接入几百个服务时，你就要处理几千种不同的模式，手工管理是不可行的。必须...
为什么要用 Redis
最近阅读了《Redis开发与运维》，非常不错。这里对书中的知识整理一下，方便自己回顾一下Redis的整个体系，来对相关知识点查漏补缺。我按照五点把书中的内容进行一下整理：• 为什么...
团
