LinkedKeeper

最新文章BLOG

作者曾昌荣发布于 2017年09月20日阅读 504

一．前言我们都知道Nginx有很多的特性和好处，但是在Nginx上开发成了一个难题，Nginx模块需要用C开发，而且必须符合一系列复杂的规则，最重要的用C开发模块必须要熟悉Nginx的源代码，使得开发者对其望而生畏。为了开发人员方便，所以接下来我们要介绍一种整合了Nginx和lua的框架，那就是OpenResty，它帮我们实现了可以用lua的规范开发，实现各种业务，并且帮我们弄清楚各个模块的编译顺...

基于Hadoop大数据分析应用场景与实战

作者王雷发布于 2017年09月18日阅读 1286

Hadoop

为了满足日益增长的业务变化，京东的京麦团队在京东大数据平台的基础上，采用了Hadoop等热门的开源大数据计算引擎，打造了一款为京东运营和产品提供决策性的数据类产品-北斗平台。一、Hadoop的应用业务分析大数据是不能用传统的计算技术处理的大型数据集的集合。它不是一个单一的技术或工具，而是涉及的业务和技术的许多领域。目前主流的三大分布式计算系统分别为:Hadoop、Spark和Strom：Hadoo...

敏捷大团队的流程改进

作者张松然发布于 2017年09月16日阅读 56

敏捷之旅

2017年9月，团队从12人迅速扩充到21人，并接入了新的业务线，业务系统达到将近30个。面对大量的新人和新业务，以及团队的重新拆分，一方面安排团队相关人员讲解具体的业务和系统；另一方面，需要对敏捷流程进行改进，内容包括以下方面：需求提报的方式方法。研发如何排期和开发。各阶段的衔接情况，是否存在瓶颈。大多数情况下，业务会与研发团队直接对接需求，因此，瓶颈往往在于需求管理和研发混乱、不透明。针对沟通...

深度解析Mybatis缓存

作者张强发布于 2017年09月11日阅读 1612

MYSQL

本文从源码分析Mybatis一级和二级缓存的应用，进而阐述Mybatis缓存的“坑”。在介绍Mybatis一级缓存和二级缓存之前，需要首先理解两个概念：SqlSession：引用官方文档中对这个接口作用的说明—SqlSession完全包含了面向数据库执行SQL命令所需的所有方法。你可以通过SqlSession实例来直接执行已映射的SQL语句，也可以通过SqlSession得到映射和管理事务。nam...

数据异构的武器 BINLOG+MQ

作者王新栋发布于 2017年09月09日阅读 338

MYSQL

1、定义何谓数据异构，上周交易部门商品的同事过来做分享，又看到这个词，他的PPT里面是数据库异构。其实我们以前做的事情，也是可以成为数据异构。比如我们将DB里面的数据持久化到REDIS里面去，就是一种数据异构的方式。如果要下个定义的话：把数据按需（数据结构、存取方式、存取形式）异地构建存储。2、常见应用场景分库分表中有一个最为常见的场景，为了提升数据库的查询能力，我们都会对数据库做分库分表操作。...

MySQL主从同步那点事儿

作者张岩发布于 2017年09月08日阅读 2519

MYSQL

一、前言关于mysql主从同步，相信大家都不陌生，随着系统应用访问量逐渐增大，单台数据库读写访问压力也随之增大，当读写访问达到一定瓶颈时，将数据库的读写效率骤然下降，甚至不可用；为了解决此类问题，通常会采用mysql集群，当主库宕机后，集群会自动将一个从库升级为主库，继续对外提供服务；那么主库和从库之间的数据是如何同步的呢？本文针对MySQL 5.7版本进行下面的分析，下面随笔者一起探究一下mys...

分析 Netty 死锁异常 BlockingOperationException

作者张松然发布于 2017年09月06日阅读 994

Netty

序最近，我发现一些BlockOperationException异常出现在我的Netty4项目中，为什么会出现这个异常？有人说，在Netty的ServerBootstrap启动服务器的时候，使用sync()或await()方法会造成死锁，可我发现异常是出现在ChannelRead过程中，而且Bootstrap用的是bossGroup，而ChannelRead用的是workerGroup，两者使用的...

一个基于 Netty + Protobuf 构建的高性能 TCP 网关开源组件

作者张松然发布于 2017年08月18日阅读 819

Netty

TCP 网关本文将为大家介绍一个基于 Netty + Protobuf 构建的高性能 TCP 网关开源组件。该组件部署业务化运行2年以上，实现TCP 双向通道通信，维持高并发在线长连接，优化传输字节码等。安装从 GitHub（https://github.com/linkedkeeper/tcp-gateway）克隆这个工程，并将它作为一个依赖包添加到 Maven 项目中。使用1. 创建 TCP ...

构建流式计算卖家日志系统应用实践

作者曾昌荣发布于 2017年08月16日阅读 3869

系统架构

引言本文给大家讲述的是我们如何去构建一个日志系统，用到了那些技术，为什么用这些技术，并且讲述了遇到的问题及优化的过程，希望给大家在实践中能够提供一些参考。最近在维护一个有关于日志的项目，这个项目是负责收集、处理、存储、查询京东卖家相关操作的日志，我们这里就叫它“卖家日志”。在日常的开发过程中，可能我们对日志这个词并不陌生，例如我们常接触到的log4j、slf4j等等，这些日志工具通常被我们用来记录...

跨域那点事，JSONP的秘密

作者何昆发布于 2017年08月14日阅读 1705

jQuery

如果你是一个WEB开发人员，你肯定遇到过跨域的问题。什么是跨域？我先假装你们不知道(^..^嘻嘻)，域名你们都知道，比如www.baidu.com，www.jd.com等都属于域名，如果我想在京东的页面中通过一个关键字来请求百度获取搜索结果，这就是一个跨域请求。举个例子：民间一位姓陈的人家有一手上好的酿酒本事。他们家立下规矩，这门手艺只传自家孩子。那如果我这个姓何的想去学肯定会被扫地出门，除非得到...

查看全部文章