随着大数据时代的到来，越来越多的数据流向了Hadoop生态圈，同时对于能够快速的从TB甚至PB级别的数据中获取有价值的数据对于一个产品和公司来说更加重要，在Hadoop生态圈的快速发展过程中，涌现了一批开源的数据分析引擎

这是关于Yelp的实时流数据基础设施系列文章的第二篇。这个系列会深度讲解我们如何用“确保只有一次”的方式把MySQL数据库中的改动实时地以流的方式传输出去，我们如何自动跟踪表模式变化，如何处理和转换流，以及最终如何把这些数据存储到Redshift或Salesforce之类的数据仓库中去。

梯度下降法其实就是建立在这种十分贪心的企图上，即 通过找到梯度最大的方向 移动一个固定的距离(一般称为 Step Size )。但竟然是贪心，意味着它会有一个问题，如下图所示：如果你正在 Starting pt 处尝试下山，刚才的策略可能就会让你找到一个Local minima了。

MR.城堡最近一直在赶书稿，五月份和机械工业出版社签合同的时候还感觉截稿日期还遥不可及，眨眼之间是大半已过，人生短暂，早晨发芽生长，晚上割下枯干，诚如是也。

　2014年携程为无线服务开发了Mobile Gateway，有两种类型：TCP Gateway和HTTP Gateway。 TCP Gateway设计用于App中Native业务网络服务，基于TCP协议之上设计了应用层协议，类似于RPC机制。

Heritrix 是一个由 java 开发的、开源的网络爬虫，用户可以使用它来从网上抓取想要的资源。其最出色之处在于它良好的可扩展性，方便用户实现自己的抓取逻辑。

在介绍Java内存模型之前，先简单了解下物理计算机中的并发问题。由于处理器的与存储设置的运算速度有几个数量级的差距，所以现代计算机加入一层读写速度尽可能接近处理器的高速缓存来作为内存与处理器之间的缓冲

　我们对大数据的认知在前几年还仅仅停留在概念和理论中，但转眼间，你会发现身边的 大数据项目 如雨后春笋般拔地而起，大数据俨然成为当今热得不能再热的话题和焦点。

微服务架构多“微”才合适？

　DCP是微博容器化的混合云弹性调度运维平台，其诞生初衷是以最低成本实现弹性能力。DCP系统对外提供的功能包括集群管理、服务池之间的调度。

appium for windows 环境搭建

　Worker：集群中任何可以运行Application代码的节点，类似于YARN中的NodeManager节点。在Spark on Yarn模式中指的就是NodeManager节点

在配置hbase集群将 hdfs 挂接到其它镜像盘时，有不少困惑的地方，结合以前的资料再次学习; 大数据底层技术的三大基石起源于Google在2006年之前的三篇论文GFS、Map-Reduce、 Bigtable

　HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统。

　在Eclipse 3.x时代，Eclipse做的很不错，统治着所有开发工具，但是突然间，好像他们决定要亲手终结自己的生命。他们改写了所有UI代码，如Joel Spolsky所言，这个做法会导致他们的死亡(事实证明确实如此)。