你好,游客 登录 注册 搜索
rss订阅 手机访问 
技术资料
MTDDL——美团点评分布式数据访问层中间件
背景
2016年Q3季度初,在美团外卖上单2.0项目上线后,商家和商品数量急速增长,预估商品库的容量和写峰值QPS会很快遇到巨大压力。随之而来也会影响线上服务的查询性能、DB(数据库,以下统一称DB)主从延迟、表变更困难等一系列问题。
要解决上面所说的问题,通常有两种方案。第一种方案是直接对现有的商品库进行垂直拆分,可以缓解目前写峰值QPS过大、DB主从延迟...
日期:12/20/2016 14:05:08 作者:
学会用Spark实现朴素贝叶斯算法
编者按:本文作者汪榕曾写过一篇文章:《以什么姿势进入数据挖掘会少走弯路》,是对想入行大数据的读者的肺腑之言,其中也表达了作者的一些想法,希望大家不要随便去上没有结合业务的收费培训班课程;而后,他有了结合他本人的工作经验,写一系列帮助大家进行实践学习课程文章的想法,InfoQ也觉得这是件非常有意义的事情,特别是对于大数据行业1-3年工作经验的人士,或者是...
日期:12/20/2016 14:04:17 作者:
解析:机器人系统架构有哪些特殊技巧?
雷锋网按:本文作者Top Liu,易科机器人实验室系统设计师,机器人技术传播者,译著有《机器人编程实战》、《嵌入式机器人学》等。雷锋网独家发布,转载请联系授权。
日期:12/20/2016 14:03:55 作者:
9 款极佳的 JavaScript 移动应用程序开发框架
从技术上来看,iOS,Android 和 Windows Phone 上的移动应用是使用不同的程序语言开发的,iOS 应用使用 Objective-C,Android 应用使用 Java,而 Windows Phone 应用使用 .NET. 。随着 JavaScript,CSS 和 HTML 知识技能的提升,相信你也可以构建一个超赞的移动应用。在这篇博客里,我们将会介绍一些极好的 JavaScript 移动应用程序开发框架。
日期:12/20/2016 14:03:30 作者:
使用Apache Spar 的Lambda架构
市场上很多玩家已经建造了MapReduce工作流用来日常处理兆兆字节的历史数据。但是谁愿意等待24小时来拿到更新后的分析报告?这篇博客会向你介绍Lambda Architecture,它被设计出来既可以利用批量处理方法,也可以使用流式处理方法。这样我们就可以利用Apache Spark(核心, SQL, 流),Apache Parquet,Twitter Stream等工具处理实时流式数据,实现对历史数据的快速访问。代码简...
日期:12/20/2016 14:03:03 作者:
还有 13 天,苹果就要关上 HTTP 大门了
2017年1月1日以后,所有iOS需要访问网页的 App 都要面临一个问题:ATS(App Transport Security)。由于 ATS 要求 HTTPS 访问,换句话来说,还有 13 天,苹果就要对 APP 开发者们关闭 HTTP 的大门了。
日期:12/20/2016 14:02:40 作者:
2016 年谷歌开源了这些超酷炫的项目
摘要: 人工智能可以可以创作艺术和谱写曲子了,手机传感器也可以成为强大的研究实验室了,普通耳机也可以实现 VR 中的 3D 全景音效了……这些你还不知道?来看看谷歌的这些超酷的开源项目吧!
日期:12/20/2016 14:02:14 作者:
不空谈AI概念,看看大数据孕育智能奇迹如何突破技术上的两大挑战
众所周知,在当下,数据科学是一个蓬勃发展的领域,为什么会蓬勃发展呢?首先是因为大数据的发展。我们现在拥有了越来越多的数据,这为数据科学的应用创造了肥沃的土壤,进而使得一个又一个奇迹的创造成为可能。拿大家都耳熟能详的AlphaGo作为例子。
日期:12/19/2016 16:38:07 作者:
Splunk大数据分析经验分享:从入门到夺门而逃
大家好,我是U神,关于Splunk的文章网上非常少,中文的官方文档也很少。这篇文章的都是我观看某Splunk视频(那视频好贵,我是通过某XX看到的)后写下的学习笔记,我用自己通俗易懂的语言非常详细地写了splunk的安装、CLI命令、SPL语言、数据分析等。记录这些笔记花了较长时间,一方面是让学习更加深刻,一方面防止忘记了后可以找找笔记再看看,另一方面发出来也想分享给每一个...
日期:12/19/2016 16:36:47 作者:
基于微服务架构,改造企业核心系统之实践
1. 背景与挑战
随着公司国际化战略的推行以及本土业务的高速发展,后台支撑系统已经不堪重负。在吞吐量、稳定性以及可扩展性上都无法满足日益增长的业务需求。对于每10万元额度的合同,从销售团队准备材料、与客户签单、递交给合同部门,再到合同生效大概需要3.5人天。随着业务量的快速增长,签订合同的成本急剧增加。
合同管理系统是后台支撑系统中重要的一部分...
日期:12/19/2016 16:36:23 作者:
Facebook针对图数据处理对Apache Giraph 和 Spark GraphX的比较
一支Facebook 团队近期发表了一份比较报告,比较对象是他们当前的基于 Giraph的图处理系统和更新的 GraphX (它是流行的 Spark 框架的一部分)。他们的结论是,GraphX当前无法满足他们对扩展性和性能的需要,不足以支撑起他们图处理的负载。
日期:12/19/2016 16:35:38 作者:
基础深度学习概念备忘录
基础深度学习概念备忘录翻译自DeepLearning Cheat Sheet。笔者还是菜鸟一枚,若有谬误请多多赐教,另外如果希望了解更多机器学习&深度学习的资料可以参考笔者的面向程序猿的数据科学与机器学习知识体系及资料合集以及程序猿的数据科学与机器学习实战手册。
日期:12/19/2016 16:35:17 作者:
秒爆十万字典:奇葩技巧快速枚举“一句话后门”密码
*本文原创作者:earthnaruto,转载请注明来自Freebuf.COM
日期:12/19/2016 16:34:56 作者:
搭建大型源码阅读环境——使用 OpenGrok
RTFSC 是程序员打怪升级路上避不开的功课,那营造一个舒适的环境来提升上课的体验就很有必要了。
日期:12/16/2016 16:32:41 作者:
2017年值得关注的JavaScript框架与主题
日期:12/16/2016 16:30:12 作者: