大数据和云计算技术周报（第101期)

导语

“大数据” 三个字其实是个marketing语言，从技术角度看，包含范围很广，计算、存储、网络都涉及，知识点广、学习难度高。

本期会给大家奉献上精彩的：Spring熔断降级方案、AI、Hbase、CV、MongoDB、spark、微服务治理、Cassandra、。全是干货，希望大家喜欢！！！

#大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。相信长期坚持认真阅读周报的同学，在技术的道路上一定会日益精进！感谢编辑们的长期坚持！也请同学们继续打赏，支持社区，支持编辑们持续奉献高质量知识！

#大数据和云计算技术社区#长期招募有兴趣参与社区编辑和运营的同学，欢迎扫描文末二维码联系（参与社区工作，收获知识和进步，还有红包哦）。

特别提醒，文末有惊喜！

以下是正文，限于众编辑水平有限，不保证大家都喜欢。（如果链接不能点开请用二维码谢谢）

1AI

思索什么是AI AI能做什么未来是怎么样的。

https://mp.weixin.qq.com/s/omMwlbASRp6keXhEf3TDRw

2Spring熔断降级方案

Sentinel 成为 Spring Cloud 官方推荐的主流熔断降级方案

https://mp.weixin.qq.com/s/unxm9VDzol8hNSfe-HUzqQ

3MongoDB

本文讲述了MongoDB的使用的锁类型、锁的粒度，并介绍如何在mongod实例上查看锁的状态，哪些管理命令会锁定数据库，以及客户端操作会采取的锁定类型；

http://www.mongoing.com/archives/25738

640?wx_fmt=png

Spark

采用一种实际操作的方法，展示如何利用 Spark 在半结构化日志数据上执行大规模日志分析

https://mp.weixin.qq.com/s/0JJEGyMzMYddpV_kDPRIfg

5微服务治理

随着业务的发展,规模扩大，服务越来越多，需要协调线上运行的各个服务，保障服务的SLA;基于服务调用的性能KPI数据进行容量管理，合理分配各服务的资源占用;对故障业务做服务降级、流量控制、流量迁移等快速恢复业务。

https://mp.weixin.qq.com/s/Pv6Az5zNP4HSG6ugAWPTPg

6Cassandra

Apache Cassandra 是一个开源的、分布式、无中心、弹性可扩展、高可用、容错、一致性可调、面向行的数据库，它基于 Amazon Dynamo 的分布式设计和 Google Bigtable 的数据模型，由 Facebook 创建，在一些最流行的网站中得到应用。本文详细介绍了Apache Cassandra

https://www.iteblog.com/archives/2530.html

640?wx_fmt=png

7Spark

使用Python做数据分析的同学肯定用过pandas库，Spark虽然包含机器学习很多算法，但其基于RDD的数据预处理方式很繁琐。本文介绍了Koalas ，它是一个新的开源项目，它增强了 PySpark 的 DataFrame API，使其与 pandas 兼容。

https://mp.weixin.qq.com/s/0HAK6kTA8-bQQRKL7h2nzA

8CV

计算机视觉技术在日常生活中有着非常普遍的应用：发朋友圈之前自动修图、网上购物时刷脸支付……在这一系列成功的应用背后，卷积神经网络功不可没。本文将介绍卷积神经网络背后的数学原理。

https://mp.weixin.qq.com/s/Fo3h9gTQMpO6G-SPnboSGQ

所谓脑启发的视觉计算就是从生物大脑的神经结构、认知机制、行为特性等多个层面寻求启发，引入神经科学、认知科学与心理学的先进成果，提出新的视觉计算模型与方法，克服当前模型与方法局限性，提升视觉计算的性能（准确性、鲁棒性、自适应性、可泛化性、可解释性等）。脑科学与视觉计算可以从如下两个方向加一结合，一是基于脑科学机制进行视觉计算的启发建模，二是现有服务于视觉计算的神经网络模型为脑启发机理提供分析和借鉴

https://mp.weixin.qq.com/s/rKHA2H4msHSInVn7A-fqHg

9Datax

使用Datax进行两个集群间的数据同步，在读取HDFS数据时，会出现数据丢失问题，本文针对数据丢失问题做出了分析以及对应解决方案，希望帮助大家在使用Datax过程中避免该问题的出现。

https://mp.weixin.qq.com/s/5O0adjnztvdSzorxHv9Aiw

10Hbase

推荐系统是驱动内容分发的引擎，而个性化则是推荐系统的核心思想。分类模型和排序模型是业界常用的两种个性化建模方式。本文探讨两种方法的异同点

https://mp.weixin.qq.com/s/nQmMvEPfeqnqQCDpPEctpw

11开心一刻

一觉醒来，突然很想当兵去，因为当兵的口号是：立挣，向钱看，向左赚，向右赚，向厚赚，向钱走，一二亿，一二亿，收息，美好的一天从微笑乐开始，提钱祝您及家人5亿快乐。

致谢：

周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞

大数据和云计算技术周报（第101期)

猜你喜欢