分类目录归档：编程语言

2017
11-20

现代IM系统中消息推送和存储架构的实现-博客-云栖社区-阿里云

前言IM全称是『InstantMessaging』，中文名是即时通讯。在这个高度信息化的移动互联网时代，生活中IM类产品已经成为必备品，比较有名的如钉钉、微信、QQ等以IM为核心功能的产品。当然目前微信已经成长为一个生态型产品，但其核心功能还是IM。还有一些非以IM系统为核心的应用，最典型的如一些在线游戏、社交应用，IM也是其重要的功能模块。可以说，带有社交属性的应用，IM功能一定是必不可少的。IM系统在互联网初期即存... 继续阅读 >

2017
11-20

MyFlash——美团点评的开源MySQL闪回工具

由于运维、DBA的误操作或是业务bug，我们在操作中时不时会出现误删除数据情况。早期要想恢复数据，只能让业务人员根据线上操作日志，构造误删除的数据，或者DBA使用binlog和备份的方式恢复数据，不管那种，都非常费时费力，而且容易出错。直到彭立勋首次在MySQL社区为mysqlbinlog扩展了闪回功能。在美团点评，我们也遇到过研发人员误删主站的配置信息，从而导致主站长达2个小时不可用的情况。DBA同学当时使用了技术团队自研... 继续阅读 >

2017
11-16

如何用C++实现自己的Tensorflow

TensorFlow是由谷歌基于DistBelief进行研发的第二代人工智能学习系统，其命名来源于本身的运行原理，它完全开源，作者通过自己的一个小项目，阐述了如何用C++实现自己的TensorFlow，这篇文章看起来可能会有点晦涩，你需要对相关知识有所了解。以下是译文。在我们开始之前，以下是代码：BranchwithEigenbackendBranchthatonlysupportsscalars我和MinhLe一起做了这个项目。为什么？如果你是CS专业的人员，可... 继续阅读 >

2017
11-16

直击阿里双11神秘技术：PB级大规模文件分发系统“蜻蜓”

导读：2017天猫双11，交易峰值32.5万/秒，支付峰值25.6万/秒，数据库处理峰值4200万次/秒，成交额1682亿数字的背后是50+神秘技术！其中，阿里集团基础设施蜻蜓，在双11期间，对上万台服务器同时下发5GB的数据文件，让大规模文件分发靠蜻蜓系统完美实现。蜻蜓，通过解决大规模文件下载以及跨网络隔离等场景下各种难题，大幅提高数据预热、大规模容器镜像分发等业务能力。月均分发次数突破20亿次，分发数据量3.4PB。其中容器... 继续阅读 >

2017
11-08

iOS中的MVP模式初探

以前在项目中都写的是MVC模式,由于现在在项目中要学习MVP模式,所以找了一个Demo研究了一下.就简单说说自己的看法吧.先说一下MVC模式,示意图如下:MVC模式示意图模型拿到数据,可能是数据库或者网络数据最简单的比方,我们拿到一个模型数组了之后,这个就相当于是一个数据源.将数据传递给控制器,控制器经过简单地加工数据源经过简单地处理加工,比如在tableView中,我们... 继续阅读 >

2017
11-08

Python并行处理

简介当你在机器上启动某个程序时，它只是在自己的“bubble”里面运行，这个气泡的作用就是用来将同一时刻运行的所有程序进行分离。这个“bubble”也可以称之为进程，包含了管理该程序调用所需要的一切。例如，这个所谓的进程环境包括该进程使用的内存页，处理该进程打开的文件，用户和组的访问权限，以及它的整个命令行调用，包括给定的参数。此信息保存在UNIX/Linux系统的流程文件系统中，该系统是一个虚拟文... 继续阅读 >

2017
11-08

关于云存储系统的六大技术分析

随着监控领域的飞速发展，新技术的诞生也是接踵而至，云存储是人们最为乐道的高新技术产品。它具有如下几大主要的技术。云存储系统具有如下特点：数据安全，超强的可扩展性，按照使用收费，可跨不同应用，自动切换故障，易于管理等。云存储主要应用于备份、归档、分配和共享协作等四大领域。云存储是在云计算概念上延伸和发展出来的一个新概念，是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不... 继续阅读 >

2017
11-03

GitHub 上那些免费好用的 Windows 软件

之前少数派曾经向大家推荐过在GitHub中那些不错的macOS免费软件，这一次，我们整理了一些Github上免费好用的Windows软件。本期会推荐四大类：文本相关、文件管理、效率提升、系统美化。（注：在下载前，建议访问Github页面查看一下更新和兼容情况。如果支持其他系统，本文会在下方标明。）文本相关类:memo:程序员最爱的轻量编辑器：NotePad++NotePad++是一款轻量级代码编辑器。采用了Win32API... 继续阅读 >

2017
10-25

Google S2 中的四叉树求 LCA 最近公共祖先

一.寻找父亲节点和孩子节点首先需要回顾一下希尔伯特曲线的生成方式，具体代码见笔者上篇文章的分析，在这个分析中，有4个方向比较重要，接下来的分析需要，所以把这4个方向的图搬过来。在举例之前还需要说明一点，有些网站提供的二进制转换，并没有标明有符号还是无符号的转换，这样就会导致使用者的一些误解。笔者开始并没有发现这个问题，导致掉入了这个坑，好一会才转过弯来。笔者在网上查询了很多在线... 继续阅读 >

2017
10-25

最近很火的 Safe Area 到底是什么

iOS7之后苹果给UIViewController引入了topLayoutGuide和bottomLayoutGuide两个属性来描述不希望被透明的状态栏或者导航栏遮挡的最高位置(statusbar,navigationbar,toolbar,tabbar等)。这个属性的值是一个length属性(topLayoutGuide.length)。这个值可能由当前的ViewController或者NavigationController或者TabbarController决定。一个独立的ViewController，不包含于任何其他的ViewControll... 继续阅读 >

2017
10-22

由浅入深学习 Lisp 宏之实战篇

在上一篇文章中，介绍了宏（macro）的本质：在编译时期运行的函数。宏相对于普通函数，还有如下两条特点：宏的参数不会求值（eval），是symbol字面量宏的返回值是code（在运行期执行），不是一般的数据。这两条特点也决定了是需要用普通函数还是宏来解决问题，这里面也蕴含着codeasdata的思想，也被称为同像性（homoiconicity，来自希腊语单词homo，意为与符号含义表示相同）。同像性使得在Li... 继续阅读 >

2017
10-22

为什么说SQL正在击败NoSQL，这对数据的未来意味着什么？

随着计算机的日益普及，各种应用每天产生的数据量呈指数级增长。如何存储这些数据，有效处理分析这些数据,并从中提取有价值的信息,是当下迫切需要解决的问题。在过去的十年里，NoSQL在软件工程师阵营里越来越受欢迎，其中最重要的实现是MapReduce，Bigtable,Cassandra，MongoDB,等产品。它主要用于解决SQL的可扩展性问题。然而今天SQL开始回归。几乎所有的云计算服务提供商都在提供备受青睐的关系型数据库管理服务：例如A... 继续阅读 >

2017
10-13

五分钟了解你不得不知道的人工智能热门词汇

编者按：大数据和人工智能的浪潮正在席卷全球，众多热门词汇蜂拥而至：人工智能（ArtificialIntelligence）、大数据（BigData）、云计算（CloudComputing）、机器学习（MachineLearning）、数据挖掘（DataMining）、深度学习（DeepLearning）、强化学习（ReinforcementLearning）和数据库（Databases）。不少人对这些高频词汇的含义及其背后的关系总是似懂非懂、一知半解。为了帮助大家更好地理解人工智能，我们邀请... 继续阅读 >

2017
10-13

Java在线问题排查利器之Btrace&Greys

１.前言前段时间升级了urs新的远程cookie校验模式。功能上线后，发现涉及用户cookie校验的接口，有时会报接口超时。通过日志埋点方式，确认了与urs提供的jar包内的新验证方法有关。通过反编译，看到相关方法执行过程中涉及参数校验、参数组装、远程访问校验、本地校验等步骤，究竟哪个步骤出了问题？一种方式是让urs帮忙提供一个新的jar包，在关键步骤处加日志，记录执行时间，另一种方法，就是使用一些在线分析工具... 继续阅读 >

2017
10-13

iOS蓝牙开发CoreBluetooth框架总结

最近兼职公司一个项目设计蓝牙项目，在开发过程中踩了不少坑，做了一些简单的整理以及总结，在此顺便分享一下。概念iOS开发中，谈到蓝牙现在基本最常使用的框架就是CoreBluetooth框架了，使用该框架可以iOS设备与蓝牙设备或者iOS设备与其他非蓝牙设备的交互。蓝牙开发分为两种：中心者模式和管理者模式中心者模式我们的手机作为中心设备，连接蓝牙设备（这也是最常用的一种模式，比如使用我们的手机连接... 继续阅读 >

2017
10-13

Nginx不安全配置可能导致的安全漏洞

前言：Nginx (enginex)是一个高性能的http和反向服务器，也可以作为IMAP/POP3/SMTP服务器。tengine是由淘宝网发起的Web服务器项目。它在Nginx的基础上，针对大访问量网站的需求，添加了很多高级功能和特性。在渗透测试过程中发现很多网站使用了nginx或者tenginx来做反向代理，ningx的配置文件nginx.conf的一些错误配置可能引发一些安全漏洞。下面是总结的一些可能引发安全问题的错误配置，并且推荐了github... 继续阅读 >

2017
10-09

【译】Go 中如何进行单元测试

在写《Go语言标准库》的第九章——测试时，看到了此文，讲解挺细致，于是翻译为中文，作为学习《Go语言标准库》的第九章的补充材料。如果你花过一些时间学习如何编程，你很可能见过许多地方提过测试。似乎每个人都在谈论测试，似乎都同意你应该进行测试，但这到底需要什么呢？在这篇文章中，我将尝试回答这个问题，首先解释什么是测试，然后我会用Go去深入实际编写测试。在编写测试时，我将通过编写自定义mai... 继续阅读 >

2017
10-03

写出优质Java代码的4个技巧

译者注：如果现在要求对你写的Java代码进行优化，那你会怎么做呢？作者在本文介绍了可以提高系统性能以及代码可读性的四种方法，如果你对此感兴趣，就让我们一起来看看吧。以下为译文。我们平时的编程任务不外乎就是将相同的技术套件应用到不同的项目中去，对于大多数情况来说，这些技术都是可以满足目标的。然而，有的项目可能需要用到一些特别的技术，因此工程师们得深入研究，去寻找那些最简单但最有效的方法。在前一篇... 继续阅读 >

2017
09-29

安卓开发常用工具和第三方库汇总

我的名字叫RyanCooke我在Pinterest的核心体验团队工作。今天在这里我会谈论各种Android库：它们各自的优点，缺点和其他相关知识。目的是高效地概述尽可能多的库，这样，当你遇到一个问题的时候，你知道这是不是个已经解决的问题？什么样的方案更好？同时也能帮助你避免那些陷阱。选择正确的库意味着你可以拥有一个已经成熟的更好的解决方案，而不是花费三个月来重新构建它。了解这些库是第一步。我听到很多人想... 继续阅读 >

2017
09-26

2017年排名前11的iOS应用分析工具

似乎每年都有越来越多的移动分析工具，2017年也是如此，所以用户很难在这么多iOS应用程序选择使用哪一个，或者说，用户将不止使用一个分析工具。开发人员倾向于使用各种分析工具来帮助他们全面了解iOS应用程序，每一个工具都可以为你提供一个独特的应用程序视图，以及它的执行情况。我们对iOS开发者在2017年使用的iOS应用分析工具进行了广泛的研究，发现这11个是最好的。Firebase(谷歌应用分析工具)“Appsuccessm... 继续阅读 >

2017
09-26

58 同城 iOS 客户端搜索模块组件化实践

引言58同城的搜索功能支撑了近一半的用户流量，所以搜索是一个很重要的模块。众所周知，iPhone的搜索是通过Spotlight来实现的，那么在App内部是如何实现搜索呢？首先了解一下58同城的搜索需求：58同城首页，提供搜索功能，称为全站搜。58同城有二手物品、房产、二手车、招聘、黄页几大业务线，这是粗粒度的业务线。细分一下，二手可以拆分出二手物品、宠物等类别；房产拆分出租房、二手房等类别；... 继续阅读 >

2017
09-25

App开发团队必须知道的 iOS 11 更新点

WWDC2017已经过去差不多一个季度了，最近随着Xcode9正式版以及iPhone8、iPhoneX的发布，iOS11的全面适配也被提上了日程。我整理了一下更新点，包括开发、设计、产品甚至是市场都应该注意的点，分享出来希望对大家有所帮助。新增框架ARKitiOS11引入了新的ARKit框架，让您轻松创建无可比拟的iPhone和iPad增强现实体验。通过将数字对象和信息与您周围的环境相融合，ARKit为App解开了屏幕之缚，... 继续阅读 >

2017
09-22

Nginx 通过 Lua + Redis 实现动态封禁 IP

一、背景为了封禁某些爬虫或者恶意用户对服务器的请求，我们需要建立一个动态的IP黑名单。对于黑名单之内的IP，拒绝提供服务。二、架构实现IP黑名单的功能有很多途径：1、在操作系统层面，配置iptables，拒绝指定IP的网络请求；2、在WebServer层面，通过Nginx自身的deny选项或者lua插件配置IP黑名单；3、在应用层面，在请求服务之前检查一遍客户端IP是否在黑名单。为了方... 继续阅读 >

2017
09-22

Go 1.9中值得关注的几个变化

Go语言在2016年当选tiobeindex的年度编程语言。转眼间6个月过去了，Go在tiobeindex排行榜上继续强势攀升，在最新公布的TIBOEINDEX7月份的排行榜上，Go挺进Top10：还有不到一个月，Go1.9版本也要正式Release了（计划8月份发布），当前Go1.9的最新版本是go1.9beta2，本篇的实验环境也是基于该版本的，估计与finalgo1.9版本不会有太大差异了。在今年的GopherChina大会上，我曾提到：Go已经演进到1.9，接下... 继续阅读 >