分类目录归档：编程语言

2017
11-22

稀疏 & 集成的卷积神经网络学习

    今天主要和大家说的是分类检测过程中，一些稀疏和集成学习的相关知识，首先和大家说下图像目标定位与检测的方法分类。    众所周知，当前是信息时代，信息的获得、加工、处理以及应用都有了飞跃发展。人们认识世界的重要知识来源就是图像信息，在很多场合，图像所传送的信息比其他形式的信息更丰富、真切和具体。人眼与大脑的协作使得人们可以获取、处理以及理解视觉信... 继续阅读 >

2017
11-22

Python 内存优化

实际项目中，pythoner更加关注的是Python的性能问题，之前也写过一篇文章《 Python性能优化 》介绍Python性能优化的一些方法。而本文，关注的是Python的内存优化，一般说来，如果不发生内存泄露，运行在服务端的Python代码不用太关心内存，但是如果运行在客户端（比如移动平台上），那还是有优化的必要。具体而言，本文主要针对的Cpython，而且不涉及C扩展。我们知道，Python使用引用技术和垃圾回收来管理内存，... 继续阅读 >

2017
11-22

python 并发subprocess.Popen的坑

表现一个父进程里多个线程并发地调用subprocess.Popen来创建子进程的时候,会有几率出现Popen长时间不返回的情况.这个问题是由于fd被多个子进程同时继承导致的.重现问题的代码下面这个小程序启动2个线程,每个线程各自(通过subprocess.Popen)启动一个子进程,一个子进程执行echo1后就直接返回;另一个子进程启动后,sleep0.03秒后返回.程序里统计了2个调用Popen花的时间,运行后可以发现,ech... 继续阅读 >

2017
11-22

「Android」Bolts-更简单的完成线程调度和任务管理

使用Bolts可以将一个完整的操作拆分成多个子任务，这些子任务可以自由的拆分、组合和替换，每个任务作为整个任务链的一环可以运行在指定线程中，同时既能从上行任务中获取任务结果，又可以向下行任务发布当前任务的结果，而不必考虑线程之间的交互。Bolts-AndroidBolts在Android下的实现Bolts-ObjCBolts在OC下的实现Bolts-SwiftBolts在Swift下的实现前言一个关于线程调度的简单需求，在子线程从网... 继续阅读 >

2017
11-22

Spring Boot与RabbitMQ结合实现延迟队列

顾名思义，延迟队列就是进入该队列的消息会被延迟消费的队列。而一般的队列，消息一旦入队了之后就会被消费者马上消费。延迟队列能做什么？延迟队列多用于需要延迟工作的场景。最常见的是以下两种场景：延迟消费。比如：用户生成订单之后，需要过一段时间校验订单的支付状态，如果订单仍未支付则需要及时地关闭订单。用户注册成功之后，需要过一段时间比如一周后校验用户的使用情况，如果... 继续阅读 >

2017
11-20

Ruby Web 服务器的并发模型与性能

这是整个Rack系列文章的最后一篇了，在之前其实也尝试写过很多系列文章，但是到最后都因为各种原因放弃了，最近由于自己对Ruby的webserver非常感兴趣，所以看了下社区中常见webserver的实现原理，包括WEBrick、Thin、Unicorn和Puma，虽然在Ruby社区中也有一些其他的webserver有着比较优异的性能，但是在这有限的文章中也没有办法全都介绍一遍。在这篇文章中，作者想对Ruby社区中不同webserver的实现... 继续阅读 >

2017
11-20

现代IM系统中消息推送和存储架构的实现-博客-云栖社区-阿里云

前言IM全称是『InstantMessaging』，中文名是即时通讯。在这个高度信息化的移动互联网时代，生活中IM类产品已经成为必备品，比较有名的如钉钉、微信、QQ等以IM为核心功能的产品。当然目前微信已经成长为一个生态型产品，但其核心功能还是IM。还有一些非以IM系统为核心的应用，最典型的如一些在线游戏、社交应用，IM也是其重要的功能模块。可以说，带有社交属性的应用，IM功能一定是必不可少的。IM系统在互联网初期即存... 继续阅读 >

2017
11-20

MyFlash——美团点评的开源MySQL闪回工具

由于运维、DBA的误操作或是业务bug，我们在操作中时不时会出现误删除数据情况。早期要想恢复数据，只能让业务人员根据线上操作日志，构造误删除的数据，或者DBA使用binlog和备份的方式恢复数据，不管那种，都非常费时费力，而且容易出错。直到彭立勋首次在MySQL社区为mysqlbinlog扩展了闪回功能。在美团点评，我们也遇到过研发人员误删主站的配置信息，从而导致主站长达2个小时不可用的情况。DBA同学当时使用了技术团队自研... 继续阅读 >

2017
11-16

如何用C++实现自己的Tensorflow

TensorFlow是由谷歌基于DistBelief进行研发的第二代人工智能学习系统，其命名来源于本身的运行原理，它完全开源，作者通过自己的一个小项目，阐述了如何用C++实现自己的TensorFlow，这篇文章看起来可能会有点晦涩，你需要对相关知识有所了解。以下是译文。在我们开始之前，以下是代码：BranchwithEigenbackendBranchthatonlysupportsscalars我和MinhLe一起做了这个项目。为什么？如果你是CS专业的人员，可... 继续阅读 >

2017
11-16

直击阿里双11神秘技术：PB级大规模文件分发系统“蜻蜓”

导读：2017天猫双11，交易峰值32.5万/秒，支付峰值25.6万/秒，数据库处理峰值4200万次/秒，成交额1682亿数字的背后是50+神秘技术！其中，阿里集团基础设施蜻蜓，在双11期间，对上万台服务器同时下发5GB的数据文件，让大规模文件分发靠蜻蜓系统完美实现。蜻蜓，通过解决大规模文件下载以及跨网络隔离等场景下各种难题，大幅提高数据预热、大规模容器镜像分发等业务能力。月均分发次数突破20亿次，分发数据量3.4PB。其中容器... 继续阅读 >

2017
11-08

iOS中的MVP模式初探

以前在项目中都写的是MVC模式,由于现在在项目中要学习MVP模式,所以找了一个Demo研究了一下.就简单说说自己的看法吧.先说一下MVC模式,示意图如下:MVC模式示意图模型拿到数据,可能是数据库或者网络数据最简单的比方,我们拿到一个模型数组了之后,这个就相当于是一个数据源.将数据传递给控制器,控制器经过简单地加工数据源经过简单地处理加工,比如在tableView中,我们... 继续阅读 >

2017
11-08

Python并行处理

简介当你在机器上启动某个程序时，它只是在自己的“bubble”里面运行，这个气泡的作用就是用来将同一时刻运行的所有程序进行分离。这个“bubble”也可以称之为进程，包含了管理该程序调用所需要的一切。例如，这个所谓的进程环境包括该进程使用的内存页，处理该进程打开的文件，用户和组的访问权限，以及它的整个命令行调用，包括给定的参数。此信息保存在UNIX/Linux系统的流程文件系统中，该系统是一个虚拟文... 继续阅读 >

2017
11-08

关于云存储系统的六大技术分析

随着监控领域的飞速发展，新技术的诞生也是接踵而至，云存储是人们最为乐道的高新技术产品。它具有如下几大主要的技术。云存储系统具有如下特点：数据安全，超强的可扩展性，按照使用收费，可跨不同应用，自动切换故障，易于管理等。云存储主要应用于备份、归档、分配和共享协作等四大领域。云存储是在云计算概念上延伸和发展出来的一个新概念，是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不... 继续阅读 >

2017
11-03

GitHub 上那些免费好用的 Windows 软件

之前少数派曾经向大家推荐过在GitHub中那些不错的macOS免费软件，这一次，我们整理了一些Github上免费好用的Windows软件。本期会推荐四大类：文本相关、文件管理、效率提升、系统美化。（注：在下载前，建议访问Github页面查看一下更新和兼容情况。如果支持其他系统，本文会在下方标明。）文本相关类:memo:程序员最爱的轻量编辑器：NotePad++NotePad++是一款轻量级代码编辑器。采用了Win32API... 继续阅读 >

2017
10-25

Google S2 中的四叉树求 LCA 最近公共祖先

一.寻找父亲节点和孩子节点首先需要回顾一下希尔伯特曲线的生成方式，具体代码见笔者上篇文章的分析，在这个分析中，有4个方向比较重要，接下来的分析需要，所以把这4个方向的图搬过来。在举例之前还需要说明一点，有些网站提供的二进制转换，并没有标明有符号还是无符号的转换，这样就会导致使用者的一些误解。笔者开始并没有发现这个问题，导致掉入了这个坑，好一会才转过弯来。笔者在网上查询了很多在线... 继续阅读 >

2017
10-25

最近很火的 Safe Area 到底是什么

iOS7之后苹果给UIViewController引入了topLayoutGuide和bottomLayoutGuide两个属性来描述不希望被透明的状态栏或者导航栏遮挡的最高位置(statusbar,navigationbar,toolbar,tabbar等)。这个属性的值是一个length属性(topLayoutGuide.length)。这个值可能由当前的ViewController或者NavigationController或者TabbarController决定。一个独立的ViewController，不包含于任何其他的ViewControll... 继续阅读 >

2017
10-22

由浅入深学习 Lisp 宏之实战篇

在上一篇文章中，介绍了宏（macro）的本质：在编译时期运行的函数。宏相对于普通函数，还有如下两条特点：宏的参数不会求值（eval），是symbol字面量宏的返回值是code（在运行期执行），不是一般的数据。这两条特点也决定了是需要用普通函数还是宏来解决问题，这里面也蕴含着codeasdata的思想，也被称为同像性（homoiconicity，来自希腊语单词homo，意为与符号含义表示相同）。同像性使得在Li... 继续阅读 >

2017
10-22

为什么说SQL正在击败NoSQL，这对数据的未来意味着什么？

随着计算机的日益普及，各种应用每天产生的数据量呈指数级增长。如何存储这些数据，有效处理分析这些数据,并从中提取有价值的信息,是当下迫切需要解决的问题。在过去的十年里，NoSQL在软件工程师阵营里越来越受欢迎，其中最重要的实现是MapReduce，Bigtable,Cassandra，MongoDB,等产品。它主要用于解决SQL的可扩展性问题。然而今天SQL开始回归。几乎所有的云计算服务提供商都在提供备受青睐的关系型数据库管理服务：例如A... 继续阅读 >

2017
10-13

五分钟了解你不得不知道的人工智能热门词汇

编者按：大数据和人工智能的浪潮正在席卷全球，众多热门词汇蜂拥而至：人工智能（ArtificialIntelligence）、大数据（BigData）、云计算（CloudComputing）、机器学习（MachineLearning）、数据挖掘（DataMining）、深度学习（DeepLearning）、强化学习（ReinforcementLearning）和数据库（Databases）。不少人对这些高频词汇的含义及其背后的关系总是似懂非懂、一知半解。为了帮助大家更好地理解人工智能，我们邀请... 继续阅读 >

2017
10-13

Java在线问题排查利器之Btrace&Greys

１.前言前段时间升级了urs新的远程cookie校验模式。功能上线后，发现涉及用户cookie校验的接口，有时会报接口超时。通过日志埋点方式，确认了与urs提供的jar包内的新验证方法有关。通过反编译，看到相关方法执行过程中涉及参数校验、参数组装、远程访问校验、本地校验等步骤，究竟哪个步骤出了问题？一种方式是让urs帮忙提供一个新的jar包，在关键步骤处加日志，记录执行时间，另一种方法，就是使用一些在线分析工具... 继续阅读 >

2017
10-13

iOS蓝牙开发CoreBluetooth框架总结

最近兼职公司一个项目设计蓝牙项目，在开发过程中踩了不少坑，做了一些简单的整理以及总结，在此顺便分享一下。概念iOS开发中，谈到蓝牙现在基本最常使用的框架就是CoreBluetooth框架了，使用该框架可以iOS设备与蓝牙设备或者iOS设备与其他非蓝牙设备的交互。蓝牙开发分为两种：中心者模式和管理者模式中心者模式我们的手机作为中心设备，连接蓝牙设备（这也是最常用的一种模式，比如使用我们的手机连接... 继续阅读 >

2017
10-13

Nginx不安全配置可能导致的安全漏洞

前言：Nginx (enginex)是一个高性能的http和反向服务器，也可以作为IMAP/POP3/SMTP服务器。tengine是由淘宝网发起的Web服务器项目。它在Nginx的基础上，针对大访问量网站的需求，添加了很多高级功能和特性。在渗透测试过程中发现很多网站使用了nginx或者tenginx来做反向代理，ningx的配置文件nginx.conf的一些错误配置可能引发一些安全漏洞。下面是总结的一些可能引发安全问题的错误配置，并且推荐了github... 继续阅读 >

2017
10-09

【译】Go 中如何进行单元测试

在写《Go语言标准库》的第九章——测试时，看到了此文，讲解挺细致，于是翻译为中文，作为学习《Go语言标准库》的第九章的补充材料。如果你花过一些时间学习如何编程，你很可能见过许多地方提过测试。似乎每个人都在谈论测试，似乎都同意你应该进行测试，但这到底需要什么呢？在这篇文章中，我将尝试回答这个问题，首先解释什么是测试，然后我会用Go去深入实际编写测试。在编写测试时，我将通过编写自定义mai... 继续阅读 >

2017
10-03

写出优质Java代码的4个技巧

译者注：如果现在要求对你写的Java代码进行优化，那你会怎么做呢？作者在本文介绍了可以提高系统性能以及代码可读性的四种方法，如果你对此感兴趣，就让我们一起来看看吧。以下为译文。我们平时的编程任务不外乎就是将相同的技术套件应用到不同的项目中去，对于大多数情况来说，这些技术都是可以满足目标的。然而，有的项目可能需要用到一些特别的技术，因此工程师们得深入研究，去寻找那些最简单但最有效的方法。在前一篇... 继续阅读 >