分类目录归档：编程语言

2018
04-11

Python性能优化的20条招数

优化算法时间复杂度算法的时间复杂度对程序的执行效率影响最大，在Python中可以通过选择合适的数据结构来优化时间复杂度，如list和set查找某一个元素的时间复杂度分别是O(n)和O(1)。不同的场景有不同的优化方式，总得来说，一般有分治，分支界限，贪心，动态规划等思想。减少冗余数据如用上三角或下三角的方式去保存一个大的对称矩阵。在0元素占大多数的矩阵里使用稀疏矩阵表示。合理使用copy与de... 继续阅读 >
2018
04-11

常用的几种大数据架构剖析

数据分析工作虽然隐藏在业务系统背后，但是具有非常重要的作用，数据分析的结果对决策、业务发展有着举足轻重的作用。随着大数据技术的发展，数据挖掘、数据探索等专有名词曝光度越来越高，但是在类似于Hadoop系列的大数据分析系统大行其道之前，数据分析工作已经经历了长足的发展，尤其是以BI系统为主的数据分析，已经有了非常成熟和稳定的技术方案和生态系统，对于BI系统来说，大概的架构图如下：可以看到在BI系统里... 继续阅读 >
2018
04-08

微服务中 Dubbo 和 Spring Cloud 架构技术路线对

微服务架构是互联网很热门的话题，是互联网技术发展的必然结果。它提倡将单一应用程序划分成一组小的服务，服务之间互相协调、互相配合，为用户提供最终价值。虽然微服务架构没有公认的技术标准和规范或者草案，但业界已经有一些很有影响力的开源微服务架构框架提供了微服务的关键思路，例如Dubbo和SpringCloud。各大互联网公司也有自研的微服务框架，但其模式都于这二者相差不大。微服务主要的优势如下：1、降低复杂... 继续阅读 >
2018
04-08

［Redis源码阅读］redis持久化

作为web开发的一员，相信大家的面试经历里少不了会遇到这个问题：redis是怎么做持久化的？不急着给出答案，先停下来思考一下，然后再看看下面的介绍。希望看了这边文章后，你能够回答这个问题。为什么需要持久化？由于Redis是一种内存型数据库，即服务器在运行时，系统为其分配了一部分内存存储数据，一旦服务器挂了，或者突然宕机了，那么数据库里面的数据将会丢失，为了使服务器即使突然关机也能保存数据，必须通... 继续阅读 >
2018
04-03

未来Web开发趋势报告

Web开发领域几乎每过几分钟就会出现一个JavaScript开发框架，它们通常都很短命，这种现象非常有意思。要在这些框架中做出选择真的不容易。WebAssembly是过去几个月出现的一个主要的新趋势，它是一个Web标准，定义了一种二进制格式和类似汇编的文本格式，以便在Web页面上执行代码。现在所有的浏览器都支持WebAssembly，我们认为它将会成为一个非常重要的标准。CSS方面出现了CSS网格、CSSHoudini和可变字体，这些也... 继续阅读 >
2018
04-02

善于单挑却难以协作，构建多智能体AI系统为何如此之难？

本文将通过地图寻宝问题为例，向你简要介绍多智能体系统实施时的困难程度及其原因。「研究人工智能三十五年来的主要经验是：困难的问题是易解的，简单的问题是难解的。」Pinker(1994)，《TheLanguageInstinct》我之前觉得编写一个软件智能体来收集图上的宝藏是件简单的小事。但是我完全错了。编写出不愚蠢行动的智能体实际上非常困难。明确定义的多智能体设置「智能体是指任何通过传感器感知环境、通过效应... 继续阅读 >
2018
04-02

Python并发编程之进程

一、理论概念1、定义进程（Process也可以称为重量级进程）是程序的一次执行。在每个进程中都有自己的地址空间、内存、数据栈以及记录运行的辅助数据，它是系统进行资源分配和调度的一个独立单位。2、并行和并发并行：并行是指多个任务同一时间执行；并发：是指在资源有限的情况下，两个任务相互交替着使用资源；3、同步和异常同步是指多个任务在执行时有一个先后的顺序，必须是一个任务执行完... 继续阅读 >
2018
04-02

Golang Websocket 实践

这里先简单介绍一下websocket，确实只是简单介绍一下。1.应用场景有些场景下，比如交易K线，我们需要前端对后端进行轮询来不断获取或者更新资源状态。轮询的问题毫无以为是一种笨重的方式，因为每一次http请求除了本身的资源信息传输外还有三次握手以及四次挥手。替代轮询的一种方案是复用一个http连接，更准确的复用同一个tcp连接。这种方式可以是http长连接，也可以是websocket。2.websocket... 继续阅读 >
2018
03-23

Java 堆内存溢出梗概分析

任何使用过基于Java的企业级后端应用的软件开发者都会遇到过这种低劣、奇怪的报错，这些报错来自于用户或是测试工程师： java.lang.OutOfMemoryError：Javaheapspace。为了弄清楚问题，我们必须返回到算法复杂性的计算机科学基础，尤其是“空间”复杂性。如果我们回忆，每一个应用都有一个最坏情况特征。具体来说，在存储维度方面，超过推荐的存储将会被分配到应用程序上，这是不可预测但尖锐的问题。这导致了堆内... 继续阅读 >
2018
03-23

用Python构建你自己的RSS提示系统

人生苦短，我用Python，Python是非常棒的快速构建应用程序的编程语言。在这篇文章中我们将学习如何使用Python去构建一个RSS提示系统，目标是使用Fedora快乐地学习Python。如果你正在寻找一个完整的RSS提示应用程序，在Fedora中已经准备好了几个包。Fedora和Python——入门知识Python3.6在Fedora中是默认安装的，它包含了Python的很多标准库。标准库提供了一些可以让我们的任务更加简单完成... 继续阅读 >
2018
03-20

提高MySQL性能的7个技巧

译者注：随着尺寸和负载的增长，MySQL的性能会趋于下降。记住这些诀窍，便可保持MySQL的流畅运行。测量应用程序的方法之一是看性能。而性能的指标之一便是用户体验，通俗的说法就是“用户是否需要等待更长的时间才能得到他们想要的东西”。这个指标在不同的应用场合而有所改变。对于移动购物应用，响应时间不能超过几秒钟。对于员工的人力资源页面，可能需要多花几秒钟的时间。有很多关于性能如何影响用户行为... 继续阅读 >
2018
03-19

golang 高并发下 tcp 建连数暴涨的原因分析

 背景：服务需要高频发出GET请求，然后我们封装的是golang的net/http库，因为开源的比如req和gorequsts都是封装的net/http，所以我们还是选用原生（req使用不当也会掉坑里）。我们的场景是多协程从chan中取任务，并发get请求，然后设置超时，设置代理，完了。我们知道net/http是自带了连接池的，能自动回收连接，但是，发现连接暴涨，起了1万个连接。  首先，我们第一版的代码是基于python的... 继续阅读 >
2018
03-19

2022高级编程视频教程获取步骤 HOT

关注微信公众号，Python编程学习圈，回复【学习资料】，即可获取。吐血整理的海量Python资源、教程、电子书、更新的学习资料，让你学习Python从入门到精通，最关键的是！无偿免费分享！资料概览 1、Python必备开发工具（超实用安装包及教程）2、Python电子书籍3、100道Python练习题（检验学习成果）4、零基础教程视频5、经典、难点详细解析6、最新python爬虫神经网络深度学习算法... 继续阅读 >
2018
03-13

用 debugger 学习 golang

常见的工程语言可分为解释型和编译型两种，比如写php的，一般就不怎么在乎debugger之类的东西。为什么？如果真出了问题，我可以临时把出问题的服务机器从线上服务中摘除出来，甚至申请一个较高的权限去修改代码，然后到处去die/echo。虽然有人说这么做不太好，或者一般公司也不给开权限。不过着急的时候，这个肯定是可行的。然而像java/go这种编译型的就比较麻烦了。线上一般只有程序的运行环境而没有编译环境。就算是在... 继续阅读 >
2018
03-12

你想知道的2018年软件开发“10件事”

区块链、NLP、AI驱动的工具、机器学习、无服务器计算和devops创新将在2018年改变开发者的生活。开发人员应该对2018年的机遇感到兴奋，产品和工具围绕着诸如区块链、聊天机器人、无服务器功能和机器学习等技术在现实世界的项目中变得足够成熟。与此同时，许多开发人员会担心，在不影响安全性和性能的前提下，他们将无法更快地交付代码和功能。但这方面也有好消息。对于开发人员来说，2018年的定义是，在抓住转型新... 继续阅读 >
2018
03-12

不是技术也能看懂云计算，大数据，人工智能

我今天要讲这三个话题，一个是云计算，一个大数据，一个人工智能，我为什么要讲这三个东西呢？因为这三个东西现在非常非常的火，它们之间好像互相有关系，一般谈云计算的时候也会提到大数据，谈人工智能的时候也会提大数据，谈人工智能的时候也会提云计算。所以说感觉他们又相辅相成不可分割，如果是非技术的人员来讲可能比较难理解说这三个之间的相互关系，所以有必要解释一下。一、云计算最初是实现资源管理的灵活性... 继续阅读 >
2018
03-12

C#究竟哪点不如Java了！?

C#是微软公司发布的一种面向对象的、运行于.NETFramework之上的高级程序设计语言，自发布以来受到了程序员的广泛关注。C#与Java有着很多相似之处，例如，单一继承、接口、与Java几乎同样的语法和编译成中间代码再运行的过程。但是与Java每月被唱衰的热度不同，C#看起来就沉默多了。根据TIOBE编程语言指数来看，从2016年开始，C#的热度就比较平稳，只是每年都会出现周期性的变化。如果从历史排名来看，C#一直是以小步伐... 继续阅读 >
2018
03-12

PWA即将推向所有Chrome平台

大多数人应该都听说了微软已经着手在Windows商店中增加PWA，这是一个重磅消息！ 渐进增强式Web应用即将在Win10系统上线，我们已经准备好了！图片来源：ashleymcnamara作为制定WebAppManifest规则的联合编辑，Kenneth一直参与到相关规则的制定中。实际上，微软是最早关注WebAppManifest的公司之一，最开始使用他们的Manifold工具，然后转为使用http://PWAbuilder.com。自从首个ManifoldJS发布之后，MarcosCaceres和Ke... 继续阅读 >
2018
03-08

国际象棋版AlphaZero出来了诶，还开源了Keras实现ヽ( `0´)ノ

只用了不到4小时。AlphaZero在去年底通过自我对弈，就完爆上一代围棋冠军程序AlphaGo，且没有采用任何的人类经验作训练数据（至少DeepMind坚持这么认为，嗯）。昨天，GitHub有位大神@Zeta36用Keras造出来了国际象棋版本的AlphaZero，具体操作指南如下。项目介绍该项目用到的资源主要有：去年10月19号DeepMind发表的论文《不靠人类经验知识，也能学会围棋游戏》基于DeepMind的想法，GitHub用户@mokemokechi... 继续阅读 >
2018
03-06

6行代码解决golang TCP粘包

什么是TCP粘包问题以及为什么会产生TCP粘包，本文不加讨论。本文使用golang的bufio.Scanner来实现自定义协议解包。协议数据包定义本文模拟一个日志服务器，该服务器接收客户端传到的数据包并显示出来typePackagestruct{Version[2]byte//协议版本，暂定V1Lengthint16//数据部分长度Timestampint64//时间戳HostnameLengthint16//主机名长度Hostname... 继续阅读 >
2018
03-04

Apache Ignite 事务架构：并发模型和隔离级别

在本系列的第一篇文章中，我们研究了2阶段提交协议，以及Ignite如何处理各种类型的集群节点，下面是在剩下的文章中要覆盖的主题：并发模型和隔离级别故障转移和恢复Ignite持久化层中的事务处理（WAL、检查点及其他）；第三方持久化中的事务处理在本文中，我们会聚焦并发模型和隔离级别。大多数现代多用户应用允许并发数据访问和修改。为了管理此功能，并确保系统从一个一致状态切换到另一个一... 继续阅读 >
2018
02-26

10秒钟，让你的方法变为RPC服务

rpcx一个服务治理的GoRPC框架，拥有非常多的特性，支持跨语言的服务调用。众多的特性可以参考doc.rpcx.site。它的服务治理的特性深受阿里巴巴的Dubbo框架的启发。在实际的产品应用中，用户使用两台服务器+8台日志搜集服务(Client)，轻松处理每天几十亿的服务调用，除了中间一个路由器硬件闪断，整个系统平稳运行多半年。相比较之前Java的实现，服务器节省了一般。用户使用rpcx框架重构后的系统每月为公司节省了... 继续阅读 >
2018
02-26

Redis 的 5 个常见应用场景

前言Redis是一个强大的内存型存储，具有丰富的数据结构，使其可以应用于很多方面，包括作为数据库、缓存、消息队列等等。如果你的印象中Redis只是一个key-value存储，那就错过了Redis很多强大的功能，下面就是实际应用场景中5个最普遍的案例。1.全页面缓存如果你使用的是服务器端内容渲染，你又不想为每个请求重新渲染每个页面，就可以使用Redis把常被请求的内容缓存起来，能够大大的降低页面请求的延迟... 继续阅读 >
2018
02-23

一个函数的自白

我是——编程世界的函数，不是数学中的幂，指，对和三角函数等等，但是和f（x）又有着千丝万缕的关系。我是代码中的最小执行组织，但不是最小执行单元。最小的执行单元是一条条语句，这些语句有机地组合起来完成一个或多个功能并且可以复用，这才是我——函数。内存与堆栈和我之间是啥关系？有无参数的我有何异同？我的简洁性？复杂度如何评估？我的高阶与递归有啥区别？我的回调和匿名是一回事么？对象中的方法是... 继续阅读 >