分类目录归档：全部列表

2015
01-15

深入浅出数据仓库中SQL性能优化之Hive篇 HOT

一个Hive查询生成多个MapReduceJob，一个MapReduceJob又有Map，Reduce，Spill，Shuffle，Sort等多个阶段，所以针对Hive查询的优化可以大致分为针对MR中单个步骤的优化（其中又会有细分），针对MR全局的优化，和针对整个查询（多MRJob）的优化，下文会分别阐述。在开始之前，先把MR的流程图帖出来（摘自Hadoop权威指南），方便后面对照。另外要说明的是，这个优化只是针对Hive0.9版本，而不是后来Hortonwork发起Stinger项目... 继续阅读 >
2015
01-15

11个实用经典的SQL小贴士 推荐

写在前面的话：之前做的一个项目，数据库及系统整体构架设计完成之后，和弟兄们经过一段时间的编码，系统如期上线，刚开始运行一切良好，后来随着数据量的急剧膨胀，慢慢出现了很多莫名其妙的问题，经过调试，修改了数据库中几个存储过程的一些问题。有意思的是，有一个存储过程里，为了实现一个小的功能，写了好多好多的代码，又是游标又是循环的，其实用系统的一个默认函数就能解决掉。这里想说的是，学习工作之余，在没有要解... 继续阅读 >
2015
01-15

2014年Linux界发生的好事、坏事和丑事

2014年已经过去，现在正是盘点2014年Linux大事件的时候。整整一年，我们关注了有关Linux和开源的一些好事，坏事和丑事。让我们来快速回顾一下2014对于Linux是怎样的一年。好事首先，让我们来看看在2014年对于Linux爱好者发生了什么有积极意义的事。Linux上的Netflix从使用Wine到使用Chrome的测试功能，为了能让Netflix能在Linux上工作，Linux用户曾尝试了各种方法。好消息是Netflix终于在2014年带来了Linux的本地支持。这让... 继续阅读 >
2015
01-15

2015十大最热门科技工作：软件开发工程师居首

无论你想设计程序、建立计算机系统或预防网络袭击，对你来说这些都是热门工作。随着就业机会和薪资不断增长，科技行业职位的吸引力也越来越大。新闻杂志周刊《美国新闻与世界报道》(USNEWS)日前推出2015年最热门科技工作榜单显示，软件开发工程师居首。1.软件开发工程师平均年薪：92660美元失业率：2.7%期望职位：139900个软件开发工程师的职位可以让你娱乐自己，同时帮助提高生产力。这些拥有创新思维的思想家专门从事设计... 继续阅读 >
2015
01-14

成为高级程序员的10个步骤 推荐

What软件工程师的职业生涯要历经以下几个阶段：初级、中级，最后才是高级。这篇文章主要是讲如何通过10个步骤助你成为一名高级软件工程师。Why得到更多的报酬！因为你的薪水会随着你水平的提高而增加提升你的职业生涯。成为了高级软件工程师之后，就可以朝着架构师、团队负责人、CTO等职位前进历经更大的挑战。随着你的成长，各种影响力也会提高。How软件工程是很难的。这一行业在不断变化中，所以你必... 继续阅读 >
2015
01-14

为什么软件工程师应该养成写作的习惯？

在学校里，有“文科生”和“理科生”的区分，学习内容不同，思维方式也有差异。我是一名理科生，大学里我的专业是计算机科学，毕业后我的工作是软件工程师。在这个过程中，我发现文理科之间的鸿沟始终无法弥合。我见到的很多工程师害怕写文章，而文科生看到代码就头疼。我认为，程序员应该养成写作的习惯。因为写文章会锻炼许多对于编程十分有益的技能。写文章和写代码最核心的共同之处在于它们都需要清晰思考的能力。顶尖的... 继续阅读 >
2015
01-14

PHP相关面试中最经常涉及的12个问题

了解和学习了PHP很多的知识，比如《PHP代码优化的小技巧分享》《为开发者准备的9个实用PHP代码片段》，你是否开始着手准备PHP开发工作的面试，希望知道那些最有可能在面试时被问到的问题。这篇文章我们整理了关于PHP相关工作的面试中最常涉及的问题和答案，供你参考，你也可以把它当做一份PHP的学习资料。当然，每一家公司都有他们自己的面试标准，面试问题也是依据工作职位和你的能力而设置的。问题1：谈谈你对的PHP的基本认... 继续阅读 >
2015
01-14

软件开发中需要克服的8个坏习惯

在软件开发领域，很多问题都是由一些不好的编程习惯导致的，消灭掉这些坏习惯，让你的开发更容易，也更高效。1.代码中有拼写错误不要惊讶，这是非常常见的问题，最令你抓狂的是这和你的编程能力没有任何关系。尽管如此，一个拼错了的变量名字或函数名字都会带来灾难性的后果，而且它们还不易被察觉。那么如何解决呢？你应该使用一个好的集成开发环境（IDE）或一个编程专用的代码编辑器，它们都可以极大程度地帮助你减少拼写错... 继续阅读 >
2015
01-14

Java解世界最难九宫格问题

芬兰数学家因卡拉花费3个月设计出了世界上迄今难度最大的数独游戏，而且它只有一个答案。因卡拉说只有思考能力最快、头脑最聪明的人才能破解这个游戏。今日，一则腾讯的新闻称中国老头三天破解世界最难九宫格，虽然最后老人是改了一个数字，但是引起本人一时兴趣，想通过计算机程序求解该问题，于是在宿舍呆了一下午，终于成功求解，程序源码如下。packagenumberGame;publicclassPoint{privateintcol;//行号pr... 继续阅读 >
2015
01-14

Java编程中关于异常处理的10个最佳实践

在实践中，异常处理不单单是知道语法这么简单。编写健壮的代码是更像是一门艺术，在本文中，将讨论Java异常处理最佳实践。这些Java最佳实践遵循标准的JDK库，和几个处理错误和异常的开源代码。这还是一个提供给java程序员编写健壮代码的便利手册。Java编程中异常处理的最佳实践这里是我收集的10个Java编程中进行异常处理的10最佳实践。在Java编程中对于检查异常有褒有贬，强制处理异常是一门语言的功能。在本文中，我们将尽量减... 继续阅读 >
2015
01-14

最能讨好程序员的6件礼物 HOT

最能讨好程序员的6件礼物 极客是出了名的难伺候，而程序员大概是我们周围最大的一群极客了。不过如果你送的是下面这几个礼物，他们或许就欣然接受了。1.编程书籍价格：25-50美元大多数程序员经常会去商店购买他们下一个最爱的编程语言。在这里我推荐O’Reilly的一套书，Unleashed系列的也很不错。下面这几本就是现在比较流行的编程语言。2.SafariBooksOnline价格：22.99美元/月-42.99美元/月不想局限于一本书？那么可以为你的程序员订阅Safari... 继续阅读 >
2015
01-14

Linux程序员将成为微软的死敌 HOT

在计算机Server市场上，Windows与Linux之间的竞争非常激烈。微软产品的最大卖点在于成体系设计以及良好的兼容性。但是，微软对其软件的专利限制越来越多的做法惹恼了那些推崇软件使用自由权的编程人员。微软拥有视窗操作系统，而Linux系统却是自由“名花”──它的“开源”的特征决定了这一点。Linux“开源”的特征与微软软件“封闭源代码”的特征背道而驰，开放性使程序员在解决问题(特别是安全问题)时有更多的回旋余... 继续阅读 >
2015
01-14

PHP命名空间概念解析

1. PHP中的命名空间是什么？什么是命名空间？“从广义上来说，命名空间是一种封装事物的方法。在很多地方都可以见到这种抽象概念。例如，在操作系统中目录用来将相关文件分组，对于目录中的文件来说，它就扮演了命名空间的角色。具体举个例子，文件 foo.txt 可以同时在目录/home/greg 和 /home/other 中存在，但在同一个目录中不能存在两个 foo.txt 文件。另外，在目录 /h... 继续阅读 >
2015
01-14

前方高能反应！设计师最常见的五个设计误区

走的路多了，总会知道哪里有坑，哪里有捷径。即使是资深的设计师也难免犯错，今天这篇文章就是Facebook设计主管JulieZhuo的经验之谈，根据自己的工作经验，总结设计师最容易踏错的5个设计误区。在学习的道路上难免犯错，至少对我而言，这样的事情并不鲜见。幸运的是，生在互联网快速发展的时代，我们可以轻松地让错误暴光在互联网的聚光灯之下，让问题无所遁形，试图通过一同探讨，解决问题。1、过于约束的设计... 继续阅读 >
2015
01-14

张朝阳一万五千字的自白：门户如何重生？

互联网大佬谁最高调？首先想到的应该是马云、周鸿祎、雷军、刘强东，他们经常上头条；互联网公司哪家喜欢高举高打？BAT、360、小米。现在高举高打玩家又增加一个：搜狐。张朝阳在新年第二个礼拜一召开内部管理级员工大会，狂喷1.5万字演讲，明确表示接下来要从“春雨潜入夜”这种低调行事作风转变为高调行事，要让投资者、合作伙伴、广告商、用户知道搜狐在做的事情和发展的方向，以顺应注意力稀缺的时代。... 继续阅读 >
2015
01-14

致程序员：用户讨厌你移动App的八大理由

目前在市场上存在着成千上万的移动App，除去这个，每年还有数以百计的AppStore定期推出移动应用程序。然而存在的最大问题是，这些移动应用程序都能成功的被用户所认可利用吗？答案当然是否定的。不可否认的是，在一些AppStore中有一些应用程序还是受到了广大用户的一致喜爱，但是它们当中的绝大多数都是以失败告终的。任何移动应用程序的成功都是取决于是否能够获得用户的好评，那么是什么理由导致用户讨厌甚至... 继续阅读 >
2015
01-14

调查显示近90%的程序员都感到身心疲惫 HOT

最近的一些职业压力调查结果显示：近9成的软件开发人员感觉精神压力增大，压力主要来自任务量的增加和新技术出现的速度。据报道，此次调研最后一天止共得到符合要求的回答1300多名。其中认为“近1～2年压力变大”的软件从业人员的数字达到了将近9成的86%。在精神压力变大的根源中回答人数中最多的是“工作太多，情绪总处于紧绷状态”，所占比例为50%。互联网兴起引发的软件项目的暴增以及软件开发周期的变短，... 继续阅读 >
2015
01-14

为什么网页Cookies用了曲奇饼干这个词？

这个名称是UNIX操作系统的“magiccookie”的简称。“magiccookie”1994年已经被程序猿LouMontulli用于计算时的网络通信而“magiccookie”，是在程序中交流的一个令牌或者短报文数据。使用它的Web开发人员，可以帮助用户浏览他们的网站，有效地执行某些功能。取名曲奇有取之“小而美味”的意思。Cookie一词还出现在TedNelson编写书籍《ComputerLib》中。... 继续阅读 >
2015
01-13

免安装mysql配置

1、下载压缩包：去官网下载免安装的MySQL的压缩包http://dev.mysql.com/downloads/mysql/根据机器选择64位或者32位： 2、解压到相应目录。我解压到了D:\ProgramFiles(x86)下。3、修改配置文件：将my-default.ini文件内容修改如下，[client]#客户端端口和默认字符集port=3306default-character-set=utf8 [mysqld]#服务器端设置#设置为MYSQL的安装目录basedir=D:\ProgramFiles(x86)\mysql-5.6.22-winx64#设置为MYSQ... 继续阅读 >
2015
01-13

使用mysqlbinlog工具进行基于位置或时间点的数据恢复

MySQL备份一般采取全备份加日志备份的方式，比如每天执行一次全备份，每小时执行一次二进制日志备份。这样在MySQLServer故障后可以使用全备份和日志备份将数据恢复到最后一个二进制日志备份前的任意位置或时间。用来进行全备和日志备的工具各种各样，各有其特色，在这里不做描述。本文主要讲解一下在回复完全备份后，如何应用备份的二进制日志来将数据恢复到指定的位置或时间点。这里有个十分重要的工具——mysqlbinlog,专门用... 继续阅读 >
2015
01-13

mysql数据库备份和还原

备份MySQL数据库的命令mysqldump-hhostname-uusername-ppassworddatabasename>backupfile.sql备份MySQL数据库为带删除表的格式备份MySQL数据库为带删除表的格式，能够让该备份覆盖已有数据库而不需要手动删除原有数据库。mysqldump-–add-drop-table-uusername-ppassworddatabasename>backupfile.sql直接将MySQL数据库压缩备份mysqldump-hhostname-uusername-ppassworddatabasename|gzip>backupfile.sql.g... 继续阅读 >
2015
01-13

postgres数据库中的数据转换

 postgres8.3以后，字段数据之间的默认转换取消了。如果需要进行数据变换的话，在postgres数据库中，我们可以用"::"来进行字段数据的类型转换。实际上"::"是调用CAST函数的。究竟哪些字段之间可以进行数据转换呢？  这个问题只要研究一下cast函数就能够得到答案。cast函数的信息在系统pg_cast表里面管理。通过查询我们可以得到现阶段可以转换的类型对照表如下：源类型    &nb... 继续阅读 >