Apache Kafka 0.10.2.0正式发布，此版本供修复超过200个bugs，合并超过500个 PR。本版本添加了一下的新功能： 1、支持session windows，参见KAFKA-3452 2、提供ProcessorContext中低层次Metrics的访问，参见KAFKA-3537 3、不用配置文件的情况下支持为 Kafka clients JAAS配置，参见KAFKA-4259 4、为Kafka Streams提供全局Table支持，参见KAFKA-4490 8年前 (2017-02-23) 2636℃ 0评论1喜欢
最近，本博客由于流量增加，网站响应速度变慢，于是将全站页面全部静态化了；其中采取的方式主要是（1）、把所有https://www.iteblog.com/archives/\d{1,}全部跳转成https://www.iteblog.com/archives/\d{1,}.html，比如之前访问https://www.iteblog.com/archives/1983链接会自动跳转到https://www.iteblog.com/archives/1983.html；（2）、所有https://www.iteblog.com/page页 8年前 (2017-02-22) 3815℃ 2评论9喜欢
我们可能会自己开发一些插件（比如微信公众号插件），在默认情况下，插件使用的URL很不友好，而且对SEO不好，比如我微信公众号的URL默认是 https://www.iteblog.com?iteblog_hadoop 。在Wordpress中，实现自己的rewrite rules方式有很多种，本文就是其中一种方法。如果想及时了解Spark、Hadoop或者Hbase相关的文章，欢迎关注微信公共帐号 8年前 (2017-02-22) 4449℃ 0评论7喜欢
我们在使用Hive的时候肯定遇到过建立了一张分区表，然后手动（比如使用 cp 或者 mv ）将分区数据拷贝到刚刚新建的表作为数据初始化的手段；但是对于分区表我们需要在hive里面手动将刚刚初始化的数据分区加入到hive里面，这样才能供我们查询使用，我们一般会想到使用 alter table add partition 命令手动添加分区，但是如果初始化 8年前 (2017-02-21) 16561℃ 0评论31喜欢
本文所列的所有API在ElasticSearch文档是有详尽的说明，但它的结构组织的不太好。 这篇文章把ElasticSearch API用表格的形式供大家参考。如果想及时了解Spark、Hadoop或者Hbase相关的文章，欢迎关注微信公共帐号：iteblog_hadoopCategoryDescriptionCall examplesDocument APISingle Document APIAdds a new document[code lang="bash"]PUT / 8年前 (2017-02-20) 2444℃ 0评论9喜欢
我们在使用HDFS Shell的时候只用最频繁的命令可能就是 ls 了，其具体含义我就不介绍了。在使用 ls 的命令时，我们可能想对展示出来的文件按照修改时间排序，也就是最近修改的文件(most recent)显示在最前面。如果你使用的是Hadoop 2.8.0以下版本，内置是不支持按照时间等属性排序的。不过值得高兴的是，我们可以结合Shell命令来 8年前 (2017-02-18) 12651℃ 0评论9喜欢
最近升级了迅雷9，新版本精简了任务列表的面积，然而增加了一个硕大的内置浏览器面板，大概占据了四分之三的窗口面积，并且不能关闭！界面如下：如果想及时了解Spark、Hadoop或者Hbase相关的文章，欢迎关注微信公共帐号：iteblog_hadoop就个人观点而言，实在不能理解为什么需要让一个下载工具的附加功能占据主要使用区 8年前 (2017-02-18) 6504℃ 0评论20喜欢
2017年已然来临，大数据技术仍然保持着飞速发展。无论是物联网、云计算领域乃至企业技术都开始将其引入自身并作为新的变革方向。众多企业已经在积极接纳大数据技术，并作为提升自身市场竞争力的核心因素。在今天的文章中，我们将基于甲骨文给出的预测结论，总结2017年十项大数据变化趋势。如果想及时了解Spark、H 8年前 (2017-02-17) 1053℃ 0评论3喜欢
想必大家在使用Maven从仓库下载Jar的时候都感觉速度非常慢吧。前几年国内的开源中国还提供了免费的Maven镜像，但是由于运营成本过高，此Maven仓库在运营两年后被迫关闭了。不过高兴的是，阿里云在2016年08月悄悄上线了Maven仓库，点这里：http://maven.aliyun.com。我们可以把下面的配置复制到$MAVEN_HOME/conf/setting.xml里面：如果想及时 8年前 (2017-02-16) 18438℃ 1评论6喜欢
阿里巴巴是世界上最大的电子商务零售商。 我们在2015年的年销售额总计3940亿美元，超过eBay和亚马逊之和。阿里巴巴搜索（个性化搜索和推荐平台）是客户的关键入口，并承载了大部分在线收入，因此搜索基础架构团队需要不断探索新技术来改进产品。 在电子商务网站应用场景中，什么能造就一个强大的搜索引擎？答案 8年前 (2017-02-16) 7015℃ 0评论6喜欢
