如何关闭OSX 10.11 SIP (System Integrity Protection)

2015.10.8 01:50更新：实在忍不住，看完池老师的公众号，就升级了。问题果然是有的，池老师你还我睡眠时间，又整到凌晨……

1. 关于Homebrew的安装参考链接
2. Cocoapods使用这个命令安装sudo gem install -n /usr/local/bin cocoapods原因是原来使用的/usr/bin这个目录被rootless保护了，那个-n参数作用是把二进制文件安装到指定目录，参考stackoverflow解决Cocoapods无法安装 注意stackoverflow中提到的使用这个参数「rootless=0」就不要用了，该方法apple官方已经封了，要停用rootless就用我下述的方法（也是官方推荐方法）
3. ……暂时就这些，有问题在更新，或者留言给我你的问题，我看看能不能解决

注意：SIP功能是Apple在OSX上推出的系统完整性保护功能，对于普通MAC用户来说是一项安全保护功能，如果不了解他的作用请不要随意关闭，对于开发者来说，因为会使用到很多的第三方辅助工具（例如：Cocoapods、Homebrew），而这些工具可能会修改系统目录，在这些工具未推出适应OSX 10.11的版本时，有必要临时关闭SIP以确保开发工具的使用。

建议：普通用户随意，开发者目前请谨慎升级，如果你已经升级，相信你可能需要恶心一阵了，因为有些工具没有更新不能正常使用或部分功能失效，甚至在关闭SIP后也有点问题，当然你只要耐心等待软件更新和网友的智慧或是自己动手丰衣足食，很多问题还是可以解决的。

Nutch2.3 安装与部署

Nutch是由JAVA开发的开源的全文检索引擎.不过更多的被用来当成Web爬虫来使用.现在Nutch分为了1.x和2.x两个版本在维护.而这两个版本的最主要的区别在于底层存储的抽象.1.x版本是基于Hadoop架构的,底层存储只能使用HDFS.而2.x版本通过Apache Gora对底层存储做了抽象,能访问HBase,MYSQL,MongoDB,Solr,AvroStore等等.

但是从2.X开始,官方就只提供源码的下载了,不再提供编译后的发布版本,因此就需要我们自己去进行编译.

在Linux上运行Swift

盼星星盼月亮,等了半年,终于在12月的头几天,苹果开源了Swift语言.并建立了一个Swift.org社区以及Github来维护.开源以后,最大的好处当然是有更多的人来参与Swift语言的发展,让Swift语言增加更多的新的特性,更多的开源框架,工作在更多的平台上面.这对于一个开发语言来说无疑是一个很好的消息.而对于我来说,除了在编写代码的时候能更了解Swift某些函数的参数意义和工作的原理(作为一个JAVA Coder,平时如果遇到搞不定的问题或者是不明白的地方,习惯了直接翻它的源码来了解原委的)外,让我基本上抛弃了Python脚本,平时有什么小东西小程序需要写一下的话,现在可以直接写一个Swift文件,然后在命令行直接调用swift xxx.swift或者swiftc -O xxxx.swift即可.

在Linux上安装Swift

前面废话说了这么多.现在就来看看如何在Linux上安装Swift的运行环境.MACOS上的就不用说了,直接安装一个Xcode就可以了.

MYSQL支持utf8mb4

MYSQL默认的utf8字符集采用了3个字节来进行保存.这就存在了一个问题,那就是有部分的UTF8的字符其实是保存不进MYSQL的,比如现在流行的emoji表情,这和以前的认知是不同的.为了避免以后出现问题,找了这方面的信息.推荐如果有保存扩展字符的用户,提前就把MYSQL的字符集给修改了.具体MYSQL的默认utf8支持哪些字符编码,可以参见这个:Unicode编码表,前126行就是它支持的,后面的就是不支持的.

发现这个问题其实相当的偶然,在知乎上看到了一个问题为什么知乎不支持non-BMP的汉字？.突然发现了这个问题,一验证果然如此.
具体来说就是MYSQL的utf8字符集只使用了3个字节来保存字符.因此UTF8扩展区的字符就无法保存.这个在MYSQL5.5后引入了utf8mb4的字符集来解决这个问题,它使用了4个字节来存储字符,扩展了存储的数量.因此,如果各位是使用的MYSQL5.5以上的版本,推荐在可能存入扩展字符的字段上设置字符集为utf8mb4.虽然这样可能会造成空间的浪费,但是比以后在上线的系统上升级数据库的风险要小的多.

在自己的App中嵌入onePassword密码管理

1Password是一个密码管理软件,它可以方便和安全的管理你的密码.它提供反钓鱼保护功能和卓越的密码管理,并具有自动生成强密码功能.所有的机密资料,包括密码,身份卡和信用卡,都是保存在一个安全的地方.在OSX和IOS系统上非常的流行.在我的博文MacOS下JAVA开发使用经验(一) )也有介绍.
自从我的账号被CSDN泄露的干干净净以后的一段时间里,我的其他账号是不是的就会收到更改密码的邮件.于是,一下狠心购买了1Password,并且把我所有的差不多200多个账号的密码通过1Password都给改成了14位的随机字符,以后就不用担心一个密码丢失导致其他的账号也丢失了(1Password自己本身在它的网上没有所谓的用户名密码,密码是通过加密文件整体在WIFI或iCloud中同步的.).但是这就带来了一个麻烦,就是我的密码都变成了类似于这样的RxCa9vdBUB3fCU的字符串.当使用safari这些的时候还好,它有浏览器的插件可以自动填充.遇到一些App,就只能手动的输入了(类似于光大银行和QQ不允许粘贴密码).这相当的麻烦,又容易出错.因此,自己开发APP的时候,就特别的注意了在输入密码的地方要与1Password的整合,这点网易系的APP就做的比较好,网易云音乐和考拉海淘就是支持了1Password的.
要在自己的App中引入1Password其实也不麻烦,可以说是相当的简单.1Password在GitHub上开源了App与它的软件交互的扩展1PasswordExtension.我们通过这个扩展就可以在自己的App中嵌入1Password的密码管理了.

为自己的APP增加OpenIn功能

在做App的时候,可能会遇到你的程序可以打开某种类型的文档.比如用户在safari中下载了一个torrent类型的文件,然后需要直接使用你写的App打开.那么这个时候就需要在编写App的时候进行文档类型的注册了.

Swift中使用NSUserDefaults保存自定义对象

NSUserDefaults适合存储轻量级的本地客户端数据,比如保存一些系统的基本配置等东西,使用NSUserDefaults是首选,它非常的简单,不依赖其他的什么东西,屏蔽了Plist文件的读写等等.

但是NSUserDefaults支持的数据格式比较有限,只支持了Int、Float、Double，String，NSDate，NSArray，NSDictionary，Bool.不支持自定义对象的存取.

这个特性对于简单的数值来说还算比较容易.只需要简单的操作(一个Value 一个Key ),例如，想要保存一个NSString的对象，代码实现为：

1
2
3
4

//存
NSUserDefaults.standardUserDefaults().setInteger(10, forKey: "aaa")
//取
NSUserDefaults.standardUserDefaults().integerForKey("aaaa")

Docker1.9新特性-跨物理机的多容器网络连接

近日，Docker公司正式发布Docker 1.9版本。他带来了很多新的特性,其中最重要的新特性无疑就是多宿主机互联功能.

在今年6月份的DockerCon上，互联曾经作为测试版本的特性被提出。目前，该特性正式集成在了Docker引擎的稳定版中，并将在产品中使用。其主要功能是为跨宿主机创建Docker引擎中的虚拟网络提供支持。用户可以把其所属的容器挂载到网络中，并控制网络拓扑和通信方式。此外，系统还允许用户在不修改应用的情况下直接与任何网络进行集成。

那么,我们现在就来试一试如何简单的实现多宿主机互联功能.

原理

Docker新的网络拓扑是采用的overlay network模式的网络.
它需要一个分布式的Key-Value Storage作为辅助的存储.当前Docker支持Consul,Etcd和ZooKeeper.当创建网络之前,你首先是需要安装并运行KVS.然后在启动Docker的时候加上一定的参数,这样Docker就会把网络拓扑信息保存在KVS上,形成全局唯一的网络.

升级CentOS7的Linux内核

默认刚安装的CentOS7的内核是3.10的.

这个可以在 终端中输入:

1
2

uname -r
3.10.0-229.el7.x86_64

来确认.

由于我需要试验docker1.9中的新功能.而它的新功能需要vxlan的相关功能.而这个在3.16以上版本才正确.因此,就需要给CentOS7升级内核.

Hive1.2的部署

简介

hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。

听起来HBase与Hive有些类似，概念也有点模糊，那我们先了解下他们之间有什么区别：

HBase是一种分布式、面向列的NoSQL数据库，基于HDFS存储，以表的形式存储数据，表由行和列组成，列划分到列族中。HBase不提供类SQL查询语言，要想像SQL这样查询数据，可以使用Phonix，让SQL查询转换成hbase的扫描和对应的操作，也可以使用现在说讲Hive仓库工具，让HBase作为Hive存储。

Hive是运行在Hadoop之上的数据仓库，将结构化的数据文件映射为一张数据库表，提供简单类SQL查询语言，称为HQL，并将SQL语句转换成MapReduce任务运算。有利于利用SQL语言查询、分析数据，适于处理不频繁变动的数据。Hive底层可以是HBase或者HDFS存储的文件。

两者都是基于Hadoop上不同的技术，相互结合使用，可处理企业中不同类型的业务，利用Hive处理非结构化离线分析统计，利用HBase处理在线查询。

由于HDFS不能存储元数据,因此Hive需要一个辅助的关系数据库来保存它的元数据信息.
可以使用它本地的derby数据库,也可以使用本地或远程的MYSQL数据库来存储.通常我们都是存放在MYSQL中的.