<转>最大似然估计和最大后验概率

极大似然估计和贝叶斯估计分别代表了频率派和贝叶斯派的观点。频率派认为,参数是客观存在的,只是未知而矣。因此,频率派最关心极大似然函数,只要参数求出来了,给定自变量X,Y也就固定了,极大似然估计如下所示:

D表示训练数据集,是模型参数

相反的,贝叶斯派认为参数也是随机的,和一般随机变量没有本质区别,正是因为参数不能固定,当给定一个输入x后,我们不能用一个确定的y表示输出结果,必须用一个概率的方式表达出来,所以贝叶斯学派的预测值是一个期望值,如下所示:

其中x表示输入,y表示输出,D表示训练数据集,是模型参数

  该公式称为全贝叶斯预测。现在的问题是如何求(后验概率),根据贝叶斯公式我们有:

  可惜的是,上面的后验概率通常是很难计算的,因为要对所有的参数进行积分,不能找到一个典型的闭合解(解析解)。在这种情况下,我们采用了一种近似的方法求后验概率,这就是最大后验概率。

  最大后验概率和极大似然估计很像,只是多了一项先验分布,它体现了贝叶斯认为参数也是随机变量的观点,在实际运算中通常通过超参数给出先验分布。

 
从以上可以看出,一方面,极大似然估计和最大后验概率都是参数的点估计。在频率学派中,参数固定了,预测值也就固定了。最大后验概率是贝叶斯学派的一种近
似手段,因为完全贝叶斯估计不一定可行。另一方面,最大后验概率可以看作是对先验和MLE的一种折衷,如果数据量足够大,最大后验概率和最大似然估计趋向
于一致,如果数据为0,最大后验仅由先验决定。

Centos支持40T磁盘阵列MD1200

最近数据增长太快,靠服务器存储已经不能满足需求了。从Dell买了一台MD1200,准备级连到一台数据服务器上,把大量备份的数据存储在MD1200上。MD1200配备12块4T的SAS硬盘,做完RAID5 后有40T容量。如果以后要做扩展,只需要在MD1200后再级连存储服务器。

硬件环境:Dell 服务器PowerEdge R720 + PowerVault MD1200

软件环境:R720是CentOS 6.5

操作步骤:

1.把MD1200带的PERC H810板卡插到R720上的Riser2/Riser3。
2.用2根SAS数据线连将R720和MD1200连起来,MD1200上插IN口,R720插PERC H810上。
3.通电->启动->Ctrl+R进入Raid设置。
4.会看到两个,系统自带的和新装的H810,选H810,就进入常见的Raid设置界面。
5.设置RAID5。
6.格式化磁盘。因为整个磁盘空间超过2T,不能mkfs格式。 

parted /dev/sdb
mklabel gpt
mkpart primary 0 -1
quit
mkfs -t ext4 /dev/sdb1 或者  mkfs.ext4  /dev/sdc1 

以上最后一步会报错

“mke2fs 1.41.12 (17-May-2010)

mkfs.ext4: Size of device /dev/sdc1 too big to be expressed in 32 bits using a blocksize of 4096.”

出错的原因:e2fsprogs版本低

7.下载1.42版本

wget http://downloads.sourceforge.net/project/e2fsprogs/e2fsprogs/v1.42.7/e2fsprogs-1.42.7.tar.gz -O e2fsprogs-1.42.7.tar.gz

 8. 编译安装

#tar -xzvf e2fsprogs-1.42.7.tar.gz
# cd e2fsprogs-1.42.7
# mkdir build
# cd build
# ../configure
# make
# make install

 9.修改配置
vi /etc/mke2fs.conf
在ext4块添加auto_64-bit_support = 1

ext4 = {
features = has_journal,extent,huge_file,flex_bg,uninit_bg,dir_nlink,extra_isize
auto_64-bit_support = 1      ###新增加行,告诉系统使用64位方式进行格式化。避免mkfs.ext4直接报错。
inode_size = 256
}

10. 格式化

#mke2fs -O 64bit,has_journal,extents,huge_file,flex_bg,uninit_bg,dir_nlink,extra_isize -i 4194304 /dev/sdb1

11. mount

#mout /dev/sdb1 /mnt

12. df -h查看

完成,bravo!

开启一个新的历程

每天的生活都一样,每天的生活都不一样; 我们在不断失去,我们在不断获得;我们一直走向终点,我们一直开始新的起点。如阿甘所言,“生活就像一盒巧克力,你永远不会知道你将得到什么。”