信息论导引学习感想
信息论是关于信息的本质和传输规律的科学的理论,但学习的时候却明显着重于甚至可以说是只关心传输规律这一方面。信息的计量、发送、传递、交换、接收和储存等等,固然重要,但要是脱离了“信息”这一本质,也是无意义的——显然,这门课在开始之后先是一个“变相”的概率论,之后就几乎脱离了具体事例成了依照公式,套定理的数字游戏。我觉得既然信息论不是数学,那它所关注的就应该是隐含在数字之后的东西。我相信这跟我们当前的进度肯定是有关系的,只是“信息论导引”,而非完全的“信息论”。
当我第一次学到度量事件所携带的信息量方法时,着实兴奋了一把。什么是信息?简单的消息么?不是。它还有更广阔的含义,同时也更抽象。确实很难想象如何将这样抽象的一个概念量话,转化为具体的数值。从事件的概率来确定所携带的信息量,并明确两者之间的数值关系。概率越小,则关于它的“未知”就更多,与统计者或是接受这个事件的人来说,信息也就更多;反之概率越大,信息越少——很精练,很巧妙,甚至可以说是很奇妙了!
很明显,信息论是属于自然学科中的发明,而不是发现。就如同微积分一样,是特定的人在特定的时间所做出的特殊贡献。信息论的奠基人香农就是这些特定的杰出人物之一。在书上的肖像中,他是个精神矍铄的快乐老头。老师说希望我们以后也能让自己的模样出现在书本上。这当然是个玩笑——没有牛顿、莱布尼茨,微积分不可能被发明,这与那些自然客观规律的发现——如物理定律、不同,并不是在人类生产力、科学到达一定程度后的必然产物。香农的信息论也是如此。如果没有他的理论基础,之后的一切信息论研究自然无从谈起,但我更怀疑如果没有香农,是否还会产生信息论,或者将推迟多少年才又出现一位天才来重新提出信息论。
有资料提到,信息科学的规律一般化,适用于各个领域,是一门横断科学。由于现在学的只是“信息论导引”,只跟数字打交道,所以我对这一点没什么体会。倒是那些计算让我将快遗忘了的概率知识重新捡了起来;还有在《数字设计》课中学到的状态图,居然跟香农线图的画法一样。这些或许也应该能算作学科之间的联系吧。
以上就是我学习了《信息论导引》后的一些感想。总的来说,我很喜欢这门课,这是一次愉快的经历。希望以后能够有机会再进行深入的学习。 | |