这是一篇短文。
由于各种机缘巧合,我于4月18日参加了第四届DTCC(中国数据库技术大会)。我参加的会议议题主要有两个:
- 大数据
- Nosql
而给我留下深刻印象的几点
- 大数据,公众服务中从海量数据直接导出决策将大大影响(改善)我们的日常生活,从天气预报到今天要吃什么,都可以给你最佳指导。但这远远不是革命,最多也就是信息革命中的一朵浪花。
- MapReduce,这种基于并行分治合并的处理思想和架构越来越多的应用到互联网当中,给大数据分析带来基础支撑。
- SSD,比普通硬盘高1000倍的响应速度将改变数据存储的架构。硬盘的足够快的可以使我们忽略很多很多问题,然而太快而引发的问题会逐步浮现。
- CAP,当系统出现故障,我们需要恢复P(容错性)的时候,应该牺牲C(一致性)还是A(可用性呢),对于工程来讲,一切都是成本和利润的问题。
个人也记录了第一天内容的笔记,传上来给大家分享,文本问题,请调整TAB尺寸为4以方便阅读。
大会PPT下载地址官方也已放出,需要提交个人信息后方可下载:
D大也更新了。好深奥!
一个月没更新,不写点深刻的东西,怎么对得起大家的期待。
哇卡卡~~ D大终于更新了,要不今晚我回去也更新一篇游记吧
好的~期待一下。也期待对此问题进行深入讨论,你都催更那么久,肯定有话要说。
D大更新了。。哈哈。。DTCC看上去挺好玩的样纸。。果然还是帝都比较NB。。哇咔咔。。
所以说呐,我还是建议年轻人多出来走走的。
MapReduce和SSD确实是最近发展的趋势。
而且我觉得那个速度太快引发的问题说得非常好啊。
Lieo弟弟是唯一不水的,感动一下。
关于SSD太快的问题,用工程上的说法是:约束条件的变更导致旧的设计方案不能准确适用,进而导致系统缺陷或者故障。
我也是对SSD那块很感兴趣, 不是有句说 内存将会是下一个硬盘么, 也许SSD的出现就是一个标志,或者说是一个过渡。
对于CAP 和ACID 由于我还没接触过这样的应用场景,所以对它们的理解也仅限与于概念了…. 想想要到哪去接触这些东西呢 。。。。。
腾讯自己实现的那个NoSQL工具我倒是非常的感兴趣, 把Redis, levelDB,bitcask 结合起来,取其精华,去其糟粕,最后做成一个适合自己需求的东西, 这一点非常好。 也许我们平时在接触一些开源软件,阅读他们源码的时候,要多多思考,扩展思路,也许某一天遇到了合适的需求就能够大显身手,甚至成立另外一个开源项目。
至于其他一些MapReduce、架构方面的东西, 由于我的水平太弱,不知道他们在说些什么……
PS: 看到人人网的那句“数据不再删除”时,我想说我去年买了个表。 突然觉得D大不用人人也许是个明智的选择…..
工程上有个决定性的指标是成本。只要内存和硬盘有很大的成本和性能差异,那么这两个东西就会同时存在。
CAP这个东东的话,你们团队不是有openstack这种分布式的东西吗?那就会用到一些指导观点。
说到开源。。。我的Linux内核源码还没开始看。
MapReduce,参考你自己blog里面写的openstack。
PS. 有些东西一旦你放出去就再也收不回来了。
路过~~ 飘过~~~
我们组木有搞openstack的呢,上次是叫我搭建一个环境,他们只是想看看而已,就是个打杂的。
MapReduce和opetnstack貌似木有很大的关系吧, 一个专注数据的分析处理? 一个只是云计算管理虚拟机集成工具?
我没有搞清楚他们的关系TT
搞搞就清楚了~
记得给我们带web程序设计课程的老师经常吐槽说,
我们这些学生不注重基础,老是追求一些新的技术、概念~不务实。
虽然有一定道理,但是我觉得如果能够多了解一点当今技术发展的趋势,能对这个行业稍微多一点认识也很难得!
感觉自己无法把一些基础搞的特别透彻和精通!
如果能对这些“热门”的技术保持好奇心并且了解一点也不错啦。
话说web程序设计这门课也就是跟风开的。对于大学生来说写个网页还要上课,这不成了技校么。
保持对新技术热心是没错的,只不过学生们见识不够丰富,往往把一些华而不实的东西当成了宝贝。
所以学东西一定要看清他的本质。
D大说的对,看到漂亮华丽的东东都要去把她们的外衣扒掉,只剩下小内内,这样才能见到本质。
恩,谨遵帧哥和d大的教导~
我会告诉你们下了TXT然后没看懂吗T-T
回头看了下,发现我自己也不懂了。。。
D大该更新啦!
来来来,一起催更
窝里长草啦
打个滚,压下去。
桢哥你的节操呢?
最近更新一下吧,关于具体技术的。
说好的更新呢?
D大对大D说好的性福呢?
这不科学~
Hi, thanks for sharing. I’m wondering if it’s OK to copy some of the text in my site?
My pleasure.
来催个更吧