大数据背后的偶然与必然
至顶网 12年06月06日 10:20 【转载】 作者：存储时代 责任编辑：王振
导读：说到大数据，是一个现在经常被提到的流行词汇，它包含了很多行业的很多领域。在业务分析中，大数据通常意味着使用从客户中获得的信息，销售预测、供应商和很多别的投入的信息，对业务做出最优决策，既包括短期的也包括长期的。
也许你想让一些用户看一些东西，别的用户只能看匿名数据。医院病人的数据就是一个主要的例子;你除了医生不让别人看你的实际病历，但是研究团队可能 需要查看病情、治疗选择和结果。安全将会是巨大的问题，如信息的创建和保存在一个独立的位置。不论它是个人的私有数据还是公司秘密，对黑客来说都是一个诱惑。不是所有人都能够查看所有事情，每件事情都应该被追踪，例如审查跟踪。
这里的问题包括：
• 需要运行在这些系统之上的应用程序怎么样呢?
• 某些查询会比其它的更优先吗?
• 应用程序是如何写数据的，以方便读取处理?
• 应用程序需要多少线程，需要一个并行编程模型吗?如果是，编程模型是什么样的呢，或者需要一个SMP模型吗?将会需要使用哪种编程模型?
程序上的应用程序可以获得任何捷径吗?90%的答案是获得50%的计算处理。这90%的答案适合在框架时期给出吗?或者你在做着生与死的抉择的时候，在哪种情况下90%的答案是不够好的。
倒是幸亏，服务员上菜很慢而且饭菜可口，不然我和Jeff不会有足够的时间讨论这些问题。
当然，我们没有得出任何结论。自从我和Jeff的晚餐会议之后，我们在接下来的几天仔细讨论，并且决定将“大数据”作为我们第二年度联合写作项目的主题。
我们如何处理大数据
未来几个月，我会逐步建立堆栈和忙于大数据问题，将会起始于硬件和堆栈的向上移动。因为我说过很多次，细节很重要(至少需要一些时间)。Jeff会从另一端开始，致力于堆栈的中间部分。我们会在操作系统或者编译和函数库中的某个地方接合。
你可能会问为什么存储站点都在讨论编译器、调试器和类似的东西，为什么我要阅读这些相关的?好问题。答案是，我们将会看到我们的世界正从面向数据处 理到面向信息的处理的转变。一切都将会改变，我们不希望我们的读者运用恐龙式的旧方法。我们相信这一转变，是如何考虑主要变化开始发生的理解关键。存储只 是一部分，若想成功，你不只需要了解存储，还有新的操作环境及其需求。
这并不是说，我们相信会成为所有罗列内容的专家，因为没有人是，甚至是尝试成为的，但是那说明想要成功，你必须关注和了解方方面面，或者一些我也没 想到的事情和一些独有的东西，才适合未来的发展。大数据不只是云存储。也不是关于归档、备份或者其它的战术问题。它就是谈论你所拥有的，提取能够帮助你的 组织获得成功的信息。
腾讯微博
新浪微博
