海量历史交易信息查询与分析系统-SequoiaDB技术社区.ppt

大数据科技发展;Hadoop： Cloudera的CTO, Amr Awadallah 在他的演讲中介绍了未来Hadoop的发展，其中着重提到了今年Cloudera的主题是“Flexibility”也就是灵活性。Hadoop希望成为“智能手机”一样的角色，不仅能管理和存储多种类型的数据，还可以在上面部署各种各样的应用，对存储和管理的数据进行处理和使用。 ;Spark： Databricks的CTO Matei Zaharia，介绍了Spark 在2015年的新的发展方向。包括新增机器学习的流水线功能，R语言的集成，以及更好的新型数据库支持。此外，未来Spark也希望成为一个更加全面和易用的平台，能够方便的集成数据源、算法和外部包。 ;MemSQL 一款新的NewSQL数据库，号称世界上最快的分布式关系型数据库，原理是仅用内存并将SQL预编译为C++。 “MemSQL比传统基于磁盘的数据库快30倍”。 在去年夺得了最佳创业公司（Data-Driven Startup）的MemSQL，在今年的大会上已经成长为???极具竞争力的一家新型数据库公司，并且在keynote上发表了题为“Close Encounters with the Third Kind of Database”的主旨演讲。 ;Strata大会每一年还会举行Startup Showcase 的评选。在参加Showcase竞演的新公司或者团队中，选出每年的冠军团队。冠军团队除了创业资金支持，还能迅速的扩大市场和影响力。;Snowflake 一款弹性的数据云服务平台，能够在一个系统内处理半结构化和结构化数据而不需要转换存储结构或者设置统一的操作模式。 Caspida 一款利用机器学习实现自动检测程序数据中的隐藏安全威胁的工具。 ;大数据与商业;这次的SHW大会上也出现了一些传统企业介绍大数据技术的一些实际应用。在商业领域，对于大数据的需求主要有三点：;时效性：随着大数据技术在商业领域的不断普及，传统行业的企业对于大数据技术的要求已经从“能用”向“好用”转变了，其中很重要的一点就是对实时性的要求正在不断提高。 易用性：这里的易用性不只是用起来简单，它还包括了对于多种工具、开发架构的整合，多种开发环境的支持以及跨平台的一体化要求。 安全性：随着大数据深入到企业的更深层，安全性也是企业在应用大数据技术时需要考虑的重要部分，除了保证数据不会泄露、被盗取之外，还应该保证数据不会因为故障或者意外而丢失。