• 相关博文
  • 最新资讯
加载中...
  • 开源sk-dist,超参数调优仅需3.4秒,sk-learn训练速度提升100倍

    这篇文章为大家介绍了一个开源项目——sk-dist。在一台没有并行化的单机上进行超参数调优,需要 7.2 分钟,而在一百多个核心的 Spark 群集上用它进行超参数调优,只需要 3.4 秒,把训练 sk-learn 的速度提升了 100 倍。

    2019.09.09 0
  • 如何应对大数据分析工程师面试Spark考察,看这一篇就够了

    本篇文章为大家带来spark面试指南,文内会有两种题型,问答题和代码题,题目大部分来自于网络上,有小部分是来自于工作中的总结,每个题目会给出一个参考答案。

    2019.09.03 0
  • 异类框架BigDL,TensorFlow的潜在杀器!

    你能利用现有的Spark集群构建深度学习模型吗?如何分析存储在 HDFS、Hive 和 HBase 中 tb 级的数据吗?企业想用深度学习模型,可是要考虑的问题又很多,怎么破?这篇文章中,我们将给大家讲讲大数据+深度学习下,BigDL框架的利弊与应用教程,为什么有了TF、PyTorch,还是会考虑用BigDL?

  • Apache Kylin v2.5.0正式发布,开源分布式分析引擎

    Kylin 的 Spark 引擎将使用 Spark 运行 Cube 计算中的所有分布式作业,包括获取各个维度的不同值,将 Cuboid 文件转换为 HBase HFile,合并 Segment,合并词典等。默认的 Spark 配置也经过优化,使得用户可以获得开箱即用的体验,相关开发任务是 KYLIN-3427, KYLIN-3441, KYLIN-3442。

    2019.03.07 0

关于我们

关注「AI科技大本营」​

转载 & 投稿(微信):1092722531

商务合作(微信):15222814505