Raghav Karnam

Plume Design Inc.数据科学总监

    Raghav Karnam在Plume领导ML工程，为影响我们网络上5亿多设备的模型提供服务。他的团队专注于ML的各个方面

    1)机器学习的基础设施和工具
    2)数据收集(贴标、工装)
    3) ML神经网络训练
    4)使其工作的科学(例如Devicetyping，异常检测，时间预测)
    5) ML在大规模生产中的部署

    过去的会议

    2021年峰会 从拥有5亿多台设备的2000多万智能家庭中提供洞察

    2021年5月26日04:25 PM PT

    我们开始使用AWS S3、EMR集群和Athena处理大数据，为Tableau BI提供Analytics数据提取。

    然而，随着我们的数据和团队规模的增加，Avro模式从源数据演变而来，我们试图通过Web应用程序提供分析数据，我们在AWS EMR、Glue/Athena方法中遇到了一些限制。

    这是一个关于我们如何扩展数据处理并提高团队生产力的故事，以满足我们目前对全球2000多万智能家居和5亿多台设备的洞察需求，来自众多内部业务团队和150多个CSP合作伙伴。bob体育外网下载

    我们将描述经验教训和建立的最佳实践，我们使我们的团队与DataBricks自动缩放作业集群和笔记本，并迁移我们的Avro/Parquet数据使用MetaStore, SQL端点和SQLA控制台，同时绘制到Delta湖的路径…

    在本节中请注意:
    Sameer Vaidya，建筑师，Plume Design Inc.

    (daisna21-sessions-od)

    Raghav Karnam