- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
基于数加MaxCompute的极速全基因组数据分析
基于数加MaxCompute的
极速全基因组数据分析
黄树嘉
华大基因 基因组学数据专家
全基因组测序的背景与原理
目录
传统单机分析流程的挑战
content
基于MaxCompute的方案
什么是基因
基因,生命的基本因素,是人类
和其他生物的基础遗传物质
什么是基因测序
一个人
一生的基因数据
10TB = 0.1TB + 0.7TB + 2TB + 3TB + X TB
基因组 转录组 表观组 宏基因组 其他
基因数据分析的过程
Sequencing
Variant
Alignment interpretation
Variant calling External/Internal Knowledge
knowledge
integration
1 °Analysis 2 °Analysis 3°Analysis
传统单机分析流程的挑战
挑战1 :流程繁杂,标准难统一
分析流程特点:
1.多个分析步骤
2.每个步骤都会包含很多分析脚本,系统命令和外
部工具
3.工具要被反复手动部署到计算集群
挑战2 :命令行操作、交互性差
挑战3 :时间长
一次测序的数据产出
一次测序的数 一次测序的
测序仪 测序读长(bp) 测序时间周期
据总产量 Reads (Billion)
HiSeq 3000 750GB 2.1-2.5 PE 150 3.5 days
HiSeq 4000 1.5TB 4.3-5.0 PE 150 3.5 days
分析一个人的基因组~120G数据, 时间(小时)
往往需要3天以上的时间。
HPC ~72 (3.0 days)
传统 集群
数据的解读跟不上数据的产出。 单个节点计算 140 (5.8 days)
基于MaxCompute的方案
MaxCompute分布式计算
Reducer
Mapper
您可能关注的文档
- 后基因组时代的疾病管理与健康管理-孙志伟-健康管理师团队.PPT
- 听觉障害儿教育.PPT
- 吸收剂量和反应物浓度对淀粉接枝丙烯酰胺及二甲基二烯丙基氯化铵.PDF
- 吻-医疗器械注册.PDF
- 品格教育统计分析表例.PPT
- 哈尔滨商业大学项目管理硕士研究生培养方案.PDF
- 哈森商贸中国股份有限公司2017年年股东大会会议资料.PDF
- 哈尔滨田润粮油贸易股份有限公司股份转让说明书-上海股权托管交易.PDF
- 唐丽蓉法制教育渗透教育教案-铜仁一中初级中学信息网.DOC
- 商务系2016学年课堂教学创新竞赛的方案-浙江长征职业技术学院.PDF
- 多点监督与特征融合校准:目标检测算法的创新与突破.docx
- 南宁市门诊HIV_AIDS患者抑郁状况剖析与影响因素探究.docx
- 医疗过失犯罪中客观归责理论的精准适用与深度解析.docx
- 南宁市低碳经济发展研究.docx
- 清解瘀毒胶囊对脑出血大鼠血红蛋白毒性作用及机制探究.docx
- 内蒙古赤峰市元宝山区农村小学教师培训:现状、问题与突破路径.docx
- 泉州开发区国有资产投资经营有限公司发展战略研究:基于区域经济与市场环境的分析.docx
- 能源利用效率与经济增长方式的深度耦合及中国战略抉择.docx
- 分布式信号波达方向 - 时延联合估计算法的深度剖析与创新探索.docx
- 新媒体环境下大学校园精神传播的创新变革.docx
最近下载
- 【公开课】第四单元自然界的水大单元教学设计-九年级化学人教版(2024)上册.pptx VIP
- 2025年国投生物制造创新研究院有限公司招聘(31人)考试模拟试题及答案解析.docx VIP
- (高清版)DB34∕T 4866-2024 远程会诊服务规范.pdf VIP
- AMS 3678 D-2016 国外国际标准规范.pdf VIP
- 2023年文昌市委政法委员会招聘专职网格员考试真题(含答案).pdf VIP
- 高中毕业生登记表四川版.doc VIP
- 建设工程审计与案例完整全套教学课件.pptx
- GB50034建筑照明设计标准摘要及分析.pptx VIP
- (2025秋新版)大象版二年级科学上册新教材解读PPT课件.pptx
- 护理输血安全与指南课件.pptx VIP
文档评论(0)