资料介绍
基于高性能计算集群这样的新一代测序器和快速演化分析平台,基因研究领域已经被海量数据淹没。众多基因、癌症、医学研究机构和制药公司不断产生的海量数据,已不再能被及时的处理并恰当的存储,甚至通过常规通讯线路进行传输都变得困难。而通常情况下,这些数据必须能被快速存储、分析、共享和归档,以适应基因研究的需要。于是他们不得不诉诸于磁盘驱动器及运输公司,来转移原始数据到国外的计算中心,这为快速访问和分析数据带来了巨大障碍。与规模和速度同等重要的是,所有基因组信息都能基于数据模型和类别被链接,并以机器或人类语言进行标注,这样智能化的数据就能被分解成方程式,在处理基因、临床和环境数据时应用于普通分析平台。
概述
机遇与挑战并存的基因组医学革命
自人类启动基因组计划以来,各项工程已逐步开始揭示人类基因组与疾病间关联的奥秘。随着测序技术的不断进步,仅用1000美元即可识别出基因组。
图1 基因组医学技术进步的十年
人类基因组计划是首个用来确定人类基因组序列的科研项目。该项目历时13年,耗费近30亿美元,于2003年完成,是目前为止最大的生物学合作项目。从那时起,一系列的技术进步在DNA测序和大规模基因组数据分析中展露头脚,对单个人类全基因组进行测序的时间和成本随之急剧下降,下降速度甚至超过了摩尔定律。
图2 DNA测序成本的快速下降
(自2001年以来,美国国家人类基因组研究所(NHGRI)对由美国国立卫生研究院(NIH)资助的测序中心所进行的所有DNA测序工作进行了跟踪,并统计了相关费用,这些信息已作为DNA测序的重要改进评估基准。图中展现出近年来DNA测序技术和数据产生流程的显著改善。来源:NHGRI,http://www.genome.gov/sequencingcosts/)
作为测序技术进步的一个例子,Illumina公司在2014年发布了新一代测序器HiSeq X10,它以每个基因组仅1000美元的成本,一年可解密18000个人类全基因组。这个所谓的“千元基因组技术”使人类全基因组测序比以往任何时候更廉价可行,并有望对医疗保健和生命科学行业产生巨大影响。
新技术和研究方法的成功同样带来了相当大的成本,海量数据成为亟待解决的难题:
基因组数据在过去的8年中,每5个月翻一番。基因编码项目为80%的基因组赋予了明确的含义,所以获取全基因组序列变得尤为重要。癌症基因组研究揭示了一组不同的癌细胞基因变体,通过全基因组测序的跟踪和监控,每次分析都会产生约1TB的数据。已有越来越多的国家启动了基因组测序项目,如美国、英国、中国和卡塔尔。这些项目动辄就会产生数以百PB级的测序数据。
对端到端架构的要求
为了满足基因医药研究对于速度、规模和智能化的苛刻要求,需要端到端参考架构涵盖基因计算的关键功能,如数据管理(数据集线器),负载编排(负载编排器)和企业接入(应用中心)等。为了确定参考架构(能力与功能)和映射解决方案(硬件与软件)的内容和优先级,需要遵循以下三个主要原则:
软件定义:即基于软件的抽象层进行计算、存储和云服务,以此定义基础架构和部署模式,以便在未来通过数据量和计算负载的积累进行基因组基础设施的增长和扩展。数据中心:以数据管理功能面向基因组研究、成像和临床数据的爆炸式增长。应用就绪:整合多种应用到一致的环境,提供数据管理、版本控制、负载管理、工作流编排,以及通过访问执行和监控等多种功能。
概述
机遇与挑战并存的基因组医学革命
自人类启动基因组计划以来,各项工程已逐步开始揭示人类基因组与疾病间关联的奥秘。随着测序技术的不断进步,仅用1000美元即可识别出基因组。
图1 基因组医学技术进步的十年
人类基因组计划是首个用来确定人类基因组序列的科研项目。该项目历时13年,耗费近30亿美元,于2003年完成,是目前为止最大的生物学合作项目。从那时起,一系列的技术进步在DNA测序和大规模基因组数据分析中展露头脚,对单个人类全基因组进行测序的时间和成本随之急剧下降,下降速度甚至超过了摩尔定律。
图2 DNA测序成本的快速下降
(自2001年以来,美国国家人类基因组研究所(NHGRI)对由美国国立卫生研究院(NIH)资助的测序中心所进行的所有DNA测序工作进行了跟踪,并统计了相关费用,这些信息已作为DNA测序的重要改进评估基准。图中展现出近年来DNA测序技术和数据产生流程的显著改善。来源:NHGRI,http://www.genome.gov/sequencingcosts/)
作为测序技术进步的一个例子,Illumina公司在2014年发布了新一代测序器HiSeq X10,它以每个基因组仅1000美元的成本,一年可解密18000个人类全基因组。这个所谓的“千元基因组技术”使人类全基因组测序比以往任何时候更廉价可行,并有望对医疗保健和生命科学行业产生巨大影响。
新技术和研究方法的成功同样带来了相当大的成本,海量数据成为亟待解决的难题:
基因组数据在过去的8年中,每5个月翻一番。基因编码项目为80%的基因组赋予了明确的含义,所以获取全基因组序列变得尤为重要。癌症基因组研究揭示了一组不同的癌细胞基因变体,通过全基因组测序的跟踪和监控,每次分析都会产生约1TB的数据。已有越来越多的国家启动了基因组测序项目,如美国、英国、中国和卡塔尔。这些项目动辄就会产生数以百PB级的测序数据。
对端到端架构的要求
为了满足基因医药研究对于速度、规模和智能化的苛刻要求,需要端到端参考架构涵盖基因计算的关键功能,如数据管理(数据集线器),负载编排(负载编排器)和企业接入(应用中心)等。为了确定参考架构(能力与功能)和映射解决方案(硬件与软件)的内容和优先级,需要遵循以下三个主要原则:
软件定义:即基于软件的抽象层进行计算、存储和云服务,以此定义基础架构和部署模式,以便在未来通过数据量和计算负载的积累进行基因组基础设施的增长和扩展。数据中心:以数据管理功能面向基因组研究、成像和临床数据的爆炸式增长。应用就绪:整合多种应用到一致的环境,提供数据管理、版本控制、负载管理、工作流编排,以及通过访问执行和监控等多种功能。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 数据分析工具下载 5次下载
- 大数据产业链构成分析 20次下载
- 基于大数据分析LTE下行速率影响因素研究案例 15次下载
- 工程大数据分析——汽车传感器数据应用 10次下载
- 基于计算分析的高可用弹性宏基因组学计算平台 6次下载
- 大数据分析如何解决汽车继电器异常资料下载 10次下载
- 基于异质网络层次的基因节点表示学习方法 5次下载
- 通径分析的详细介绍及其在医学研究中的应用中文资料概述 3次下载
- 大数据与推荐系统 18次下载
- 一种轻量级的大数据分析系统 10次下载
- 设计多网络协议的Python网络编程的探索性指南 5次下载
- Agent在数据分析平台中的应用研究 17次下载
- 玩偶机器人的面部表情控制器技术研究 12次下载
- 神经网络在基因序列预测中的应用研究 26次下载
- Agent在数据分析平台中的应用研究 15次下载
- GPU助力基因组重测序分析 1031次阅读
- 数据分析有哪些工具 5827次阅读
- 大数据分析所面临的机遇与挑战 5392次阅读
- 大数据分析如何来增强 952次阅读
- 如何看懂R中的探索性数据分析(附R代码) 3312次阅读
- 什么是大数据分析?大数据分析的含义与目前形式 1.5w次阅读
- 你去将你的基因组测序了吗?面临挑战的基因组数据压缩技术 4411次阅读
- John Sullivan给你的5项技能建议,实践是进入数据科学世界的最佳方式 1791次阅读
- 材料基因组方法如何促进锂电池材料研发 3878次阅读
- 介绍几种用于机器学习探索性数据分析的数据类型 4692次阅读
- EDA实际应用的典型小案例 4018次阅读
- 高通量测序生物信息学分析 1.4w次阅读
- 大数据分析到底需要多少种工具_大数据分析总结 1.1w次阅读
- 常用的数据分析方法有哪些 1.8w次阅读
- 医疗大数据分析深入浅出 9111次阅读
下载排行
本周
- 1东芝BiCD集成电路硅单片TB67S109AFNAG数据手册
- 1.93 MB | 5次下载 | 免费
- 2SP3060A/30120A/30160A/30320A/30520A系列数字合成扫频仪使用说明书
- 4.16 MB | 3次下载 | 1 积分
- 3具有双通道 DC-DC转换器、由串行接口控制的9通道电机驱动器TPIC2010数据表
- 1.15MB | 2次下载 | 免费
- 4USB Type-C PD快充协议智能触发芯片FS312B数据手册
- 0.75 MB | 1次下载 | 免费
- 5USB Type_C PD快充协议智能触发芯片FS8025B数据手册
- 1.29 MB | 1次下载 | 免费
- 6触摸按键PCB 设计要点V01
- 1.42 MB | 1次下载 | 免费
- 7超低噪声、高 PSRR、低压降线性稳压器 (LDO)TPS7H1111-SP和TPS111-SEP数据表
- 4.05MB | 1次下载 | 免费
- 8DC-DC电路(Buck)的设计与仿真
- 0.60 MB | 1次下载 | 2 积分
本月
- 1DCDC原理详解
- 0.98 MB | 65次下载 | 免费
- 2allegro快速入门教程
- 1.98 MB | 36次下载 | 免费
- 3FU-7(807)胆机原理图
- 11.93 MB | 25次下载 | 1 积分
- 4用于汽车应用的高压电源管理IC TPS65311-Q1数据表
- 1.05MB | 22次下载 | 免费
- 5电子元件基础知识介绍
- 8.76 MB | 15次下载 | 2 积分
- 6华为海思Ascend 310芯片的资料说明
- 0.12 MB | 10次下载 | 10 积分
- 7GD32F10x系列MCU用户手册
- 11.5MB | 9次下载 | 免费
- 86A 输出电流同步降压稳压器TPS65286数据表
- 2.05MB | 6次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935083次下载 | 免费
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420045次下载 | 免费
- 3Altium DXP2002下载入口
- 未知 | 233067次下载 | 免费
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191308次下载 | 免费
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183308次下载 | 免费
- 6labview8.5下载
- 未知 | 81567次下载 | 免费
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73785次下载 | 免费
- 8NI LabVIEW中实现3D视觉的工具和技术
- 未知 | 70088次下载 | 免费
评论
查看更多