在线时间 1630 小时 最后登录 2024-1-29 注册时间 2017-5-16 听众数 82 收听数 1 能力 120 分 体力 565565 点 威望 12 点 阅读权限 255 积分 174892 相册 1 日志 0 记录 0 帖子 5313 主题 5273 精华 3 分享 0 好友 163
TA的每日心情 开心 2021-8-11 17:59
签到天数: 17 天
[LV.4]偶尔看看III
网络挑战赛参赛者
网络挑战赛参赛者
自我介绍 本人女,毕业于内蒙古科技大学,担任文职专业,毕业专业英语。
群组 : 2018美赛大象算法课程
群组 : 2018美赛护航培训课程
群组 : 2019年 数学中国站长建
群组 : 2019年数据分析师课程
群组 : 2018年大象老师国赛优
基因测序行业解决方案 ; H+ d: f$ O a; N+ S R; W, `: z
基因图被称为“上帝用以创造生命的语言”,但今天我们不谈上帝,不谈基因,我们谈谈基因在IT中的应用和现状。1 d9 K9 f7 T, t: c4 O. E1 R
/ I( |, Z4 B: n1 N6 N3 y+ x
段同学的基因测序行业解决方案,非常不错,赞!推荐!
& [/ z9 J* _5 D. R" y2 y. u4 e : Z f. L# Z @) w7 b' H
7 w8 l5 J' o, S: d% F 近年来,基因行业快速发展,由原本的实验室内的科研项目逐步走向临床应用,计算模式从离线向在线演进,带动医疗和健康行业的发展的同时,也让基因行业迎来新时代。, O- G/ Z) e+ I( U5 ~6 d5 j3 r
' z) f2 p7 L' w9 Z( Z3 ]
基因行业IT现状
e$ }4 p3 U, \: R' ~9 @: o. d , j2 l4 _1 V& k, A" A a" ^
+ Z8 C2 d4 p0 j( g; [
3 S) }5 o2 B, Z3 l% C( Z+ h. m! a 基因计算行业在现实中遇到了很多挑战,主要分为如下几部分:, S8 i+ _- z+ m4 y' q4 g
6 E+ l2 C8 d5 i9 L8 A7 t
1、数据存储方面,由于基因测序技术的提升,测序成本降低。从最初的人类基因组开始细分扩展,目前已经涉及到肿瘤,遗传病检测。扩展到植物,远古生物,细菌,病毒,微生物的基因检测。因此数据种类和数据量是异常庞大,经常以PB为单位保存。$ x$ D0 p5 G$ m: v$ t. ]
9 ?- d. g% |" V# L5 j; q
2、数据计算方面,大规模样本的数据分析和挖掘需要海量计算资源,本地计算成本太高,扩容慢,收效更慢: h! h: ?6 a* C
" i- K v2 I8 Y( n; V 3、数据全球化,因为基因行业的特殊性,很多样本数据需要到当地采集,如果有数据共享,就需要一个全球化,多数据中心的支持1 F5 m, x* c& w/ M* ^$ N
" G4 j6 v8 R4 H9 r9 l, R. Q$ w o
4、数据安全方面,基因数据相对比较隐私,但传统的基因公司IT能力较弱,安全措施不到位,防御能力很弱。# x6 k) T5 ]. @7 B; b) z7 l
4 O0 R8 k" z1 b* X4 A1 _ 针对这些特点,我们很容易想到,云是一个很好的解决办法,为什么这么说?请听我细细道来:' x/ h) m3 ]- M+ |
, u2 b2 k) u" Q% o! h. K7 C
& y! _6 m9 p! j9 V0 |6 t n3 ~ `
2 e1 y' ], j+ L5 w
7 k9 O; T7 c: E, W$ v' G; y
' N. t; n1 _: l
: u- s; I5 g$ s' d
9 N$ _: b# l9 D& P2 Q" o' n7 L % t: w# }1 S4 K, L# }( o
数据计算--云本身的弹性计算能满足基因数据的挖掘和分析,能用最少的时间计算出结果。减少了用户的部署环境,计算的时间成本。' P- H* ^& W n3 d3 H
! Z5 h* P8 U9 I6 B5 [4 r 数据存储—云平台能提供海量的数据存储,且存储的格式多样,一般的云平台能支持文件存储,对象存储,根据数据类型还能支持冷存储(或叫归档存储)。对于PB级的数据,冷存储能减少很多客户成本。
, O4 X8 K* ~: n, d4 m) ^
) f- s4 Q* q; M% H1 U3 q/ Q 数据传输—测序仪产生的大量数据需要靠专线,裸光纤网络进行传输,如果数据量为PB级的,则可以使用寄送硬盘方式传送到云厂家的数据中心。7 o* p( c2 w6 k7 O7 X# ?8 g3 ]
: w* t! r# L( H; y, p+ V
数据安全—云平台本身的vpc的网络隔离,高防,数据加密等安全机制可以保证数据的安全性
2 }* |4 U# B6 p$ }( y 5 B" L# N: o' ?& W0 [
2 i' B: s3 ^1 O# b2 y
, h9 x; V9 D% G0 ~: M; @ 4 ~3 s* w8 }6 I. C* N1 v
基因行业的痛点
+ u4 y) H1 C ?" K4 z# w6 U
4 E+ z8 n# S( G2 R& q4 ^ ' H7 n, a5 G2 v% `4 H4 j
以上说到了基因行业使用云的好处,现在说说基因行业遇到的痛点
7 t0 Q7 T0 J; B# ]! ^3 A' _5 ` " O. R, ]+ {4 x7 ?# y% f* o+ H4 e! a
基因行业产生的原始数据台庞大,动则PB以上,如果从本地传输到云端,使用公网不知道传输到何年何月,如果使用带宽10GB的裸光纤,传输1PB数据需要连续15天,这样的时间跨度没法接受,即使采用寄送硬盘方式,也是需要很大的时间,人力,财务成本。所以,怎么解决数据端传输的云端是第一步,目前只能从远端减少数据量(比如针对基因数据研发一套数据压缩算法), s) X8 A( B4 Z% {/ E$ Y( h$ s
( M+ e" y7 x& x) v 大量基因数据存储在云端,从主观上可能存在数据泄露的可能,这个也是公有云的弊端之一
4 \! k0 W: b3 E" m" @! f, G # L" Y- I+ j U2 Q
基因行业盈利模式还是集中在基因测序的医院,个人,研发机构。国内除了华大等一批上市的领头羊以外,大批的中小型企业都处于寻找商业模式的阶段。
) N' @+ C9 O6 i5 m- Q. g , h5 y5 d0 S ?/ n: t: K
* j4 p- u; I$ z1 W9 {5 d( F+ ]2 Y
# l9 f, J4 c6 o1 u 基因测序产业链
6 c! D- D) B# L# N3 ? 4 l7 v2 P# e4 [7 t& N# z8 \
3 T4 s0 F# b2 Y0 T; ^, j7 ^: I - ]- E6 a3 o* ?
* H* L0 @3 K) _
国内基因测序产业链分为基础研究、上游设备端、中游测序服务端、基因大数据服务和下游应用端
+ N: P& ?; {# F& u- ~ : o! c, I! ~+ A0 g7 }
其中基础研究主要有药物基因组学、医学基础研究、生物学基础研究、微生物宏基因组学等;上游主要是测序设备、耗材及试剂的研发;中游按照疾病诊断的流程分为疾病预防与早筛、辅助疾病诊断和药物伴随诊断;数据服务包括基因数据存储、分析和解读等;下游应用端主要为科研机构、医疗机构、药企、第三方检验中心和个人消费者。2 K* o7 u0 X9 H5 L
- Y" @% K: Z z5 B1 s" e0 M ( K9 ^8 R# n$ D1 a5 U
1 x9 ?# ]4 R, |: v# p
8 _& e& h( G3 E- O a
" J* D4 M6 ^6 m4 |, _/ f! c" x
! ^6 J) C2 O% e5 T; s. o" N
. o- u' w. W- a9 O3 J 5 v3 i5 T7 W) T- h
! p4 b- x. ~& W) R1 [
上游领域,目前的测序技术还停留在二代测序,部分已经使用三代测序技术。整个市场被国外基因检测仪器开发商Illumina长期处于垄断地位,国内主要是华大基因占用一定市场率。
. N% s, ~; e j& i) p$ ?% R) h. ]
: L( H! v, t4 d9 P$ T 中游领域主要以基因组测序积累的数据为基础,应用场景为产前筛查、遗传病检测癌症早筛、药物分子筛选。国内市场以华大基因与贝瑞基因(贝瑞和康)为头,遥遥领先。同时有多家云计算,IT厂家提供IT技术基础,数据分析服务* E* s$ {! K; |+ H8 J. M( c5 W
5 O4 f9 o+ h b; l 下游领域包括:产前筛查、癌症基因检测等检测的需求人士、药厂、医院及科研机构。而目前,基因检测服务中以NIPT为代表的生育健康类服务占据了一半以上的市场,但NIPT市场华大基因和贝瑞和康已经形成垄断。
, Z7 o' T# I' Q2 z9 b" _ 1 R+ w# i+ O1 a% s. S; e' ~( }
8 j: C7 B. N. W: T! P$ c" a
# ~9 v/ i; F" X- l b( i 9 e# M/ i% Z+ c! }4 x
! l2 a, l2 U- Y. P5 }" z0 f
基因测序应用场景
# K/ V# }. C# [. f; ^$ k4 R; } - A/ |3 y. T- M+ n6 [! H
- p }- B* m8 a& D- \ : v i+ U) S+ o/ k3 _
! O6 l) D% r0 y3 {: M7 u* Z
整体来说,目前基因行业的应用场景还是一片蓝海,有很多待需要开发的场景和业务,随着测序成本的降低,能应用的领域也越来越广。同时对IT技术的依赖也会越来越旺盛。) [$ G% S0 V) u
: M$ @ _6 t) a t; N 4 j; R+ w* \! I0 ~+ \
4 v+ v" I" b1 A
zan