在微流体环境中测定生物细胞的方法
1.相关申请的交叉引用
2.本技术要求于2018年11月1日提交的题为“使用微物体的自动检测和表征来检测微流体环境中分泌的目标生物分子的方法”的美国临时申请62/754,107;于2018年11月1日提交的题为“在微流体环境中抗原特异性t淋巴细胞毒性和由其分泌的生物分子共同检测的方法及其套组”的美国临时申请62/754,147;以及于2019年7月31日提交的题为“使用微物体的自动检测和表征来检测微流体环境中分泌的目标生物分子的方法”的美国临时申请62/881,129的优先权;出于所有目的,将其各自公开的全部内容通过引用整体并入本文。
技术领域
3.本公开总体上涉及用于测定生物细胞(特别是微流体环境中)的方法。该方法可以包括检测分泌的目标生物分子,并且可以包括自动检测和表征图像中的微物体的步骤。例如该方法可以包括用于在第一图像(例如明场图像)中自动检测位于微流体设备内的微物体(例如细胞或珠(bead))的步骤,以及使用检测到的微物体的位置来测量对应图像(例如荧光图像、红外图像、紫外图像)中的微物体的特性的步骤。替代地或者另外,该方法可以包括确定第一生物细胞(例如t淋巴细胞)相对于另一个生物细胞(例如靶细胞)是否具有细胞毒性活性。
技术实现要素:4.在生物学和药学科学中,对一个或多个生物细胞的组进行测定以研究细胞的特性并识别细胞以供进一步研究和/或治疗用途。可以从单个测定生成的数据量以及测定的分辨率(例如检测一个细胞、一小组细胞或一大群细胞的特性)决定了测定的效用。直到近来,由于产生的信号量少,难以成功地进行单个细胞甚至小组细胞的测定。此外,即使当仪器能够对单个细胞进行分析,例如荧光激活细胞分选仪(facs)仪器或基于液滴的微流体平台,分析也可能需要大尺寸的起始样品(例如数百万个细胞)并且多重测定(multiplexing assays)和/或测定后细胞回收的选择可能受到限制或不存在。因此,仍然需要牢靠的测定方法,其能够分析小尺寸的细胞样品并提供单个细胞分析、灵活性和/或多重性(multiplexing)。
5.当前公开的测定方法提供了对由生物细胞分泌(或以其他方式呈现)的一种或多种目标分子的检测。替代地或另外,所公开的测定提供了测试生物细胞对靶生物细胞的细胞毒性活性的量度。所述测定可以在微流体设备的腔室内进行,并且任选地可以结合自动图像处理以及细胞的操纵和/或选择。被测定的生物细胞可以是例如免疫细胞(例如包括cd8+或cd4+t细胞的t淋巴细胞、包括记忆b细胞或浆细胞的b淋巴细胞、自然杀伤(nk)细胞、巨噬细胞等)、癌细胞、干细胞或祖细胞、配子(例如精子或卵母细胞)、胚胎(例如受精卵)等。生物细胞分泌的目标分子可以是例如细胞因子(例如tnfα、tgfβ、infγ、il1β、il2、il4、il6、il10、il12、il13、il17a、il22、gm
‑
csf或其任意组合)。靶生物细胞可以是例如抗原呈递细胞。测定的其他实施方式在下面公开。
6.实施方式300.一种在微流体设备的腔室内检测由生物细胞分泌的第一目标生物分子的方法,所述方法包括:将所述生物细胞放置在微流体设备的腔室中;将第一微物体放置在微流体设备的腔室中或其附近,其中第一微物体包括与第一目标分子结合的第一结合剂;在足以允许生物细胞将第一目标分子分泌到腔室内并且使分泌的第一目标分子扩散并结合到第一微物体的条件下,将生物细胞与第一微物体一起温育;并检测第一目标分子与第一微物体的结合,其中检测结合是根据实施方式200至262中任一项的方法进行的。
7.实施方式301.根据实施方式300的方法,其中所述生物细胞是免疫细胞。
8.实施方式302.根据实施方式301的方法,其中所述免疫细胞是t细胞(例如初始t细胞、记忆t细胞、中央记忆t细胞或效应t细胞等)。
9.实施方式303.根据实施方式301的方法,其中所述免疫细胞是b细胞(例如记忆b细胞)、成浆细胞或浆细胞。
10.实施方式304.根据实施方式301的方法,其中所述免疫细胞是nk细胞或巨噬细胞。
11.实施方式305.根据实施方式300的方法,其中所述生物细胞是肝细胞或神经元。
12.实施方式306.根据实施方式300的方法,其中所述生物细胞是干细胞、祖细胞或来源于干细胞或祖细胞的细胞。
13.实施方式307.根据实施方式300的方法,其中所述生物细胞是受精卵或由胚胎(例如哺乳动物胚胎)包含或分离。
14.实施方式308.根据实施方式300至307中任一项的方法,其中微流体设备的腔室是隔离坞,其包括隔离区域和连接区域,其中连接区域将隔离区域流体连接至微流体设备的流动区域(例如微流体通道),并且其中隔离区域是微流体设备的未扫过区域。
15.实施方式309.根据实施方式308的方法,其中隔离坞的隔离区域具有通向连接区域的单个开口。
16.实施方式310.根据实施方式308或309的方法,其中隔离坞的连接区域具有通向微流体设备的流动区域的近端开口和通向隔离区域的远端开口,其中连接区域的近端开口的宽度w
con
为大约20微米至大约100微米,并且其中从近端开口到远端开口的连接区域的长度l
con
是近端开口的宽度w
con
的至少1.0倍。
17.实施方式311.根据实施方式310的方法,其中从近端开口到远端开口的连接区域的长度l
con
是连接区域的宽度w
con
的至少1.5倍或至少2.0倍。
18.实施方式312.根据实施方式310或311的方法,其中从近端开口到远端开口的连接区域的长度l
con
为大约20微米至大约500微米;并且其中在连接区域的近端开口处的流动区域(或微流体通道)的高度h
ch
为大约20微米至大约100微米;和/或其中在连接区域的近端开口处的流动区域(或微流体通道)的宽度w
ch
为大约50微米至大约500微米。
19.实施方式313.根据实施方式310至312中任一项的方法,其中将所述生物细胞放置在微流体设备的腔室内包括从生物细胞群中选择所述生物细胞并将所选择的生物细胞移至腔室(例如移至隔离坞的隔离区域)中。
20.注意:该选择可以包括执行实施方式200至262中任一项的方法;在选择之前,生物细胞群可以流入微流体设备的流动区域(例如靠近腔室的通道)中;任选地,可以在引入微流体设备之前对细胞群进行染色,以突出一种或多种细胞特性。
21.实施方式314.根据实施方式313的方法,其中所述生物细胞至少部分地基于一种
或多种物理特性(例如通过直径、2d图像中的面积等测量的尺寸;核尺寸与细胞尺寸的比例等)来选择。
22.实施方式315.根据实施方式313或314的方法,其中所述生物细胞至少部分地基于一种或多种表面标记物(例如其各自可以是蛋白质、蛋白聚糖、脂质或其他细胞表面分子)的表达来选择。
23.实施方式316.根据实施方式315的方法,其中一种或多种表面标记物指示免疫细胞类型(例如活化的t细胞)。
24.实施方式317.根据实施方式315的方法,其中一种或多种表面标记物是cd3、cd4、cd8、cd137或其任何组合(例如cd8和cd137)。
25.实施方式318.根据实施方式300至317中任一项的方法,其中放置第一微物体包括将第一微物体放置在微流体设备的腔室内(例如放置于隔离坞的隔离区域)。
26.实施方式319.根据实施方式300至318中任一项的方法,其中第一微物体的第一结合剂包括蛋白质。
27.实施方式320.根据实施方式319的方法,其中第一结合剂的蛋白质是目标分子的抗体或受体。
28.实施方式321.根据实施方式300至320中任一项的方法,其中第一目标分子是蛋白质。
29.实施方式322.根据实施方式300至320中任一项的方法,其中第一目标分子是细胞因子或生长因子。
30.实施方式323.根据实施方式300至320中任一项的方法,其中第一目标分子是激素。
31.实施方式324.根据实施方式300至320中任一项的方法,其中第一目标分子是抗体。
32.实施方式325.根据实施方式300至320中任一项的方法,其中第一目标分子是神经递质。
33.实施方式326.根据实施方式300至320中任一项的方法,其中第一目标分子是小分子(例如代谢物、第二信使、激素)、脂质、脂肪酸或碳水化合物等。
34.实施方式327.根据实施方式300至326中任一项的方法,其中温育生物细胞包括将生物细胞与第一微物体一起温育至少10分钟的时间(例如15、20、25、30、35、40、45、50、55、60分钟或更长时间)。
35.实施方式328.根据实施方式300至327中任一项的方法,其中检测第一目标分子与第一微物体的结合包括:将第一试剂引入到微流体设备中,其中第一试剂在位点(例如表位)结合至第一目标分子,使得第一试剂与第一目标分子的结合不干扰第一目标分子与第一微物体的结合。
36.实施方式329.根据实施方式300至327中任一项的方法,其中检测第一目标分子与第一微物体的结合包括:将第一试剂引入到微流体设备中,其中当第一目标分子也与第一结合剂结合时,第一试剂与第一微物体的第一结合剂结合,而当第一结合剂未与第一目标分子结合时,第一试剂不与第一微物体的第一结合剂结合。
37.实施方式330.根据实施方式328或329的方法,其中第一试剂包括标记物(例如荧
光标记物)。
38.实施方式331.根据实施方式328至330中任一项的方法,其中将第一试剂引入微流体设备包括使试剂流过(或灌注)通过微流体设备。
39.实施方式332.根据实施方式331的方法,其中微流体设备进一步包括微流体通道,其中腔室或隔离坞包括通向微流体通道的开口,并且其中使第一试剂流过微流体设备包括使第一试剂流过微流体通道。
40.实施方式333.根据实施方式300至332中任一项的方法,其中方法还包括:将第二微物体放置在微流体设备的腔室内或其附近,其中第二微物体包括与由所述生物细胞产生的第二目标分子结合的第二结合剂;在足以使生物细胞将第二目标分子分泌到腔室内并使所分泌的第二目标分子扩散并结合到第二微物体的条件下,将所述生物细胞和第二微物体一起温育;并检测第二目标分子与第二微物体的结合,其中检测结合是根据实施方式200至262中任一项的方法进行的。
41.实施方式334.根据实施方式333的方法,其中:第二微物体与第一微物体可检测地区别开;第二目标分子与第一目标分子不同;第二结合剂与第二目标分子结合,并且基本上不与第一目标分子结合,并且第一结合剂基本上不与第二目标分子结合;第二目标分子的结合检测不同于第一目标分子的结合检测。
42.实施方式335.根据实施方式333或334的方法,其中检测第二目标分子与第二微物体的结合包括将第二试剂引入微流体设备,其中第二试剂在位点(例如表位)与第二目标分子结合,使得第二试剂与第二目标分子的结合不干扰第二目标分子与第二微物体的结合。
43.实施方式336.根据实施方式333或334的方法,其中检测第二目标分子与第二微物体的结合包括将第二试剂引入微流体设备,其中第二试剂标记与第二微物体结合的第二分子。
44.实施方式337.根据实施方式333至336中任一项的方法,其中当所述第二目标分子也与第二结合剂结合时,第二试剂与第二微物体的第二结合剂结合,而当第二结合剂未与第二目标分子结合时,第二试剂不与第二微物体的第二结合剂结合。
45.实施方式338.根据实施方式333至337中任一项的方法,其中第二试剂包括标记(例如荧光标记)。
46.实施方式339.根据实施方式338的方法,其中第二试剂的标记在光谱上不同于第一试剂的标记。
47.实施方式340.根据实施方式333至339中任一项的方法,其中第二目标分子是蛋白质。
48.实施方式341.根据实施方式340的方法,其中第二目标分子是抗体、细胞因子、蛋白水解酶或激素。
49.实施方式342.根据实施方式333至339中任一项的方法,其中第二目标分子是小分子。
50.实施方式343.根据实施方式342的方法,其中第二目标分子是神经递质、激素、代谢物、第二信使、激素、脂质、脂肪酸或碳水化合物等。
51.实施方式344.根据实施方式333至343中任一项的方法,其中第二微物体的第二结合剂包含蛋白质。
52.实施方式345.根据实施方式344的方法,其中第二结合剂的蛋白质是第二目标分子的抗体或受体。
53.实施方式346.根据实施方式300至345中任一项的方法,其中微流体设备包括多个腔室。
54.实施方式347.根据实施方式346的方法,其中微流体设备的多个腔室的至少一个子集中的每一个是包括隔离区域和连接区域的隔离坞,其中连接区域将隔离区域流体连接到微流体设备的流动区域(例如微流体通道),并且其中隔离区域是微流体设备的未扫过区域。
55.实施方式348.根据实施方式347的方法,其中隔离坞是实施方式308至312中任一项的隔离坞。
56.实施方式349.一种非暂时性计算机可读介质,其中存储程序,所述程序用于使包括计算机的系统执行一种用于在微流体设备的腔室内检测由生物细胞分泌的第一目标生物分子的方法,所述方法包括:将所述生物细胞放置在微流体设备的腔室中;将第一微物体放置在微流体设备的腔室中或其附近,其中第一微物体包括与第一目标分子结合的第一结合剂;在足以允许生物细胞将第一目标分子分泌到腔室内并且使分泌的第一目标分子扩散并结合到第一微物体的条件下,将所述生物细胞与第一微物体一起温育;并检测第一目标分子与第一微物体的结合。
57.实施方式350.根据实施方式349的非暂时性计算机可读介质,其中该方法是实施方式300到348中任一项的方法。
58.实施方式400.一种在微流体设备中测定t淋巴细胞(t细胞)的抗原特异性细胞毒性的方法,该方法包括:将t细胞放置在微流体设备中;将靶细胞放置在t细胞附近;和确定靶细胞在t细胞附近暴露一段时间后的活力。
59.实施方式401.根据实施方式400的方法,其中靶细胞表达t细胞特异性的抗原。
60.实施方式402.根据实施方式400或401的方法,其中所述测定是联合测定,并且进一步包括:将第一捕获物体放置在t淋巴细胞附近,其中捕获微物体被配置用于捕获从t细胞释放的第一分泌的生物分子;并检测被捕获到第一捕获物体的第一分泌的生物分子。
61.实施方式403.根据实施方式402的方法,其中第一分泌的生物分子是蛋白质。
62.实施方式404.根据实施方式402或403的方法,其中从抗原特异性t细胞释放的第一分泌蛋白是细胞因子。
63.实施方式404.根据实施方式404的方法,其中所述细胞因子是肿瘤坏死因子α(tnfα)、转化生长因子β(tgfβ)、干扰素γ(ifnγ)、白介素1β(il1β)、白介素2(il2)、白介素4(il4)、白介素5(il5)、白介素
‑
6(il6)、白介素
‑
10(il10)、白介素12(il12)、白介素13(il13)、白介素17a(il17a)或白介素22(il22)。
64.实施方式405.根据实施方式402或403的方法,其中从抗原特异性t细胞释放的第一分泌蛋白是颗粒酶或穿孔素蛋白。
65.实施方式406.根据实施方式400至404中任一项的方法,其中所述靶细胞是癌细胞。
66.实施方式407.根据实施方式406的方法,其中所述靶癌细胞是来自表达癌症相关或癌症特异性抗原的细胞系的细胞。
67.实施方式408.根据实施方式406或407的方法,其中所述靶细胞表达与黑素瘤、乳腺癌或肺癌相关的抗原。
68.实施方式409.根据实施方式400至408中任一项的方法,其中所述t细胞是哺乳动物t细胞。
69.实施方式410.根据实施方式400至409中任一项的方法,其中所述t细胞对肿瘤相关性抗原具有抗原特异性。
70.实施方式411.根据实施方式410的方法,其中所述肿瘤相关性抗原是slc45a2、tcl1、vcx3a、mart1或nyeso1。
71.实施方式412.根据实施方式400至411中任一项的方法,其中所述所述t细胞表达嵌合抗原受体。
72.实施方式413.根据实施方式400至411中任一项的方法,其中所述t细胞不表达嵌合抗原受体。
73.实施方式414.根据实施方式400至413中任一项的方法,其中微流体设备包括用于容纳第一流体介质的流动的流动区域和通向流动区域的腔室。
74.实施方式415.根据实施方式414的方法,其中微流体设备还包括微流体通道。
75.实施方式416.根据实施方式414或415的方法,其中流动区域是微流体通道。
76.实施方式417.根据实施方式414至416中任一项的方法,其中腔室包括隔离坞。
77.实施方式418.根据实施方式417的方法,其中隔离坞包括隔离区域和连接区域;隔离区域用于容纳第二流体介质,隔离区域具有单个开口,其中隔离坞的隔离区域是微流体设备的未扫过区域;连接区域将隔离区域流体连接到流动区域。
78.实施方式419.根据实施方式414至418中任一项的方法,其中t细胞、靶细胞和任选的第一捕获物体分别置于腔室内。
79.实施方式420.根据实施方式418或419的方法,其中t细胞、第一捕获物体和靶细胞分别置于隔离坞的隔离区域中。
80.实施方式421.根据实施方式414至418中任一项的方法,其中将t细胞置于腔室内包括将单个t细胞置于腔室内。
81.实施方式422.根据实施方式414至421中任一项的方法,其中将靶细胞置于腔室内包括将单个靶细胞置于腔室内。
82.实施方式423.根据实施方式414至422中任一项的方法,其中使用介电泳(dep)力将t细胞放置在微流体设备内。
83.实施方式424.根据实施方式414至423中任一项的方法,其中使用介电泳(dep)力将第一捕获物体放置在t细胞附近。
84.实施方式425.根据实施方式414至424中任一项的方法,其中使用介电泳(dep)力将靶细胞放置在t细胞附近。
85.实施方式426.根据实施方式423至425中任一项的方法,其中dep力是光学驱动的。
86.实施方式427.根据实施方式400至426中任一项的方法,其中检测捕获到第一捕获物体的第一分泌生物分子还包括温育t细胞一段时间,该时间足以使t细胞分泌第一分泌生物分子,并使第一捕获物体捕获第一分泌生物分子。
87.实施方式428.根据实施方式400至427中任一项的方法,还包括将第一分泌生物分
子检测试剂引入微流体设备。
88.实施方式429.根据实施方式428的方法,其中当第一捕获物体捕获第一分泌生物分子时,第一分泌生物分子检测试剂与第一分泌生物分子结合,而当第一分泌生物分子未被第一捕获物体捕获时,第一分泌生物分子检测试剂不与第一分泌生物分子结合。
89.实施方式430.根据实施方式400至429中任一项的方法,其中检测第一分泌生物分子包括检测比色、发光或荧光信号。
90.实施方式431.根据实施方式400至430中任一项的方法,其中确定靶细胞的活力包括使靶细胞与被配置用于标记无活力细胞的可检测标记物接触。
91.实施方式432.根据实施方式431的方法,其中被配置用于标记无活力细胞的可检测标记物被配置用于标记凋亡细胞。
92.实施方式433.根据实施方式431的方法,其中被配置用于标记无活力细胞的可检测标记物被配置用于标记钙通量或线粒体膜电位。
93.实施方式434.根据实施方式400至433中任一项的方法,其中在多个暴露于t细胞的时间段中重复确定在暴露于t细胞一段时间后的靶细胞的活力。
94.实施方式435.根据实施方式400至434中任一项的方法,其进一步包括标记t细胞中是否存在与增殖、活化、代谢活性、记忆、耗竭和/或谱系相关的一种或多种细胞表面标记物。
95.实施方式436.根据实施方式435的方法,其中用于一种或多种细胞表面标记物的标记是比色、发光或荧光。
96.实施方式437.根据实施方式400至436中任一项的方法,其还包括第二捕获物体,其被配置用于捕获第二分泌的生物分子,其中第二分泌的蛋白质不同于第一分泌的蛋白质。
97.实施方式438.根据实施方式414至437中任一项的方法,其中微流体设备还包括多个腔室。
98.实施方式439.根据实施方式400至438中任一项的方法,其还包括:在确定靶细胞的活力后,从t细胞中捕获核酸。
99.实施方式440.根据实施方式439的方法,进一步包括对从t细胞捕获的核酸进行测序。
100.实施方式441.根据实施方式400至438中任一项的方法,其还包括:确定靶细胞的活力后,从微流体设备输出t细胞。
101.实施方式442.根据实施方式400至441中任一项的方法,其中确定靶细胞的活力包括根据实施方式1至51或93至128中任一项检测靶细胞。
102.实施方式443.根据实施方式402到442中任一项的方法,其中检测捕获到第一捕获物体的第一分泌生物分子包括根据实施方式1到51或93到128中任一项检测第一捕获物体。
103.实施方式450.一种非暂时性计算机可读介质,其中存储有程序,所述程序用于使包括计算机的系统执行在微流体设备中测定t淋巴细胞(t细胞)的抗原特异性细胞毒性的方法,所述方法包括:将t细胞放置在微流体设备中;将靶细胞放置在t细胞附近;并确定靶细胞在t细胞附近暴露一段时间后的活力。
104.实施方式451.根据实施方式500的非暂时性计算机可读介质的方法,其中所述靶
细胞表达t细胞特异性的抗原。
105.实施方式452.根据实施方式450或451的非暂时性计算机可读介质的方法,其中所述测定是联合测定,并且进一步包括:将第一捕获物体放置在t淋巴细胞附近,其中捕获微物体被配置用于捕获从t细胞释放的第一分泌生物分子;并检测被捕获到第一捕获物体的第一分泌生物分子。
106.实施方式453.根据实施方式452的非暂时性计算机可读介质的方法,其中第一分泌生物分子是蛋白质。
107.实施方式454.根据实施方式452或453的非暂时性计算机可读介质的方法,其中从抗原特异性t细胞释放的第一分泌蛋白是细胞因子。
108.实施方式455.根据实施方式451至454中任一项的非暂时性计算机可读介质的方法,其中所述方法是实施方式405至443中任一项的方法。
109.实施方式500.一种用于在微流体设备中通过t淋巴细胞(t细胞)测定抗原特异性细胞毒性的套组,该套组包括:包括用于容纳第一流体介质的流动区域和通向该流动区域的腔室的微流体设备;以及被配置用于检测靶细胞的活力的细胞毒性检测试剂。
110.实施方式501.根据实施方式500的套组,其中所述细胞毒性检测试剂包括被配置用于标记凋亡细胞的试剂。
111.实施方式502.根据实施方式500的套组,其中所述细胞毒性检测试剂包括被配置用于检测钙通量或线粒体膜电位的试剂。
112.实施方式503.根据实施方式500至502中任一项的套组,其进一步包括被配置用于捕获t细胞的第一分泌生物分子的第一捕获物体。
113.实施方式504.根据实施方式503的套组,其进一步包括被配置用于检测第一分泌生物分子的第一生物分子检测试剂,其中该试剂被配置用于产生比色、发光或荧光信号。
114.实施方式505.根据实施方式500至504中任一项的套组,其中所述微流体设备还包括微流体通道。
115.实施方式506.根据实施方式500至505中任一项的套组,其中所述腔室包括隔离坞,其中所述隔离坞包括隔离区域和连接区域;隔离区域用于容纳第二流体介质;隔离区域具有单个开口,其中隔离坞的隔离区域是微流体设备的未扫过区域;连接区域将隔离区域流体连接到流动区域。
116.实施方式507.根据实施方式500至506中任一项的套组,其中流动区域是微流体通道。
117.实施方式508.根据实施方式500至507中任一项的套组,其中微流体设备还包括电极激活衬底。
118.实施方式509.根据实施方式508的套组,其中电极激活衬底被配置用于产生dep力。
119.实施方式510.根据实施方式503至509中任一项的套组,其进一步包括第二捕获物体,和任选地包括第二分泌的生物分子检测试剂,其中第二分泌的生物分子不同于第一分泌生物分子。
120.实施方式511.根据实施方式500至510中任一项的套组,还包括至少一种试剂,该试剂被配置用于标记t细胞的细胞表面标记物,其中细胞表面标记物与增殖、活化、代谢活
性、记忆、耗竭和/或谱系相关。
121.实施方式1.一种用于对照明图像(例如明场图像)中的微物体进行自动检测的方法,所述方法包括:针对对应的多个微物体特性从图像生成多个像素掩模,其中生成多个像素掩模包括使用机器学习算法处理来自所述图像的像素数据,并且其中每个像素掩模包括一组像素注释,所述一组像素注释中的每个像素注释表示图像中的对应像素表示对应微物体特性的概率;以及从多个像素掩模中的至少一个像素掩模获得微物体计数。
122.实施方式2.根据实施方式1所述的方法,其中从多个像素掩模中的像素掩模的组合获得微物体计数。
123.实施方式3.根据实施方式1或2所述的方法,其中多个微物体特性包括至少三个微物体特性。
124.实施方式4.根据实施方式1或2所述的方法,其中多个微物体特性至少包括:(i)微物体中心;(ii)微物体边缘;以及(iii)非微物体。
125.实施方式5.根据实施方式4所述的方法,其中获得微物体计数包括从对应于微物体中心特性的像素掩模,或包括对应于微物体中心特性的像素掩模的像素掩模的组合获得微物体计数。
126.实施方式6.根据实施方式1至5中任一项所述的方法,其中机器学习算法包括神经网络(例如卷积神经网络)。
127.实施方式7.根据实施方式6所述的方法,其中神经网络包括多个下采样块(例如至少2个、3个、4个等的下采样块),每个下采样块包括第一下采样卷积层,第一批量归一化层和包括门函数的第一elu层,并且其中每个第一下采样卷积层降低其接收的图像数据的空间分辨率。
128.实施方式8.根据实施方式7所述的方法,其中下采样块中的一个或多个(例如每个)由(或基本上由)第一下采样卷积层、第一批量归一化层、和第一elu层组成,其中第一elu层直接从第一批量归一化层接收图像数据,并且其中第一批量归一化层直接从第一下采样卷积层接收图像数据。
129.实施方式9.根据实施方式7或8所述的方法,其中每个下采样卷积层将其接收的图像数据的空间分辨率降低2倍(例如通过一次滑动卷积滤波器(或内核)两个像素)。
130.实施方式10.根据实施方式7至9中任一项所述的方法,其中第一下采样卷积层中的每一个包括5
×
5卷积滤波器。
131.实施方式11.根据实施方式7至10中任一项所述的方法,其中多个下采样块中的一个或多个(例如每个)下采样块之后是具有分支结构的残差网络块。
132.实施方式12.根据实施方式11所述的方法,其中残差网络块的分支结构包括第一分支和第二分支,且其中第一分支以比第二分支小的程度处理从先前下采样块接收的图像数据。
133.实施方式13.根据实施方式12所述的方法,其中残差网络块的第一分支包括第二卷积层、第二批量归一化层和包括门函数的第二elu层。
134.实施方式14.根据实施方式13所述的方法,其中残差网络块的第一分支由(或基本上由)第二卷积层、第二批量归一化层和第二elu层组成,其中第二elu层直接从第二批量归一化层接收图像数据,并且其中第二批量归一化层直接从第二卷积层接收图像数据。
135.实施方式15.根据实施方式13或14所述的方法,其中第二卷积层包括1
×
1卷积滤波器。
136.实施方式16.根据实施方式11至15中任一项所述的方法,其中残差网络块的第二分支包括两个或更多个处理单元,其中每个处理单元包括卷积层和批量归一化层。
137.实施方式17.根据实施方式16所述的方法,其中残差网络块的第二分支由(或基本上由)第三卷积层、第三批量归一化层、包括门函数的第三elu层、第四卷积层和第四批量归一化层组成,其中第四批量归一化层直接从第四卷积层接收图像数据,其中第四卷积层直接从第三elu层接收图像数据,其中第三elu层直接从第三批量归一化层接收图像数据,并且其中第三批量归一化层直接从第三卷积层接收图像数据。
138.实施方式18.根据实施方式16或17所述的方法,其中第三卷积层包括3
×
3卷积滤波器。
139.实施方式19.根据实施方式17或18所述的方法,其中第四卷积层包括3
×
3卷积滤波器。
140.实施方式20.根据实施方式11至19中任一项所述的方法,其中,来自残差网络块的第一分支(例如第一分支的elu层)的图像数据和来自残差网络块的第二分支(例如第二分支的第四批量归一化层)的图像数据被重组并传送到包括门函数的第四elu层。
141.实施方式21.根据实施方式6至20中任一项所述的方法,其中神经网络包括第一下采样块、第一残差网络块、第二下采样块、第二残差网络块、第三下采样块和第三残差网络块。
142.实施方式22.根据实施方式21所述的方法,其中第一下采样块和第一残差网络块各自包括32个通道和为图像的空间分辨率的一半的空间分辨率。
143.实施方式23.根据实施方式21或22所述的方法,其中第二下采样块和第二残差网络块各自包括64个通道和为图像的分辨率的四分之一的空间分辨率。
144.实施方式24.根据实施方式21至23中任一项所述的方法,其中第三下采样块和第三残差网络块各自包括128个通道和为图像的分辨率的八分之一的空间分辨率。
145.实施方式25.根据实施方式7至24中任一项所述的方法,其中神经网络包括多个下采样块中的每个下采样块的上采样块,每个上采样块包括转置卷积层、上采样批量归一化层和包括门函数的上采样elu层,并且其中每个上采样块的转置卷积层增加其接收的图像数据的空间分辨率。
146.实施方式26.根据实施方式25所述的方法,其中一个或多个上采样块中的每一个包括重组层,其中来自上采样批量归一化层的图像数据与来自先前残差网络块的图像数据合并。
147.实施方式27.根据实施方式26所述的方法,其中一个或多个上采样块中的每一个由(或基本上由)转置卷积层、上采样批量归一化层、重组层和上采样elu层组成,其中上采样elu层直接从重组层接收图像数据,并且其中上采样批量归一化层直接从重构转置层接收图像数据。
148.实施方式28.根据实施方式25至27中任一项所述的方法,其中每个转置卷积层将接收的图像数据的空间分辨率增加2倍。
149.实施方式29.根据实施方式27或28所述的方法,其中当所述神经网络具有n个下采
样块和n个残差网络块时,所述网络具有包括重组层的n
‑
1个上采样块。
150.实施方式30.根据实施方式25至29中任一项所述的方法,其中神经网络包括:具有从第二残差网络块接收图像数据的重组层的第一上采样块、具有从第一残差网络块接收图像数据的重组层的第二上采样块、以及不包括重组层的第三上采样块。
151.实施方式31.根据实施方式30所述的方法,其中第一上采样块包括64个通道且输出空间分辨率为图像的空间分辨率的四分之一的图像数据。
152.实施方式32.根据实施方式30或31所述的方法,其中第二上采样块包括32个通道且输出空间分辨率为图像的空间分辨率的一半的图像数据。
153.实施方式33.根据实施方式30至32中任一项所述的方法,其中第三上采样块包括3个通道并且输出空间分辨率与图像的分辨率相同的图像数据。
154.实施方式34.根据实施方式6至33中任一项所述的方法,其中神经网络具有与图5a至图5d中所示基本相同的结构。
155.实施方式35.根据实施方式1至34中任一项所述的方法,还包括在生成多个像素掩模之前对图像进行预处理。
156.实施方式36.根据实施方式35所述的方法,其中微物体在微流体设备中成像,且其中所述预处理包括减去在成像期间由微流体设备的至少一个组件产生的重复图案。
157.实施方式37.根据实施方式36所述的方法,其中预处理包括对图像应用傅里叶变换以识别重复图案。
158.实施方式38.根据实施方式36或37所述的方法,其中微流体设备的至少一个组件是衬底表面。
159.实施方式39.根据实施方式36至38中任一项所述的方法,其中微流体设备的至少一个组件是包括光电晶体管阵列的衬底表面。
160.实施方式40.根据实施方式35至39中任一项所述的方法,其中预处理图像包括将图像翻转和/或旋转到期望的取向。
161.实施方式41.根据实施方式35至40中任一项所述的方法,其中预处理图像包括在整个图像调平亮度(例如使用多项式最佳拟合校正、诸如二次或更高阶多项式最佳拟合校正)。
162.实施方式42.根据实施方式35至41中任一项所述的方法,其中预处理图像包括校正在成像过程期间在图像中引起的失真(例如使用通过检查在点之间具有已知间距的点阵列的对应图像而计算的查找表)。
163.实施方式43.根据实施方式35至42中任一项所述的方法,其中预处理图像包括应用对比度增强。
164.实施方式44.根据实施方式1至43中任一项所述的方法,还包括:将在微物体计数中识别的微物体分类为多个微物体类型中的至少一个。
165.实施方式45.根据实施方式6至44中任一项所述的方法,还包括:使用包含微物体的一组训练图像来训练神经网络。
166.实施方式46.根据实施方式45所述的方法,其中训练图像与从训练图像的手动视觉审核获得的训练数据结合使用。
167.实施方式47.根据实施方式45或46所述的方法,其中训练图像与从包含相同类型
和/或数量的微物体的计算机验证图像获得的训练数据结合使用。
168.实施方式48.根据实施方式1至47中任一项所述的方法,其中微物体是生物细胞。
169.实施方式49.根据实施方式48的方法,其中所述生物细胞是免疫细胞(例如t细胞、b细胞、nk细胞或巨噬细胞等)。
170.实施方式50.根据实施方式49的方法,其中所述生物细胞是来自细胞系的细胞(例如cho细胞)或癌细胞。
171.实施方式51.根据实施方式49的方法,其中所述生物细胞是卵母细胞、精子或胚胎。
172.实施方式52.一种非暂时性计算机可读介质,其中存储有程序,该程序用于使包括计算机的系统执行用于自动检测照明图像(例如明场图像)中的微物体的方法,所述方法包含:在存储器中存储可包括一个或多个微物体的图像;针对相应的多个微物体特征从图像产生多个像素掩模;以及从多个像素掩模中的至少一个像素掩模获得微物体计数,其中产生和获得的步骤根据实施方式1至51或93至128中任一项来执行。
173.实施方式53.根据实施方式52所述的非暂时性计算机可读介质的方法,其中所述微物体计数用于布置在微流体设备内的微物体。
174.实施方式54.根据实施方式52或53所述的非暂时性计算机可读介质的方法,其中所述方法还包括预处理图像,其中预处理在产生多个像素掩模之前执行。
175.实施方式55.根据实施方式54所述的非暂时性计算机可读介质的方法,其中微物体在微流体设备内成像,且其中预处理图像包括减去在成像期间由微流体设备的至少一个组件产生的重复图案。
176.实施方式56.根据实施方式55所述的非暂时性计算机可读介质的方法,其中预处理包括对图像应用傅里叶变换以识别重复图案。
177.实施方式57.根据实施方式55或56所述的非暂时性计算机可读介质的方法,其中微流体设备的至少一个组件是衬底表面。
178.实施方式58.根据实施方式55或56所述的非暂时性计算机可读介质的方法,其中微流体设备的至少一个组件是光电晶体管阵列。
179.实施方式59.根据实施方式52至58中任一项所述的非暂时性计算机可读介质的方法,其中多个微物体特性包括微物体中心、微物体边界和非微物体。
180.实施方式60.根据实施方式52至58中任一项所述的非暂时性计算机可读介质的方法,其中多个对应的微物体特性是细胞特性。
181.实施方式61.根据实施方式60所述的非暂时性计算机可读介质的方法,其中所述细胞特性包括细胞中心、细胞边界和非细胞。
182.实施方式62.根据实施方式52至61中任一项所述的非暂时性计算机可读介质的方法,其中被计数的微物体是生物细胞。
183.实施方式63.根据实施方式62所述的非暂时性计算机可读介质的方法,其中所述生物细胞是免疫细胞(例如t细胞、b细胞、nk细胞或巨噬细胞等)。
184.实施方式64.根据实施方式62的非暂时性计算机可读介质的方法,其中所述生物细胞是来自细胞系的细胞(例如cho细胞)或癌细胞。
185.实施方式65.根据实施方式62的非暂时性计算机可读介质的方法,其中所述生物
细胞是卵母细胞、精子或胚胎。
186.实施方式66.根据实施方式52至65中任一项所述的非暂时性计算机可读介质的方法,其中生成步骤在第一模块中执行。
187.实施方式67.根据实施方式52至66中任一项所述的非暂时性计算机可读介质的方法,其中获得步骤在第二模块中执行。
188.实施方式68.根据实施方式52至65中任一项所述的非暂时性计算机可读介质的方法,其中生成和获得的步骤在单个模块中执行。
189.实施方式69.一种在包括多个隔离坞的微流体设备中对微物体重新定位的方法,所述方法包括:识别放置在微流体设备内的一组微物体,其中该组微物体组是根据实施方式1至51中任一项或93至128中任一项所述的方法来识别的;计算一个或多个轨迹,其中每个轨迹是将微物体组中的一个微物体与多个隔离坞中的一个隔离坞连接的路径;针对微物体组中的一个或多个微物体从一个或多个轨迹中选择轨迹;以及通过使微物体沿着其选定轨迹移动来重新定位具有选定轨迹的一或多个微物体中的至少一个微物体(例如可使用dep力执行重新定位,其可以如本文所公开的或本领域已知的任何其他技术而激活)。
190.实施方式70.根据实施方式69所述的方法,其中重新定位具有选定轨迹的一个或多个微物体中的至少一个微物体包括:沿着其选择的轨迹移动第一微物体且沿着其选定轨迹移动第二微物体。
191.实施方式71.根据实施方式70所述的方法,其中第一微物体和第二微物体沿着其选择的轨迹平行移动。
192.实施方式72.根据实施方式69至71中任一项所述的方法,还包括:计算与微物体组相关联的密度值;以及至少部分地基于与微物体组相关联的密度值来计算一个或多个轨迹。
193.实施方式73.根据实施方式72所述的方法,还包括:确定密度值超过阈值;以及针对微物体组中的第一微物体计算将第一微物体与多个隔离坞中的一个或多个隔离坞连接的一个或多个轨迹。
194.实施方式74.根据实施方式72所述的方法,还包括:确定密度值不超过阈值;以及针对多个隔离坞中的第一隔离坞计算将第一隔离坞与微物体组中的一个或多个微物体连接的一个或多个轨迹。
195.实施方式75.根据实施方式69至74中任一项所述的方法,还包括识别多个隔离坞中的空的隔离坞,其中一个或多个计算的轨迹将微物体组中的一个微物体与多个隔离坞中的一个空的隔离坞连接。
196.实施方式76.根据实施方式69至75中任一项所述的方法,其中选择一个或多个轨迹中的轨迹包括为正被重新定位的每个微物体选择轨迹,使得选择的轨迹的长度的和被最小化。
197.实施方式77.根据实施方式76所述的方法,其中使选择的轨迹的长度的和最小化包括使用以下各项中的至少一种:贪心算法、基于启发式的算法、非线性算法和受约束的搜索。
198.实施方式78.根据实施方式69至77中任一项所述的方法,其中选择一个或多个轨迹中的轨迹还包括确定轨迹是否超过预定最大长度。
199.实施方式79.根据实施方式69至78中任一项所述的方法,其中对一个或多个微物体中的至少一个微物体重新定位包括在第一时间段内将至少一个微物体中的每一个从初始速度加速到行进速度。
200.实施方式80.根据实施方式69所述的方法,其中对一个或多个微物体中的至少一个微物体进行重新定位包括使至少一个微物体中的每一个在第二时间段内从行进速度减速到最终速度。
201.实施方式81.一种在微流体设备中对微物体重新定位的方法,所述方法包括:识别放置在微流体设备的指定的空间区域内的微物体组,其中根据实施方式1到51或93到128中任一项所述的方法识别微物体组;计算将指定的空间区域划分成子区域的顶点组,每个子区域包含微物体组中的一个或多个微物体;基于所计算的顶点组来生成用于微物体组中的第一微物体的第一光笼;以及相对于微流体设备的指定的空间区域移动第一光笼以对第一微物体重新定位(例如可产生用于对应的多个微物体的多个光笼,然后使多个光笼相对于微流体设备的指定的空间区域移动)。
202.实施方式82.根据实施方式81所述的方法,其中计算顶点组包括计算将指定的空间区域划分成子区域的顶点组,其中子区域的至少子集包含微物体组中的单个微物体。
203.实施方式83.根据实施方式81或82所述的方法,其中计算顶点组包括:计算微物体组的delaunay三角剖分;基于微物体组的delaunay三角剖分生成维诺图;以及基于维诺图识别该顶点组。
204.实施方式84.根据实施方式81至83中任一项所述的方法,其中生成第一光笼包括:产生链接顶点组的顶点子集的多个光条,其中顶点子集包括最接近并环绕第一微物体的顶点(或由最接近并环绕第一微物体的顶点组成)。
205.实施方式85.根据实施方式84所述的方法,还包括缩小第一光笼的尺寸,从而将第一微物体与指定的空间区域中的其他微物体和/或光笼分离。
206.实施方式86.根据实施方式81至83中任一项所述的方法,其中生成第一光笼包括:针对微物体组中的第一微物体来计算初始光笼;计算初始光笼与顶点组之间的交点;以及基于初始光笼与顶点组之间的交点产生改进的第一光笼。
207.实施方式87.根据实施方式81至86中任一项所述的方法,还包括:基于所计算的顶点组生成用于微物体组中的第二微物体的第二光笼。
208.实施方式88.根据实施方式87所述的方法,其还包含相对于微流体设备的指定的空间区域移动第一改进的光笼及第二改进的光笼,以物理地分离第一微物体与第二微物体。
209.实施方式89.根据实施方式88所述的方法,其中第一微物体和第二微物体最初位于指定的空间区域的相邻子区域中。
210.实施方式90.根据实施方式81至89中任一项所述的方法,其中目标微物体是细胞。
211.实施方式91.根据实施方式90所述的方法,其中细胞是哺乳动物细胞。
212.实施方式92.根据实施方式90或91的方法,其中细胞选自血细胞、杂交瘤、癌细胞和转化细胞。
213.实施方式93.一种用于自动检测照明图像(例如明场图像)中的微物体的方法,所述方法包括:接收微流体设备的图像数据;预处理所述图像数据以减少图像数据中的异常;
使用神经网络处理图像数据中的像素数据,以根据多个微物体特性来注释像素数据,并输出像素数据中的每个像素的概率值;应用阈值以确定哪些像素概率至少满足定义的阈值;以及基于在阈值应用之后可识别的微物体的数量来确定微物体计数。
214.实施方式94.根据实施方式93所述的方法,其中神经网络包括下采样块,所述下采样块包括下采样卷积层、下采样批量归一化层以及下采样激活层。
215.实施方式95.根据实施方式93所述的方法,其中神经网络包括多个下采样块,每个下采样块包括下采样卷积层、下采样批量归一化层和下采样激活层。
216.实施方式96.根据实施方式94或95所述的方法,其中每个下采样卷积层将图像数据的空间分辨率降低2倍。
217.实施方式97.根据实施方式94或95所述的方法,其中每个下采样卷积层将图像数据的空间分辨率降低2倍,并且其中每个下采样卷积层包括5
×
5卷积滤波器。
218.实施方式98.根据实施方式94或95所述的方法,其中多个下采样块中的一个或多个之后是具有分支结构的残差网络块。
219.实施方式99.根据实施方式98所述的方法,其中残差网络块的分支结构包括第一分支和第二分支,且其中第一分支以比第二分支小的程度处理从先前下采样块接收的图像数据。
220.实施方式100.根据实施方式99所述的方法,其中残差网络块的第一分支包括第一分支卷积层、第一分支批量归一化层和第一分支激活层。
221.实施方式101.根据实施方式100所述的方法,其中第一分支激活层直接从第一分支批量归一化层接收图像数据,并且其中第一分支批量归一化层直接从第一分支卷积层接收图像数据。
222.实施方式102.根据实施方式100或101所述的方法,其中第一分支卷积层包括1
×
1卷积滤波器。
223.实施方式103.根据实施方式99至102中任一项所述的方法,其中残差网络块的第二分支包括两个或更多个处理单元,其中每个处理单元包括残差卷积层和残差批量归一化层。
224.实施方式104.根据实施方式103所述的方法,其中残差网络块的第二分支包括第一残差卷积层、第一残差批量归一化层、第二分支激活层、第二残差卷积层和第二残差批量归一化层,其中第二残差批量归一化层直接从所述第二残差卷积层接收图像数据,其中第二残差卷积层直接从第二分支激活层接收图像数据,其中第二分支激活层直接从第一残差批量归一化层接收图像数据,并且其中第一残差批量归一化层直接从第一残差卷积层接收图像数据。
225.实施方式105.根据实施方式104所述的方法,其中第一残差卷积层包括第一残差卷积滤波器,并且第二残差卷积层包括第二残差卷积滤波器,并且其中第一残差卷积滤波器和第二残差卷积滤波器具有不同的尺寸。
226.实施方式106.根据实施方式104所述的方法,其中第一残差卷积层包括第一残差卷积滤波器,并且第二残差卷积层包括第二残差卷积滤波器,并且其中第一残差卷积滤波器和第二残差卷积滤波器具有相同的尺寸。
227.实施方式107.根据实施方式99至106中任一项所述的方法,其中来自第一分支和
第二分支的图像数据被重组并被传送到残差网络激活层。
228.实施方式108.根据实施方式94至107中任一项所述的方法,其中神经网络包括第一下采样块、第一残差网络块、第二下采样块、第二残差网络块、第三下采样块和第三残差网络块。
229.实施方式109.根据实施方式108所述的方法,其中第一下采样块和第一残差网络块各自包括32个通道和为图像的空间分辨率的一半的空间分辨率。
230.实施方式110.根据实施方式108或109所述的方法,其中第二下采样块和第二残差网络块各自包括64个通道和为图像的分辨率的四分之一的空间分辨率。
231.实施方式111.根据实施方式108至110中任一项所述的方法,其中第三下采样块和第三残差网络块各自包括128个通道和为图像的分辨率的八分之一的空间分辨率。
232.实施方式112.根据实施方式95至111中任一项所述的方法,其中神经网络包括针对多个下采样块中的每个下采样块的上采样块,每个上采样块包括转置卷积层、上采样批量归一化层和上采样激活层,并且其中每个上采样块的转置卷积层增加其接收的图像数据的空间分辨率。
233.实施方式113.根据实施方式112所述的方法,其中上采样块中的一个或多个包括重组层,其中来自上采样批量归一化层的图像数据与来自先前残差网络块的图像数据合并。
234.实施方式114.根据实施方式113所述的方法,其中一个或多个上采样块包括转置卷积层、上采样批量归一化层、重组层和上采样激活层,其中上采样激活层直接从重组层接收图像数据,其中重组层直接从上采样批量归一化层接收图像数据,并且其中上采样批量归一化层直接从转置卷积层接收图像数据。
235.实施方式115.根据实施方式112至114中任一项所述的方法,其中每个转置卷积层将图像数据的空间分辨率增加2倍。
236.实施方式116.根据实施方式113或114所述的方法,其中当神经网络具有n个下采样块和n个残差网络块时,网络具有包括重组层的n
‑
1个上采样块。
237.实施方式117.根据实施方式113至116中任一项所述的方法,其中神经网络包括:具有从第二残差网络块接收图像数据的重组层的第一上采样块、具有从第一残差网络块接收图像数据的重组层的第二上采样块、以及不包括重组层的第三上采样块。
238.实施方式118.根据实施方式117所述的方法,其中第一上采样块包括64个通道且输出空间分辨率为图像的空间分辨率的四分之一的图像数据。
239.实施方式119.根据实施方式117或118所述的方法,其中第二上采样块包括32个通道且输出空间分辨率为图像的空间分辨率的一半的图像数据。
240.实施方式120.根据实施方式117至120中任一项所述的方法,其中第三上采样块包括3个通道并且输出空间分辨率与图像的分辨率相同的图像数据。
241.实施方式121.根据实施方式93至120中任一项所述的方法,还包括:将微物体分类为多个微物体类型中的至少一个。
242.实施方式122.根据实施方式93至121中任一项所述的方法,还包括:使用包含微物体的一组训练图像来训练神经网络。
243.实施方式123.根据实施方式122所述的方法,其中训练图像与从训练图像的手动
视觉审核获得的训练数据结合使用。
244.实施方式124.根据实施方式122或123所述的方法,其中训练图像与从包含相同类型和/或数量的微物体的计算机验证图像获得的训练数据结合使用。
245.实施方式125.根据实施方式93至124中任一项所述的方法,其中微物体是生物细胞。
246.实施方式126.根据实施方式125的方法,其中所述生物细胞是免疫细胞。
247.实施方式127.根据实施方式125的方法,其中所述生物细胞是来自细胞系的细胞或癌细胞。
248.实施方式128.根据实施方式125的方法,其中所述生物细胞是卵母细胞、精子或胚胎。
249.实施方式129.一种非暂时性计算机可读介质,其中存储有程序,该程序用于使包括计算机的系统执行用于自动检测照明图像(例如明场图像)中的微物体的方法,所述方法包含:接收微流体设备的图像数据;预处理图像数据以减少图像数据中的异常;使用神经网络处理图像数据中的像素数据,以根据多个微物体特性来注释像素数据,并输出像素数据中的每个像素的概率值;应用阈值以确定哪些像素概率至少满足定义的阈值;以及基于在阈值应用之后可识别的微物体的数量来确定微物体计数。
250.实施方式130.根据实施方式129所述的非暂时性计算机可读介质的方法,其中神经网络包括下采样块,所述下采样块包括下采样卷积层、下采样批量归一化层以及下采样激活层。
251.实施方式131.根据实施方式129所述的非暂时性计算机可读介质的方法,其中神经网络包括多个下采样块,每个下采样块包括下采样卷积层、下采样批量归一化层以及下采样激活层。
252.实施方式132.根据实施方式130或131所述的非暂时性计算机可读介质的方法,其中每个下采样卷积层将图像数据的空间分辨率降低2倍。
253.实施方式133.根据实施方式130或131所述的非暂时性计算机可读介质的方法,其中每个下采样卷积层将图像数据的空间分辨率降低2倍,并且其中每个下采样卷积层包括5
×
5卷积滤波器。
254.实施方式134.根据实施方式130或131所述的非暂时性计算机可读介质的方法,其中所述多个下采样块中的一个或多个下采样块之后是具有分支结构的残差网络块。
255.实施方式135.根据实施方式134所述的非暂时性计算机可读介质的方法,其中残差网络块的分支结构包括第一分支和第二分支,且其中第一分支以比第二分支小的程度处理从先前下采样块接收的图像数据。
256.实施方式136.根据实施方式135所述的非暂时性计算机可读介质的方法,其中残差网络块的第一分支包括第一分支卷积层、第一分支批量归一化层和第一分支激活层。
257.实施方式137.根据实施方式136所述的非暂时性计算机可读介质的方法,其中第一分支激活层直接从第一分支批量归一化层接收图像数据,并且其中第一分支批量归一化层直接从第一分支卷积层接收图像数据。
258.实施方式138.根据实施方式136或137所述的非暂时性计算机可读介质的方法,其中第一分支卷积层包括1
×
1卷积滤波器。
259.实施方式139.根据实施方式135至137中任一项所述的非暂时性计算机可读介质的方法,其中残差网络块的第二分支包括两个或更多个处理单元,其中每个处理单元包括残差卷积层和残差批量归一化层。
260.实施方式140.根据实施方式139所述的非暂时性计算机可读介质的方法,其中残差网络块的第二分支包括第一残差卷积层、第一残差批量归一化层、第二分支激活层、第二残差卷积层和第二残差批量归一化层,其中第二残差批量归一化层直接从第二残差卷积层接收图像数据,其中第二残差卷积层直接从第二分支激活层接收图像数据,其中第二分支激活层直接从第一残差批量归一化层接收图像数据,并且其中第一残差批量归一化层直接从第一残差卷积层接收图像数据。
261.实施方式141.根据实施方式140所述的非暂时性计算机可读介质的方法,其中第一残差卷积层包括第一残差卷积滤波器,并且第二残差卷积层包括第二残差卷积滤波器,并且其中第一残差卷积滤波器和第二残差卷积滤波器具有不同的尺寸。
262.实施方式142.根据实施方式140所述的非暂时性计算机可读介质的方法,其中第一残差卷积层包括第一残差卷积滤波器,并且第二残差卷积层包括第二残差卷积滤波器,并且其中第一残差卷积滤波器和第二残差卷积滤波器具有相同的尺寸。
263.实施方式143.根据实施方式135至142中任一项所述的非暂时性计算机可读介质的方法,其中来自第一分支和第二分支的图像数据被重组并传送到残差网络激活层。
264.实施方式144.根据实施方式129至143中任一项所述的非暂时性计算机可读介质的方法,其中神经网络包括第一下采样块、第一残差网络块、第二下采样块、第二残差网络块、第三下采样块和第三残差网络块。
265.实施方式145.根据实施方式144所述的非暂时性计算机可读介质的方法,其中第一下采样块和第一残差网络块各自包括32个通道和为图像的空间分辨率的一半的空间分辨率。
266.实施方式146.根据实施方式144或145所述的非暂时性计算机可读介质的方法,其中第二下采样块和第二残差网络块各自包括64个通道和为图像的分辨率的四分之一的空间分辨率。
267.实施方式147.根据实施方式144至146中任一项所述的非暂时性计算机可读介质的方法,其中第三下采样块和第三残差网络块各自包括128个通道和为图像的分辨率的八分之一的空间分辨率。
268.实施方式148.根据实施方式131至147中任一项所述的非暂时性计算机可读介质的方法,其中神经网络包括针对多个下采样块中的每一个的上采样块,每个上采样块包括转置卷积层、上采样批量归一化层和上采样激活层,并且其中每个上采样块的转置卷积层增加其接收的图像数据的空间分辨率。
269.实施方式149.根据实施方式148所述的非暂时性计算机可读介质的方法,其中上采样块中的一个或多个包括重组层,在重组层中来自上采样批量归一化层的图像数据与来自先前残差网络块的图像数据合并。
270.实施方式150.根据实施方式149所述的非暂时性计算机可读介质的方法,其中一个或多个上采样块包括转置卷积层、上采样批量归一化层、重组层和上采样激活层,其中上采样激活层直接从重组层接收图像数据,其中重组层直接从上采样批量归一化层接收图像
数据,并且其中上采样批量归一化层直接从转置卷积层接收图像数据。
271.实施方式151.根据实施方式148至150中任一项所述的非暂时性计算机可读介质的方法,其中每个转置卷积层将图像数据的空间分辨率增加2倍。
272.实施方式152.根据实施方式149或150所述的非暂时性计算机可读介质的方法,其中当神经网络具有n个下采样块和n个残差网络块时,所述网络具有包括重组层的n
‑
1个上采样块。
273.实施方式153.根据实施方式149至151中任一项所述的非暂时性计算机可读介质的方法,其中神经网络包括:具有接收来自第二残差网络块的图像数据的重组层的第一上采样块、具有从第一残差网络块接收图像数据的重组层的第二上采样块、以及不包括重组层的第三上采样块。
274.实施方式154.根据实施方式153所述的非暂时性计算机可读介质的方法,其中第一上采样块包括64个通道且输出空间分辨率为图像的空间分辨率的四分之一的图像数据。
275.实施方式155.根据实施方式153或154所述的非暂时性计算机可读介质的方法,其中第二上采样块包括32个通道且输出空间分辨率为图像的空间分辨率的一半的图像数据。
276.实施方式156.根据实施方式153至155中任一项所述的非暂时性计算机可读介质的方法,其中第三上采样块包括3个通道并且输出空间分辨率与图像的分辨率相同的图像数据。
277.实施方式157.根据实施方式129至156中任一项所述的非暂时性计算机可读介质的方法,还包括:将微物体分类为多个微物体类型中的至少一个。
278.实施方式158.根据实施方式129至157中任一项所述的非暂时性计算机可读介质的方法,还包括:使用包含微物体的一组训练图像来训练神经网络。
279.实施方式159.根据实施方式158所述的非暂时性计算机可读介质的方法,其中训练图像与从训练图像的手动视觉审核获得的训练数据结合使用。
280.实施方式160.根据实施方式158或159所述的非暂时性计算机可读介质的方法,其中训练图像与从包含相同类型和/或数量的微物体的计算机验证图像获得的训练数据结合使用。
281.实施方式161.根据实施方式129至160中任一项所述的非暂时性计算机可读介质的方法,其中所述微物体是生物细胞。
282.实施方式162.根据实施方式161所述的非暂时性计算机可读介质的方法,其中所述生物细胞是免疫细胞。
283.实施方式163.根据实施方式161所述的非暂时性计算机可读介质的方法,其中所述生物细胞是来自细胞系的细胞或癌细胞。
284.实施方式164.根据实施方式161所述的非暂时性计算机可读介质的方法,其中所述生物细胞是卵母细胞、精子或胚胎。
285.实施方式165.一种用于自动检测图像中的微物体的系统,包括:图像获取单元和微物体检测单元,所述图像获取单元包括:成像元件,其被配置用于捕获微流体设备的一个或多个图像,以及图像预处理引擎,被配置用于减少图像数据中的异常;所述微物体检测单元与图像获取单元通信地连接,所述微物体检测单元包括:神经网络,被配置用于根据多个微物体特性来注释图像中的像素数据,并输出像素数据中的每个像素的概率值;阈值引擎,
被配置用于确定哪些像素概率至少满足定义的阈值,以及检测引擎,被配置用于应用图像后处理技术并输出微物体计数。
286.实施方式166.根据实施方式165所述的系统,其中神经网络包括下采样块,所述下采样块包括下采样卷积层、下采样批量归一化层和下采样激活层。
287.实施方式167.根据实施方式165所述的系统,其中神经网络包括多个下采样块,每个下采样块包括下采样卷积层、下采样批量归一化层,以及下采样激活层。
288.实施方式168.根据实施方式166或167所述的系统,其中每个下采样卷积层被配置为将图像数据的空间分辨率降低2倍。
289.实施方式169.根据实施方式166或167的系统,其中每个下采样卷积层被配置为将图像数据的空间分辨率降低2倍,并且其中每个下采样卷积层包括5
×
5卷积滤波器。
290.实施方式170.根据实施方式166或167所述的系统,其中多个下采样块中的一个或多个下采样块之后是具有分支结构的残差网络块。
291.实施方式171.根据实施方式170所述的系统,其中残差网络块的分支结构包括第一分支和第二分支,且其中第一分支以比第二分支小的程度处理从先前下采样块接收的图像数据。
292.实施方式172.根据实施方式171所述的系统,其中残差网络块的第一分支包括第一分支卷积层、第一分支批量归一化层和第一分支激活层。
293.实施方式173.根据实施方式172所述的系统,其中第一分支激活层被配置为直接从第一分支批量归一化层接收图像数据,并且其中第一分支批量归一化层被配置为直接从第一分支卷积层接收图像数据。
294.实施方式174.根据实施方式172或173所述的系统,其中第一分支卷积层包括1
×
1卷积滤波器。
295.实施方式175.根据实施方式171至173中任一项所述的系统,其中残差网络块的第二分支包括两个或更多个处理单元,其中每个处理单元包括残差卷积层和残差批量归一化层。
296.实施方式176.根据实施方式175所述的系统,其中残差网络块的第二分支包括第一残差卷积层、第一残差批量归一化层、第二分支激活层、第二残差卷积层和第二残差批量归一化层,其中第二残差批量归一化层被配置用于直接从第二残差卷积层接收图像数据,其中第二残差卷积层被配置用于直接从第二分支激活层接收图像数据,其中第二分支激活层被配置用于直接从第一残差批量归一化层接收图像数据,且其中第一残差批量归一化层被配置用于直接从第一残差卷积层接收图像数据。
297.实施方式177.根据实施方式176所述的系统,其中第一残差卷积层包括第一残差卷积滤波器,并且第二残差卷积层包括第二残差卷积滤波器,并且其中第一残差卷积滤波器和第二残差卷积滤波器具有不同的尺寸。
298.实施方式178.根据实施方式176所述的系统,其中第一残差卷积层包括第一残差卷积滤波器,并且第二残差卷积层包括第二残差卷积滤波器,并且其中第一残差卷积滤波器和第二残差卷积滤波器具有相同的尺寸。
299.实施方式179.根据实施方式176至178中任一项所述的系统,其中残差网络块还包括重组层,重组层被配置用于重组来自第一分支和第二分支的图像数据,并且将来自重组
层的输出传送到残差网络激活层。
300.实施方式180.根据实施方式175至179中任一项所述的系统,其中神经网络包括第一下采样块、第一残差网络块、第二下采样块、第二残差网络块、第三下采样块和第三残差网络块。
301.实施方式181.根据实施方式180所述的系统,其中第一下采样块和第一残差网络块各自包括32个通道和为图像的空间分辨率的一半的空间分辨率。
302.实施方式182.根据实施方式180或181所述的系统,其中第二下采样块及第二残差网络块各自包括64个通道和为图像的分辨率的四分之一的空间分辨率。
303.实施方式183.根据实施方式180至182中任一项所述的系统,其中第三下采样块和第三残差网络块各自包括128个通道和为图像的分辨率的八分之一的空间分辨率。
304.实施方式184.根据实施方式179至183中任一项所述的系统,其中神经网络包括针对所述多个下采样块中的每个下采样块的上采样块,每个上采样块包括转置卷积层、上采样批量归一化层和上采样激活层,并且其中每个上采样块的转置卷积层被配置以增加其接收的图像数据的空间分辨率。
305.实施方式185.根据实施方式184所述的系统,其中上采样块中的一个或多个包括重组层,其被配置用于将来自上采样批量归一化层的图像数据与来自先前残差网络块的图像数据合并。
306.实施方式186.根据实施方式185所述的系统,其中一个或多个上采样块包括转置卷积层、上采样批量归一化层、重组层和上采样激活层,其中上采样激活层被配置用于直接从重组层接收图像数据,其中重组层被配置用于直接从上采样批量归一化层接收图像数据,并且其中上采样批量归一化层被配置用于直接从转置卷积层接收图像数据。
307.实施方式187.根据实施方式184至186中任一项所述的系统,其中每个转置卷积层被配置用于将图像数据的空间分辨率增加2倍。
308.实施方式188.根据实施方式185或186所述的系统,其中当神经网络具有n个下采样块和n个残差网络块时,所述网络具有包括重组层的n
‑
1个上采样块。
309.实施方式189.根据实施方式185至188中任一项所述的系统,其中神经网络包括具有被配置用于从第二残差网络块接收图像数据的重组层的第一上采样块、具有被配置用于从第一残差网络块接收图像数据的重组层的第二上采样块,以及不包括重组层的第三上采样块。
310.实施方式190.根据实施方式189所述的系统,其中第一上采样块包括64个通道且输出空间分辨率为图像的空间分辨率的四分之一的图像数据。
311.实施方式191.根据实施方式189或190所述的系统,其中第二上采样块包括32个通道且输出空间分辨率为图像的空间分辨率的一半的图像数据。
312.实施方式192.根据实施方式189至191中任一项所述的系统,其中第三上采样块包括3个通道并且输出空间分辨率与图像的分辨率相同的图像数据。
313.实施方式193.根据实施方式165至192中任一项所述的系统,其中所述微物体是生物细胞。
314.实施方式194.根据实施方式193所述的系统,其中所述生物细胞是免疫细胞。
315.实施方式195.根据实施方式193所述的系统,其中所述生物细胞是来自细胞系的
细胞或癌细胞。
316.实施方式196.根据实施方式193所述的系统,其中所述生物细胞是卵母细胞、精子或胚胎。
317.实施方式200.一种用于检测和表征微流体设备中的微物体的方法,所述方法包括:接收微流体设备中的目标区域的第一图像和一个或多个第二图像;预处理第一图像和一个或多个第二图像以减少图像数据中的异常;变换一个或多个第二图像中的每一个图像以将第二图像与第一图像光学对准;使用机器学习算法处理第一图像中的像素数据以检测存在于目标区域中的微物体,其中检测每个微物体包括识别微物体的边界;以及检测位于一个或多个第二图像中的每一个图像中的每个检测到的微物体的每个边界内的信号。
318.实施方式201.根据实施方式200所述的方法,其中一个或多个第二图像中的至少一个图像是荧光图像,并且其中在至少一个第二图像中检测到的信号是荧光信号。
319.实施方式202.根据实施方式201所述的方法,其中一个或多个第二图像中的每一个图像是荧光图像,并且其中在一个或多个第二图像中的每一个图像中检测到的信号是荧光信号。
320.实施方式203.根据实施方式201或202所述的方法,其中每个荧光图像表示来自可见光谱的独特部分的荧光信号。
321.实施方式204.根据实施方式203所述的方法,其中每个荧光图像表示来自可见光谱的非重叠部分的荧光信号。
322.实施方式205.根据实施方式200至204中任一项所述的方法,其中检测到的每个荧光信号与特异性结合到一个或多个检测到的微物体所包括的生物分子的试剂相关联。
323.实施方式206.根据实施方式200至205中任一项所述的方法,其中第一图像和至少一个第二图像的预处理减少在第一图像和至少一个第二图像的生成期间引入的噪声和/或光学失真。
324.实施方式207.根据实施方式200至206中任一项所述的方法,其中处理第一图像中的像素数据根据实施方式1至51或93至128中任一项来执行(假设从多个像素掩模中的至少一个像素掩模获得微物体计数的步骤是可选的)。
325.实施方式208.根据实施方式200至206中任一项所述的方法,其中处理第一图像中的像素数据以检测存在于目标区域中的微物体包括使用机器学习算法以便针对对应的多个微物体特性而从第一图像生成多个像素掩模,其中每个像素掩模包括一组像素注释,该组像素注释中的每个像素注释表示图像中的对应像素表示对应微物体特性的概率。
326.实施方式209.根据实施方式208所述的方法,其中检测微物体包括使用多个像素掩模中的像素掩模的组合。
327.实施方式210.根据实施方式208或209所述的方法,其中多个微物体特性包括至少三个微物体特性。
328.实施方式211.根据实施方式208至210中任一项所述的方法,其中多个微物体特性至少包括:(i)微物体中心;(ii)微物体边缘;以及(iii)非微物体。
329.实施方式212.根据实施方式211所述的方法,其中检测微物体是基于与微物体中心特性相对应的像素掩模或包含与微物体中心特性相对应的像素掩模的像素掩模的组合。
330.实施方式213.根据实施方式208至212中任一项所述的方法,其中机器学习算法包
括神经网络(例如卷积神经网络)。
331.实施方式214.根据实施方式200至206或208至213中任一项所述的方法,其中检测信号包括量化信号的量。
332.实施方式215.根据实施方式200至206或208至214中任一项所述的方法,其中存在至少两个第二图像。
333.实施方式216.根据实施方式200至206或208至214中任一项所述的方法,其中存在至少三个第二图像。
334.实施方式217.根据实施方式200至206或208至214中任一项所述的方法,其中存在至少四个第二图像。
335.实施方式218.根据实施方式200至206或208至217中任一项所述的方法,其中检测每个微物体还包括确定横截面积、圆形度、亮度、亮度与背景的比率、微物体的位置以及到最近邻的微物体的距离中的至少一个。
336.实施方式219.根据实施方式200至206或208至218中任一项所述的方法,还包括:将检测到的微物体分组为具有相同特性中的一个或多个的微物体的子群。
337.实施方式220.根据实施方式219所述的方法,其中基于其在n维空间中的接近度来将检测到的微物体分组(或“选通(gated)”)为子群,其中n个维度中的每一个维度是所述微物体的可测量特性。
338.实施方式221.根据实施方式200至206或208至220中任一项所述的方法,还包括:提供表示检测到的微物体的至少一个特性的分布的视觉显示。
339.实施方式222.根据实施方式221所述的方法,其中视觉显示是表示检测到的微物体的至少两个特性的二维图(例如横截面积和第一荧光信号,或第一和第二荧光信号)。
340.实施方式223.根据实施方式221所述的方法,其中视觉显示是表示检测到的微物体的至少三个特性的三维图(例如横截面积和第一和第二荧光信号,或第一、第二和第三荧光信号)。
341.实施方式224.根据实施方式221至223中任一项所述的方法,还包括提供用户界面,所述用户界面允许用户选择检测到的微物体的子群,并且任选地提供用于重新定位选择的子群的指令。
342.实施方式225.根据实施方式200至206或208至224中任一项所述的方法,还包括增大或减小所述微物体的所识别的边界。
343.实施方式226.根据实施方式213所述的方法,其中神经网络包括多个下采样块(例如至少2、3、4个等下采样块),每个下采样块包括第一下采样卷积层、第一批量归一化层和包括门函数的第一elu层,并且其中每个第一下采样卷积层降低其接收的图像数据的空间分辨率。
344.实施方式227.根据实施方式226所述的方法,其中下采样块中的一个或多个(例如每个)由(或基本上由)第一下采样卷积层、第一批量归一化层和第一elu层组成,其中第一elu层直接从第一批量归一化层接收图像数据,并且其中第一批量归一化层直接从第一下采样卷积层接收图像数据。
345.实施方式228.根据实施方式226或227所述的方法,其中每个下采样卷积层将其接收的图像数据的空间分辨率降低2倍(例如通过一次将卷积滤波器(或内核)滑动两个像
素)。
346.实施方式229.根据实施方式226至228中任一项所述的方法,其中第一下采样卷积层中的每一个包括5x5卷积滤波器。
347.实施方式230.根据实施方式226至229中任一项所述的方法,其中在多个下采样块中的一个或多个(例如每个)下采样块之后是具有分支结构的残差网络块。
348.实施方式231.根据实施方式230所述的方法,其中残差网络块的分支结构包括第一分支和第二分支,并且其中第一分支以比第二分支小的程度处理从先前下采样块接收的图像数据。
349.实施方式232.根据实施方式231所述的方法,其中残差网络块的第一分支包括第二卷积层、第二批量归一化层和包括门函数的第二elu层。
350.实施方式233.根据实施方式232所述的方法,其中残差网络块的第一分支由(或基本上由)第二卷积层、第二批量归一化层和第二elu层组成,其中第二elu层直接从第二批量归一化层接收图像数据,并且其中第二批量归一化层直接从第二卷积层接收图像数据。
351.实施方式234.根据实施方式231或232所述的方法,其中第二卷积层包括1
×
1卷积滤波器。
352.实施方式235.根据实施方式231至234中任一项所述的方法,其中残差网络块的第二分支包括两个或更多个处理单元,其中每个处理单元包括卷积层和批量归一化层。
353.实施方式236.根据实施方式235所述的方法,其中残差网络块的第二分支由(或基本上由)第三卷积层、第三批量归一化层、包括门函数的第三elu层、第四卷积层和第四批量归一化层组成,其中第四批量归一化层直接从第四卷积层接收图像数据,其中第四卷积层直接从第三elu层接收图像数据,其中第三elu层直接从第三批量归一化层接收图像数据,并且其中第三批量归一化层直接从第三卷积层接收图像数据。
354.实施方式237.根据实施方式236所述的方法,其中第三卷积层包括3
×
3卷积滤波器。
355.实施方式238.根据实施方式236或237所述的方法,其中第四卷积层包括3
×
3卷积滤波器。
356.实施方式239.根据实施方式231至238中任一项所述的方法,其中将来自残差网络块的第一分支(例如第一分支的elu层)和残差网络块的第二分支(例如第二分支的第四批量归一化层)的图像数据重组并传送到包括门函数的第四elu层。
357.实施方式240.根据实施方式213和226至239中任一项所述的方法,其中神经网络包括第一下采样块、第一残差网络块、第二下采样块、第二残差网络块、第三下采样块和第三残差网络块。
358.实施方式241.根据实施方式240所述的方法,其中第一下采样块及第一残差网络块各自包括32个通道及为所述图像的空间分辨率的一半的空间分辨率。
359.实施方式242.根据实施方式240或241所述的方法,其中第二下采样块及第二残差网络块各自包括64个通道及为图像的分辨率的四分之一的空间分辨率。
360.实施方式243.根据实施方式240至242中任一项所述的方法,其中第三下采样块和第三残差网络块各自包括128个通道和为图像的分辨率的八分之一的空间分辨率。
361.实施方式244.根据实施方式213或226至243中任一项所述的方法,其中神经网络
包括用于多个下采样块中的每个下采样块的上采样块,每个上采样块包括转置卷积层、上采样批量归一化层和包括门函数的上采样elu层,并且其中每个上采样块的转置卷积层使其接收的图像数据的空间分辨率增加。
362.实施方式245.根据实施方式244所述的方法,其中上采样块中的一或多个中的每一个包括重组层,其中来自所述上采样批量归一化层的图像数据与来自先前残差网络块的图像数据合并。
363.实施方式246.根据实施方式245所述的方法,其中一个或多个上采样块中的每一个由(或基本上由)转置卷积层、上采样批量归一化层、重组层及上采样elu层组成,其中上采样elu层直接从重组层接收图像数据,并且其中上采样批量归一化层直接从重构转置层接收图像数据。
364.实施方式247.根据实施方式244至246中任一项所述的方法,其中,每个转置卷积层将其接收的图像数据的空间分辨率增加2倍。
365.实施方式248.根据实施方式230至247中任一项所述的方法,其中,当神经网络具有n个下采样块和n个残差网络块时,所述网络具有包括重组层的n
‑
1个上采样块。
366.实施方式249.根据实施方式213或226至248中任一项所述的方法,其中神经网络包括:第一上采样块,具有接收来自第二残差网络块的图像数据的重组层;第二上采样块,具有接收来自第一残差网络块的图像数据的重组层;以及不包括重组层的第三上采样块。
367.实施方式250.根据实施方式249所述的方法,其中第一上采样块包括64个通道并且输出空间分辨率为图像的空间分辨率的四分之一的图像数据。
368.实施方式251.根据实施方式249或250所述的方法,其中第二上采样块包括32个通道并且输出空间分辨率为图像的空间分辨率的一半的图像数据。
369.实施方式252.根据实施方式249至251中任一项所述的方法,其中第三上采样块包括3个通道并且输出空间分辨率与图像的分辨率相同的图像数据。
370.实施方式253.根据实施方式213所述的方法,其中神经网络具有与图9a至图9d中所示的基本相同的结构。
371.实施方式254.根据实施方式213或226至253中任一项所述的方法,还包括在生成多个像素掩模之前对第一图像进行预处理。
372.实施方式255.根据实施方式254所述的方法,其中在微流体设备内对微物体进行成像,并且其中预处理包括减去在成像期间由微流体设备的至少一个组件产生的重复图案。
373.实施方式256.根据实施方式255所述的方法,其中所述预处理包括向图像应用傅里叶变换以识别重复图案。
374.实施方式257.根据实施方式255或256所述的方法,其中微流体设备的至少一个组件是衬底表面。
375.实施方式258.根据实施方式255至257中任一项所述的方法,其中微流体设备的至少一个组件是包括光电晶体管阵列的衬底表面。
376.实施方式259.根据实施方式200至258中任一项所述的方法,其中所述微物体是生物细胞。
377.实施方式260.根据实施方式259所述的方法,其中所述生物细胞是免疫细胞(例如
t细胞、b细胞、nk细胞或巨噬细胞等)。
378.实施方式261.根据实施方式259所述的方法,其中所述生物细胞是来自细胞系的细胞(例如cho细胞)或癌细胞。
379.实施方式262.根据实施方式259所述的方法,其中所述生物细胞是卵母细胞、精子或胚胎。
380.实施方式263.一种非暂时性计算机可读介质,其中存储有程序,所述程序用于使包括计算机的系统执行用于在微流体设备中自动检测和表征微物体的方法,所述方法包括:接收微流体设备中的目标区域的第一图像和一个或多个第二图像;预处理第一图像和一个或多个第二图像中的每一个图像以减少图像数据中的异常;变换一个或多个第二图像中的每一个图像以将第二图像与第一图像光学对准;使用机器学习算法处理第一图像中的像素数据以检测存在于目标区域中的微物体,其中检测每个微物体包括识别微物体的边界;以及检测位于一个或多个第二图像中的每一个图像中的每个检测到的微物体的每个边界内的信号。
381.实施方式264.根据实施方式263所述的非暂时性计算机可读介质,其中所述程序使所述系统执行根据实施方式200至262中任一项所述的方法。
382.实施方式265.根据实施方式263或264所述的非暂时性计算机可读介质的方法,还包括增大或减小所述微物体的所识别的边界。
383.实施方式266.根据实施方式263至265中任一项所述的非暂时性计算机可读介质,还包括实施方式52至68或129至164中任一项所述的非暂时性计算机可读介质的元件。
384.实施方式267.一种用于在微流体设备中自动检测微物体的系统,包括:
385.图像获取单元,包括:成像元件,被配置用于捕获微流体设备中的目标区域的第一图像和一个或多个第二图像;图像预处理引擎,被配置用于减少图像数据中的异常;以及对准引擎,被配置用于变换第二图像以将第二图像与第一图像光学对准;以及
386.通信地连接到图像获取单元的微物体检测与表征单元,包括:图像处理引擎,被配置用于使用机器学习算法来处理第一图像中的像素数据以检测存在于目标区域中的微物体,其中检测微物体包括识别每个检测到的微物体的边界;以及检测引擎,被配置用于检测位于一个或多个第二图像中的每一个图像中的每个检测到的微物体的每个边界内的信号。
387.实施方式268.根据实施方式267所述的系统,还包括:用户界面,其中所述用户界面被配置用于允许用户选择检测到的微物体的子群,并且任选地提供用于重新定位选择的子群的指令。
388.实施方式269.根据实施方式267或268所述的系统,其中所述重新定位是利用所述系统的自动化过程。
389.实施方式270.根据实施方式267至269中任一项所述的系统,其中微物体检测单元被配置用于执行根据实施方式200至262中任一项所述的方法。
390.实施方式271.根据实施方式267至270中任一项所述的系统,还包括根据实施方式165至196的任一个元件。
391.实施方式272.一种用于表征和选择微流体设备中的微物体的计算设备,所述计算设备包括显示屏幕,所述计算设备被配置用于在屏幕上显示用于选择从所提供的参数列表中选择的第一参数的菜单,用于表征一组检测到的微物体,并且所述计算设备被配置用于
基于选择的第一参数在屏幕上显示检测到的微物体组的图,其中所提供的参数列表是在所述菜单内提供的参数的有限列表,所述列表中的所述参数中的每一个参数是可选择的,以基于相关联的参数来表征检测到的微物体组,并且其中所述显示屏幕能够基于选择的第一参数的至少一个选择的阈值来选择检测到的微物体组的子群,以及通过将满足至少一个选择的阈值的子群与检测到的微物体组中的其余微物体进行视觉区分来显示检测到的微物体组。
392.实施方式273.根据实施方式272所述的计算设备,其中所提供的参数列表提供选自由以下各项组成的组中的参数:圆形度、质心x像素、质心y像素、质心x微米、质心y微米、质心x微米坞相对、质心y微米坞相对、最近邻微米、直径微米、体积毫微微升、背景区域微米、平均亮度、最小亮度、最大亮度、中值亮度、背景中值亮度、δ中值亮度、δ最大亮度、平均亮度的对数值、最大亮度的对数值、中值亮度的对数值、δ最大亮度的对数值、δ中值亮度cv的对数值、背景cv、δ最大亮度对背景比率的对数值、δ亮度总和的对数值、流体通道编号、视场、细胞计数、每坞细胞数以及任一个前述参数关于时间的变化。
393.实施方式274.根据实施方式272或273所述的计算设备,其中显示屏幕是图形用户界面。
394.实施方式275.根据实施方式272至274中任一项所述的计算设备,其中所述阈值包括上阈值。
395.实施方式276.根据实施方式272至274中任一项所述的计算设备,其中所述阈值包括下阈值。
396.实施方式277.根据实施方式272至274中任一项所述的计算设备,其中所述阈值包括下阈值和上阈值。
397.实施方式278.根据实施方式272至277中任一项所述的计算设备,其中所述显示屏幕启用用于阈值选择的可滑动选择器。
398.实施方式279.根据实施方式272至278中任一项所述的计算设备,其中所述显示屏幕启用用于阈值选择的点选择器。
399.实施方式280.根据实施方式272至279中任一项所述的计算设备,其中所述显示屏幕启用用于阈值选择的用户录入值。
400.实施方式281.根据实施方式272至280中任一项所述的计算设备,其中所述视觉区分在满足所述阈值的子群与检测到的微物体组中的其余微物体之间由不同颜色来表示。
401.实施方式282.根据实施方式272至281中任一项所述的计算设备,其中在屏幕上显示的菜单还被配置用于选择从所提供的参数列表中选择的第二参数,用于表征也由第一参数表征的检测到的微物体组。
402.实施方式283.根据实施方式272至282中任一项所述的计算设备,其中在屏幕上显示的菜单还被配置用于选择从所提供的参数列表中选择的第二参数,用于表征满足第一参数的至少一个阈值的检测到的微物体的子群。
403.实施方式284.根据实施方式272至283中任一项所述的计算设备,其中所述显示屏幕还能够显示满足第一参数的至少一个阈值并且由第二参数表征的检测到的微物体的子群。
404.实施方式285.根据实施方式272至284中任一项所述的计算设备,其中所述显示屏
幕还能够基于选择的第二参数的至少一个选择的阈值来选择检测到的微物体的子群的子集。
405.实施方式286.根据实施方式272至285中任一项所述的计算设备,其中所述计算设备还被配置为接受用于重新定位检测到的微物体组、检测到的微物体组的子群、所述子群的第一子集或所述第一子集的第二子集中的一个的屏幕指令。
406.实施方式287.根据实施方式272至286中任一项所述的计算设备,其中所述计算设备还被配置为在屏幕上显示用于选择从所提供的成像参数列表中选择的成像参数的成像菜单,用于对微流体设备的至少一部分进行成像。
407.实施方式288.根据实施方式287所述的计算设备,其中所述计算设备还被配置为在所述屏幕上显示用于选择从所提供的成像参数列表中选择的多个成像参数的成像菜单,用于对微流体设备的至少一部分进行成像。
408.实施方式289.根据实施方式287或288所述的计算设备,其中所述计算设备还被配置为在所述屏幕上显示用于选择从所提供的算法列表中选择的算法的算法选择器,用于分析通过每个选择的成像参数获取的图像,并且检测微物体组。
409.实施方式290.根据实施方式287至289中任一项所述的计算设备,所述计算设备被配置为在所述屏幕上显示检测到的每个单独的微物体的图像中的至少一个,其中针对每个检测到的微物体显示的图像的数量等于选择的成像参数的数量。
410.实施方式291.根据实施方式287至290中任一项所述的计算设备,所述成像参数包括荧光立方体类型。
411.实施方式292.根据实施方式291所述的计算设备,所述荧光立方体类型被配置用于检测fitc、dapi、cy5或德克萨斯红荧光团等。
412.实施方式293.根据实施方式287至292中任一项所述的计算设备,所述成像参数包括选自由照明百分比、曝光时间(ms)、z轴偏移(微米)及其组合组成的组中的子参数。
413.实施方式294.根据实施方式287至293中任一项所述的计算设备,其中所显示的成像菜单还被配置用于提供延时选择器,其中所述延时选择器能够选择用于在选择的时间段内对微流体设备的至少一部分进行成像的延时值。
414.实施方式295.根据实施方式294所述的计算设备,其中所述延时值可以从由时间间隔、时间延迟、循环总数及其组合组成的组中选择。
415.从下面的详细描述以及所附权利要求和附图中,本公开的测定的其他方面将会变得明显。
附图说明
416.图1a示出了根据本公开的一些实施方式的与微流体设备和相关联的控制仪器一起使用的系统的示例。
417.图1b和图1c示出了根据本公开的一些实施方式的微流体设备。
418.图2a和图2b示出了根据本公开的一些实施方式的隔离坞。
419.图2c示出了根据本公开的一些实施方式的详细的隔离坞。
420.图2d至图2f示出了根据本公开的一些其他实施方式的隔离坞。
421.图2g示出了根据本公开的实施方式的微流体设备。
422.图2h示出了根据本公开的实施方式的微流体设备的涂覆表面。
423.图3a示出了根据本公开的一些实施方式的与微流体设备和相关联的控制仪器一起使用的系统的具体示例。
424.图3b示出了根据本公开的一些实施方式的成像设备。
425.图4a、图4b和图4c并行地描绘了根据本发明的一个实施方式的微物体的坞(penning)。
426.图5示出了根据各个实施方式的计算机系统的框图。
427.图6a至图6f示出了根据本发明的具体实施方式的可用于分离微物体的改进的光笼的生成。
428.图7示出了根据各个实施方式的卷积神经网络的示意图。
429.图8a至图8c示出了根据各个实施方式的残差网络、下采样块和上采样块的示意图。
430.图9a至图9d示出了根据各个实施方式的卷积神经网络的更详细示意图的部分。
431.图10示出了根据各个实施方式的用于自动检测图像中的微物体的方法的流程图。
432.图11示出了根据各个实施方式的用于自动检测图像中的微物体的系统。
433.图12示出了根据各个实施方式的用于自动检测图像中的微物体的方法的流程图。
434.图13示出了根据各个实施方式的用于自动检测图像中的微物体的系统。
435.图14示出了根据各个实施方式的用于表征和选择微物体的显示屏幕。
436.图15示出了根据各个实施方式的用于表征和选择微物体的显示屏幕。
437.图16示出了根据各个实施方式的用于表征和选择微物体的显示屏幕。
438.图17示出了根据各个实施方式的用于表征和选择微物体的显示屏幕。
439.图18示出了根据各个实施方式的用于表征和选择微物体的显示屏幕。
440.图19示出了根据各个实施方式的用于表征和选择微物体的显示屏幕。
441.图20示出了根据各个实施方式的用于表征和选择微物体的显示屏幕。
442.图21示出了根据各个实施方式的用于表征和选择微物体的显示屏幕。
443.图22是抗原特异性t淋巴细胞和微物体的选择性配置(selective disposition)的照片表示图,该微物体被配置用于在隔离坞内结合t淋巴细胞的分泌的生物分子以用于根据本公开的一个实施方式的方法中。
444.图23a是在选择性配置用于根据本公开的一个实施方式的方法中一种或多种特异性靶向的细胞后,抗原特异性t淋巴细胞和配置成结合t淋巴细胞的分泌的生物分子的微物体的选择性配置的照片表示图。图23b示出的照片表示图是由图23a中的框界定的区域的放大图,以更详细地示出微物体、t淋巴细胞和一个(或多个)特异性靶向的细胞。
445.图24a是在选择性配置用于根据本公开的一个实施方式的方法中一种或多种非靶向细胞后,抗原特异性t淋巴细胞和配置成结合t淋巴细胞的分泌的生物分子的微物体的选择性配置的照片表示图。图24b示出的照片表示图是由图24a中的框界定的区域的放大图,以更详细地示出微物体、t淋巴细胞和一个非靶向细胞。
446.图25a是选定的隔离坞(编号2687
‑
2691)的明场图像的照片表示图,每个坞显示在一段时间温育后的抗原特异性t淋巴细胞、被配置为与t淋巴细胞的分泌的生物分子结合的微物体和特异性靶向细胞。图25b是在同一时间点显示相同的隔离坞的照片表示图,显示在
德克萨斯红通道中捕获到微物体的分泌的生物分子的荧光标记。
447.图26a是选定的隔离坞(编号1001
‑
1004)的明场图像的照片表示图,每个坞显示在一段时间温育后的抗原特异性t淋巴细胞、被配置为与t淋巴细胞的分泌的生物分子结合的微物体和非靶向细胞。图26b是在同一时间点显示相同的隔离坞的照片表示图,显示在非靶细胞存在下,在德克萨斯红通道中对于抗原特异性t淋巴细胞没有分泌的生物分子的荧光标记。
448.图27是表示在靶细胞的存在下由抗原特异性t淋巴细胞选择性地激活和捕获分泌的生物分子的珠的相对数的图示,源自根据本公开的实施方式的检测和表征的方法。
449.图28a至28d是根据本公开的一种实施方式的多重细胞因子释放测定检测、移动和表征捕获珠和细胞的照片表示图。
450.图29是根据本公开的一种实施方式的细胞毒性/分泌蛋白检测联合测定的示意图。
451.图30a至30e是根据本公开的一种实施方式的细胞毒性/分泌蛋白检测联合测定的照片表示图。
452.图31是根据本公开的一种实施方式的细胞毒性测定结果的图示。
453.图32是根据本公开的一种实施方式对细胞毒性和分泌蛋白检测的联合测定的结果的图示。
454.图33是根据本公开的一个实施方式的作为细胞毒性测定的凋亡报告基因的caspase
‑
8表达的引入的时程的图示。
455.图34a是根据本公开的另一个实施方式的在jurkat细胞中用于细胞毒性测定的荧光信号传递程度的图示。图34b是具有中、高和无表达caspase
‑
8活性的单个细胞的明场和荧光图像的照片表示图。
具体实施方式
456.本说明书描述了本公开的示例性实施方式和应用。然而,本公开不限于这些示例性实施方式和应用,也不限于示例性实施方式和应用在本文中操作或被描述的方式。此外,附图可以示出简化或局部视图,并且附图中的要素的尺寸可能被放大或者不成比例。另外,由于本文使用术语“在......上”、“附接到”、“连接到”、“耦合到”或类似的词,一个要素(例如,材料、层、衬底等)可以“在另一要素上”、“附接到另一要素”、“连接到另一要素”或“耦合到另一要素”,而不论该一个要素是直接在该另一要素上、附接到该另一要素、连接到该另一要素或耦合到该另一要素,还是在该一个要素和该另一元素之间有一个或多个间隔要素。另外,除非上下文另有规定,否则方向(例如,在...上、在...下、顶部、底部、侧面、上、下、正下、正上、上方、下方、水平、垂直、“x”、“y”、“z”等),如果提供的话,仅通过示例的方式并且为了便于说明和讨论而不是以限制的方式提供。在提及要素列表(例如,要素a、b、c)的情况下,这样的提及旨在包括所列要素本身中的任何一个、少于所有列出的要素的任何组合和/或所有列出的要素的组合。说明书中的章节划分仅为了便于审查,并不限制所描述要素的任何组合。
457.在微流体特征的尺寸被描述为具有宽度或面积的情况下,尺寸通常是相对于x轴和/或y轴尺寸来描述的,两者都位于平行于微流体设备的衬底和/或盖的平面内。微流体特
征的高度可相对于z轴方向来描述,z轴方向垂直于平行于微流体设备的衬底和/或盖的平面。在一些情况下,微流体特征、诸如通道或过道的横截面积可参考x轴/z轴,y轴/z轴或x轴/y轴面积。
458.如本文所使用的,“基本上”意味着足以用于预期目的。因此术语“基本上”允许由绝对或完美状态、尺寸、测量、结果等的微小、不明显的变化,诸如本领域普通技术人员预期的但不明显地影响总体性能。当与数值或者可以表示为数值的参数或特性相关地使用时,“基本上”表示在百分之十内。
459.术语“多个”意味着不止一个。
460.如本文所使用的,术语“多个”可以是2、3、4、5、6、7、8、9、10或更多个。
461.如本文所使用的:μm是指微米,μm3是指立方微米,pl是指皮升,nl是指纳升,而μl(或ul)是指微升。
462.如本文所使用的,术语“置于”在其含义内包括“位于”。
463.如本文所使用的,“微流体设备”或“微流体装置”是包括被配置用于保持流体的一个或多个离散微流体管路的设备,每个微流体管路包括流体上互连的管路元件,包括但不限于一个或多个区域、一个或多个流动路径、一个或多个通道、一个或多个腔室和/或坞,以及被配置为允许流体(并且任选地,悬浮在流体中的微物体)流入和/或流出微流体设备的至少一个端口。通常微流体设备的微流体管路将包括流动区域,该流动区域可以包括微流体通道和至少一个腔室,并且将容纳小于约1ml的体积的流体,例如小于约750、500、250、200、150、100、75、50、25、20、15、10、9、8、7、6、5、4、3或2微升。在某些实施方式中,微流体管路保持约1
‑
2、1
‑
3、1
‑
4、1
‑
5、2
‑
5、2
‑
8、2
‑
10、2
‑
12、2
‑
15、2
‑
20、5
‑
20、5
‑
30、5
‑
40、5
‑
50、10
‑
50、10
‑
75、10
‑
100、20
‑
100、20
‑
150、20
‑
200、50
‑
200、50
‑
250或50
‑
300微升。微流体管路可以被配置为具有与微流体设备中的第一端口(例如入口)流体连接的第一端和与微流体设备中的第二端口(例如出口)流体连接的第二端。
464.如本文所使用的,“纳米流体设备”或“纳米流体装置”是具有微流体管路的一种类型的微流体设备,该微流体管路包含至少一个管路元件,该至少一个管路元件被配置为保持小于约1微升的体积的流体,例如小于约750、500、250、200、150、100、75、50、25、20、15、10、9、8、7、6、5、4、3、2、1nl或更小。纳米流体设备可以包括多个管路元件(例如至少2、3、4、5、6、7、8、9、10、15、20、25、50、75、100、150、200、250、300、400、500、600、700、800、900、1000、1200、2000、2500、3000、3500、4000、4500、5000、6000、7000、8000、9000、10,000或更多)。在某些实施方式中,至少一个管路元件中的一个或多个(例如全部)被配置为容纳约100pl至1nl、100pl至2nl、100pl至5nl、250pl至2nl、250pl至5nl、250pl至10nl、500pl至5nl、500pl至10nl、500pl至15nl、750pl至10nl、750pl至15nl、750pl至20nl、1至10nl、1至15nl、1至20nl、1至25nl或1至50nl的体积的流体。在其他实施方式中,所述至少一个管路元件中的一个或多个(例如全部)被配置为保持约20nl至200nl、100至200nl、100至300nl、100至400nl、100至500nl、200至300nl、200至400nl、200至500nl、200至600nl、200至700nl、250至400nl、250至500nl、250至600nl或250至750nl的体积的流体。
465.微流体设备或纳米流体设备在本文中可被称为“微流体芯片”或“芯片”;或“纳米流体芯片”或“芯片”。
466.如本文所使用的,“微流体通道”或“流动通道”是指具有显著长于水平和垂直尺寸
两者的长度的微流体设备的流动区域。例如,流动通道可以是水平或垂直维度的长度的至少5倍,例如长度的至少10倍、长度的至少25倍、长度的至少100倍、长度的至少200倍、长度的至少500倍、长度的至少1,000倍,长度的至少5,000倍或更长。在一些实施方式中,流动通道的长度在约100,000微米至约500,000微米,包括它们之间的任何值。在一些实施方式中,水平尺寸为约100微米至约1000微米(例如约150至约500微米),并且垂直尺寸为约25微米至约200微米(例如约40微米至约150微米)。应当注意,流动通道可在微流体设备中具有多种不同的空间构造,因此不限于完全线性的元件。例如流动通道可以是或包括具有以下构造的一个或多个部分:曲线、弯曲、螺旋、倾斜、下降、分叉(例如多个不同的流动路径)及其任何组合。此外,流动通道可沿其路径具有不同的横截面积,加宽和收缩以在其中提供所需的流体流动。流动通道可以包括阀,并且阀可以是微流体领域中已知的任何类型。美国专利6,408,878和9,227,200中公开了包括阀的微流体通道的实例,各自通过引用整体并入本文。
467.如本文所使用的,术语“障碍物”通常指的是足够大的凸块或类似类型的结构,以便部分地(但不完全地)阻碍目标微物体在微流体设备中的两个不同区域或管路元件之间的移动。两个不同的区域/管路元件可以是例如微流体隔离坞的连接区域和隔离区域。
468.如本文所使用的,术语“收缩”通常指的是微流体设备中的管路元件(或两个管路元件之间的接口)的宽度的变窄。该收缩部可以位于例如本公开的微流体隔离坞的隔离区域和连接区域之间的接口处。
469.如本文所使用的,术语“透明的”是指允许可见光通过而在光通过时基本上不改变光的材料。
470.如本文所使用的,术语“微物体”通常是指可根据本公开被隔离和/或操纵的任何微观物体。微物体的非限制性示例包括:无生命的微物体,例如微粒;微珠(例如聚苯乙烯珠、luminex
tm
珠等);磁珠;微米棒;微丝;量子点等;生物微物体,例如细胞;生物细胞器;囊泡或复合物;合成囊泡;脂质体(例如合成的或衍生自膜制剂);脂质纳米筏等;或无生命的微物体和生物微物体的组合(例如附着于细胞的微珠、脂质体包覆的微珠、脂质体包覆的磁珠等)。珠可以包括共价或非共价连接的部分/分子,例如荧光标记、蛋白质、碳水化合物、抗原、小分子信号部分或能够在测定中使用的其他化学/生物种类。脂质纳米筏已经在如ritchieet al.(2009)“reconstitution of membrane proteins in phospholipid bilayer nanodiscs,”methods enzymol.,464:211
‑
231中所述。
471.如本文所使用的,术语“细胞”与术语“生物细胞”可互换使用。生物细胞的非限制性示例包括真核细胞、植物细胞、动物细胞,例如哺乳动物细胞、爬行动物细胞、鸟类细胞或鱼类细胞等,原核细胞、细菌细胞、真菌细胞或原生动物细胞等,从组织解离的细胞,如肌肉、软骨、脂肪、皮肤、肝脏、肺和神经组织等,免疫细胞,例如t细胞、b细胞、自然杀伤细胞和巨噬细胞等,胚胎(例如合子)、卵母细胞、ova、精子细胞、杂交瘤、培养细胞、来自细胞系的细胞、癌细胞,受感染的细胞、转染的和/或转化的细胞和报告细胞等。哺乳动物细胞可以例如来自人、小鼠、大鼠、马、山羊、绵羊、牛或灵长类动物等。
472.如果能够繁殖的集落中的所有活细胞是源自单个亲本细胞的子细胞,则生物细胞的集落是“克隆”。在某些实施方式中,克隆集落中的所有子细胞源自单个亲本细胞不超过10个分裂。在其他实施方式中,克隆集落中的所有子细胞源自单个亲本细胞不超过14个分
裂。在其他实施方式中,在克隆集落中的所有子细胞源自单个亲本细胞不超过17个分裂。在其他实施方式中,在克隆集落中的所有子细胞源自单个亲本细胞不超过20个分裂。术语“克隆细胞”是指相同克隆集落的细胞。
473.如本文所使用的,生物细胞的“集落”是指2个或更多个细胞(例如约2至约20、约4至约40、约6至约60、约8至约80、约10至约100、约20至约200、约40至约400、约60至约600、约80至约800、约100至约1000或大于1000个细胞)。
474.如本文所使用的,术语“维持(一个或多个)细胞”是指提供包括流体和气体组分以及任选的表面的环境,其提供保持细胞存活和/或扩增所必需的条件。
475.如本文所使用的,术语“扩增”在涉及细胞时是指细胞数目的增加。
476.流体介质的“组分”是存在于介质中的任何化学或生物化学分子,包括溶剂分子、离子、小分子、抗生素、核苷酸和核苷,核酸、氨基酸、肽、蛋白质、糖、碳水化合物、脂质、脂肪酸、胆固醇或代谢物等。
477.如本文所使用的,“捕获部分”是为微物体提供识别位点的化学或生物物质、功能或基序。所选择的一类微物体可识别原位产生的捕获部分,并且可结合或具有对原位产生的捕获部分的亲和力。非限制性实例包括抗原、抗体和细胞表面结合基序。
478.如本文所使用的,“抗体”是指免疫球蛋白(ig)并且包括多克隆和单克隆抗体;灵长类化(例如人源化);鼠;鼠
‑
人;鼠
‑
灵长类动物;和嵌合抗体;并且可以是完整分子、其片段(例如scfv、fv、fd、fab、fab'和f(ab)'2片段)、或完整分子和/或片段的多聚体或聚集体;并且可以在自然界中发生,或者例如通过免疫、合成或遗传工程来产生。本文所用术语“抗体片段”是指衍生自抗体或与抗体相关的片段,其结合抗原并且在一些实施方式中可被衍生化以表现出促进清除和吸收的结构特征,例如通过加入半乳糖残基。这包括例如f(ab)、f(ab)'2、scfv、轻链可变区(vl)、重链可变区(vh)及其组合。
479.如本文中关于流体介质所使用的,“扩散(diffuse)”和“扩散(diffusion)”是指流体介质的组分沿浓度梯度向下的热力学运动。
480.短语“介质的流动”意味着流体介质主要由于除了扩散之外的任何机制的整体移动(bulk movement)。例如,介质的流动可以涉及流体介质由于点之间的压差而从一个点移动到另一点。这种流动可以包括液体的连续的、脉冲的、周期性的、随机的、间歇的或往复的流动,或其任何组合。当一个流体介质流入另一流体介质时,可导致介质的湍流和混合。
481.短语“基本上不流动”指的是流体介质的流动速率,其随着时间的推移的平均速率小于材料(例如,目标分析物)的组分流入流体介质或在流体介质内的扩散速率。这种材料的组分的扩散速率可以取决于例如温度、组分的尺寸和组分与流体介质之间的相互作用的强度。
482.如本文中关于微流体设备内的不同区域所使用的,短语“流体连接”是指当不同区域基本上充满有诸如流体介质的流体时,每个区域中的流体被连接以形成单一流体主体。这并不意味着不同区域中的流体(或流体介质)在组成上一定是相同的。相反,微流体设备的不同流体连接的区域中的流体可具有不同组成(例如,不同浓度的溶质,诸如蛋白质、碳水化合物、离子或其他分子),当溶质沿着它们各自的浓度梯度和/或流体流动通过微流体设备时,这些组成是变化的(in flux)。
483.如本文所使用的,“流动路径”是指限定并经历介质流的轨迹的一个或多个流体连
接的管路元件(例如,通道、区域和腔室等)。因此,流动路径是微流体设备的扫过区域(swept region)的示例。其他管路元件(例如,未扫过区域)可以与包括流动路径的管路元件流体连接,而不受流动路径中介质的流动的影响。
484.如本文所使用的,“隔离微物体”将微物体限制到微流体设备内的限定区域。
485.微流体(或纳米流体)设备可以包括“扫过”区域和“未扫过”区域。
486.如本文所使用的,“扫过”区域包括微流体管路的一个或多个流体上互连的管路元件,每个流体互连的管路元件在流体流过微流体管路时经历介质的流动。扫过区域的管路元件可以包括例如区域、通道和全部或部分腔室。如本文所使用的,“未扫过”区域包括微流体管路的一个或多个流体上互连的管路元件,当流体流过微流体管路时,每个流体互连的管路元件基本上不经历流体的流动。未扫过区域可以流体连接到扫过区域,只要流体连接被配置为在扫过区域和未扫过区域之间能够扩散但基本上无流动介质。因此,微流体设备可被构造成基本上将未扫过区域与扫过区域中的介质流隔离,同时在扫过区域和未扫过区域之间基本上仅实现扩散性流体连通。例如,微流体设备的流动通道是扫过区域的示例,而微流体设备的隔离区域(以下进一步详细描述)是未扫过区域的示例。
487.如本文所使用的,术语“非照明”,特别是参照图像的术语“非照明”,可以指的是在所成像的光谱的同一区域中未被照明的照明图像,例如荧光图像。术语“非照明”也可以指在可见光谱之外的光谱中(包括例如红外光和紫外线)的成像。
488.可以在这种微流体设备中测定生物微物体(例如,生物细胞)产生特定生物材料(例如,蛋白质,例如抗体)的能力。在测定的具体实施方式中,可将包含待测定用于生产目标分析物的生物微物体(例如细胞)的样本材料加载到微流体设备的扫过区域中。可以选择生物微物体中的一些(例如,哺乳动物细胞,诸如人细胞)用于特定的特性并且设置在未扫过的区域中。剩余的样本材料然后可以流出扫过区域,并且测定材料(assay material)可以流入扫过区域。因为所选择的生物微物体在未扫过区域中,所以所选择的生物微物体基本上不受剩余样品材料的流出或测定材料的流入的影响。所选择的生物微物体可被允许产生目标分析物,其可从未扫过区域扩散到扫过区域中,其中目标分析物可与测定材料反应以产生局部可检测反应,其中的每一个反应可以与特定的未扫过区域相关。可以分析与检测到的反应相关的任何未扫过区域,以确定未扫过区域中的生物微物体中的哪一个(如果有的话)是目标分析物的足够的生产者。
489.使用自动检测和表征微物体检测微流体环境中分泌的生物分子。本文描述了一种检测由微流体设备腔室内的生物细胞分泌的目标生物分子的方法,其中该方法包括:将所述生物细胞放置在微流体设备的腔室中;将微物体放置在微流体设备的腔室中或其附近,其中微物体包括与目标分子结合的结合剂;在足以允许生物细胞将目标分子分泌到腔室内并且使分泌的目标分子扩散并结合到微物体的条件下,将生物细胞与微物体一起温育;并检测目标分子与微物体的结合,其中检测结合是根据本文所述的用于检测和表征微物体的任何方法进行的。
490.以一种稳健和自动化的方式检测和表征源自一种分泌性生物细胞的特定生物分子的能力允许研究以前不可能的生物学途径。
491.使用这些方法可以进行多种分泌的生物分子测定。产生目标生物分子(为简单起见,可互换地称为目标分子)的生物细胞可以是免疫细胞,其可以包括t细胞(例如,初始t细
胞、记忆t细胞、中央记忆t细胞或效应t细胞等);b细胞(例如记忆b细胞),成浆细胞或浆细胞;nk细胞或巨噬细胞。或者,生物细胞可以是肝细胞、神经元、胰腺细胞或分泌目标生物分子的任何细胞。在某些实施方式中,生物细胞可以是肿瘤细胞。
492.目标分子可以是蛋白质。在一些实施方式中,目标分子可以是细胞因子或生长因子。在其他实施方式中,目标分子可以是激素(例如,蛋白质激素)。或者,目标分子可以是抗体。在其他实施方式中,目标分子可以是小分子,其可以是肽或有机分子。目标分子可以是神经递质、代谢物、第二信使、激素(即肽或有机分子激素)、脂质、脂肪酸或碳水化合物等。
493.用于检测目标分子的方法利用将目标分子捕获到配置用于捕获目标分子的微物体。所述微物体可以是珠或其他固体颗粒,其可以改进为带有能够结合目标分子的结合剂。在该方法的各个实施方式中,结合剂可以包括蛋白质。该蛋白质可以是抗体。或者,结合剂的蛋白质可以是目标分子的受体。结合剂不限于这些种类的结合剂,而可以是可以特异性结合目标分子的任何合适的部分。其他结合剂可包括螯合复合物或旨在捕获小分子或肽的合成结合基序。
494.在微流体设备中测定由生物细胞产生分泌的生物分子的能力允许在一定体积的介质中分离生物细胞,且仍然可以观察到结合,尽管目标分子的绝对量很少。生物细胞被放置在微流体设备的腔室内,该腔室限制了周围介质的体积。在一些实施方式中,腔室的体积可以小于约2微升,而在其他实施方式中,腔室可以是微流体设备的管路元件,其体积为约100pl至约2nl。被配置用于捕获分子的微物体可被放置在腔室内。在其他实施方式中,被配置用于捕获目标分子的微物体可以被布置在其中布置有生物细胞的腔室的附近。
495.在该方法的各个实施方式中,微流体设备的腔室可以是包括隔离区域和连接区域的隔离坞。隔离坞的体积可为约100pl至约1nl。如本文所述,隔离坞的隔离区域可以是微流体设备的未扫过区域,并且具有通向连接区域的单个开口,并且隔离坞的连接区域可以将隔离区域流体连接到微流体设备的流动区域。隔离坞的连接区域可具有通向微流体设备的流动区域的近端开口和通向隔离区域的远端开口。在某些实施方式中,连接区域仅具有单个近端开口和单个远端开口(即,没有其他开口)。在一些实施方式中,连接区域的近端开口的宽度w
con
为大约20微米至大约100微米,并且从近端开口到远端开口的连接区域的长度l
con
是近端开口的宽度w
con
的至少1.0倍。在其他实施方式中,从近端开口到远端开口的连接区域的长度l
con
可以是连接区域的宽度w
con
的至少1.5倍或至少2.0倍。从近端开口到远端开口的连接区域的长度l
con
可以为大约20微米至大约500微米。在各个实施方式中,隔离坞的隔离区域的体积可以为1x106立方微米,2x106立方微米或6x106立方微米。在一些实施方式中,微流体设备可以包括多个腔室。微流体设备的多个腔室内的至少一些可以各自是具有本文所述的隔离区域和连接区域的隔离坞。在一些实施方式中,所有多个腔室可以是隔离坞。
496.在该方法的各个实施方式中,放置微物体包括将微物体放置在隔离坞的隔离区域中。放置生物细胞可以包括将生物细胞放置在隔离坞的隔离区域中。可以将生物细胞放置在微物体附近或与其相邻。可能是有利的是,限制分泌的目标生物分子需要扩散的距离,以到达具有被配置以结合目标生物分子的结合剂的微物体。
497.生物细胞和微液体置于微流体环境中后,可进行至少10分钟的温育(如15、20、25、30、35、40、45、50、55、60分钟或更长时间),或者大约1小时、2小时、3小时、4小时或更长时
间。生物细胞可以提供有利于产生目标分子的环境。例如,如实施例部分中所描述的,细胞因子释放测定(其测量通过抗原特异性t淋巴细胞产生细胞因子)可包括腔室/坞,在此生物细胞和微物体与其他细胞一起温育的,所述其他细胞将启动(或不启动)从t细胞(例如,特异性抗原脉冲肿瘤细胞或非靶标抗原脉冲肿瘤细胞)产生的生物分子。这仅是一个示例,并不限于温育期间存在的细胞类型或其他分子种类。此外,在一些实施方式中,可以在旨在抑制目标生物分子产生的条件下用微物体温育生物细胞。
498.在该方法的多种实施方式中,检测目标分子与微流体的结合可以包括将试剂引入微流体设备中,其中,试剂与目标分子结合,目标分子与微物体结合。试剂可以在位点(例如,表位)与目标分子结合,使得试剂与目标分子的结合不干扰目标分子与微物体的结合。在其他实施方式中,当目标分子也与结合剂结合时,试剂可以与微物体的结合剂结合,但当结合剂不与目标分子结合时,试剂则不与微物体的结合剂结合。试剂可包括标记。标记可允许比色、发光或发光检测。
499.检测目标分子结合的试剂可以流入微流体设备,并可能通过微流体设备进行灌注。在一些实施方式中,微流体设备还可以包括微流体通道,其中,腔体或隔离坞包括通向微流体通道的开口,使第一试剂流体流过微流体设备可包括使第一试剂流过微流体通道。
500.检测可在周期性时间点重复进行或可仅在一个预定时间点进行。检测可包括获得生物细胞、微流体以及微流体设备的腔室/隔离坞中存在的任何其他物质的明场图像。检测还可以包括获得生物细胞、微流体和微流体设备的腔室/隔离坞中存在的任何其他物质的一种或多种荧光图像。如本文所述的微物体的确定和表征的自动化方法可用于提供测定的结果,并将在荧光图像中观察到的物体与在明场图像中观察到的物体相关联。
501.在各个实施方式中,该方法还可以包括在微流体设备的腔室内或其附近设置第二(或更多个)微物体,其中第二微物体包括与由生物细胞产生的第二目标分子结合的第二结合剂。该方法还可以包括在足以让生物细胞将第二目标分子分泌到腔室内的条件下,将生物细胞与第二微物体(以及前文所述的第一微物体)一起温育,并且进行足以使分泌的第二目标分子扩散并结合到第二个微物体的时间。在不同的实施方式中,第二微物体与第一微物体可以可检测地区别。第二目标分子可以不同于第一目标分子。第二结合剂可以与第二目标分子结合,并且实质上不与第一目标分子结合,且第一结合剂可以实质上不与第二目标分子结合。第一微物体和第二个微物体各自可分别特异性地和实质上与第一目标分子和第二目标分子结合。
502.检测第二目标分子的结合可以产生区别于第一目标分子的可检测信号的可检测信号。第二目标分子结合的可检测信号可以与第一目标分子结合的可检测信号在光谱上可区分和/或在空间上可检测。该方法还提供了第二目标分子与第二微物体结合的检测,其中结合检测根据本文所述的用于微流体的检测和表征的任何方法进行。第二分子结合的检测可区别于第一目标分子结合的检测。
503.第二目标分子、第二结合剂和第二微物体可以是本文所述的对第一目标分子、第一结合剂和/或第一微物体所描述的类别中的任一种。该方法可以允许进一步的多重操作并且包括允许检测三个、四个或更多个目标分子的三个、四个或更多个微物体,同时仍然允许各自可区分的检测。三个、四个或更多个微物体中的每一个可以分别与三个、四个或更多个目标分子中的每一个特异性地和实质地结合。
504.测定t细胞的细胞毒性。免疫治疗是一个有前途且发展迅速的领域。然而,该领域对可重复地开发或选择具有优化靶向、细胞毒性和持久性表型的细胞治疗产品存在需求。申请人已发现用于测定t淋巴细胞(t细胞)的细胞毒性活性(任选地与微流体环境中的t细胞和/或靶细胞的其他特性组合)的装置、方法和套组。测定细胞毒性或联合测定两种或更多种在t细胞靶向杀伤期间可观察到的不同活性的能力示出了研究一个(或多个)t细胞对一个(或多个)靶细胞的作用的强大方法。
505.在一些实施方式中,本文所述的方法在微流体环境中分离单个t细胞(其可能是抗原特异性t细胞)与一个或多个靶细胞,其中t细胞和靶细胞周围的封闭体积受到足够的限制以允许1)t细胞维持在活力条件下和2)来自t细胞的分泌的生物分子的数量仍可检测。在以前可用的平台中,分离的t细胞无法维持活力状态,因为t细胞周围的介质体积过度稀释了存活所需的细胞外信号分子,或者t细胞被隔离在液滴中,在那里无法补充营养物和进行废物的清除。这些平台也不包括选择性处理技术,该技术允许精确、温和和选择性地处理单个细胞和/或捕获物体。此外,这些平台不允许对单个细胞或多组细胞进行成像,因此无法监测特定分泌的生物分子的作用。测定从微流体设备内的生物细胞产生分秘的生物分子的能力,如本文所述,允许将生物细胞隔离在一定体积的介质中,但仍允许观察结合,尽管目标分子的绝对数量很少。生物细胞设置在微流体设备的腔室内,限制了周围介质的体积。在一些实施方式中,腔室可以具有小于约2微升的体积,而在其他实施方式中,腔室可以是具有约100pl至约2nl的体积的微流体设备的管路元件。
506.此外,这里描述的方法允许联合测定,以多重进行细胞毒性测定以及一种或多种分泌的生物分子检测。通过染色细胞外细胞表面标记物以了解t细胞的特定状态的额外能力,可以获得额外的灵活性。
507.方法。提供了一种在微流体设备中测定t淋巴细胞(t细胞)的抗原特异性细胞毒性和任选的从其分泌的生物分子的方法,包括:将t细胞放置在微流体设备中;将第一捕获物体放置在t淋巴细胞附近,其中捕获微物体被配置用于捕获从t细胞释放的第一分泌生物分子;将靶细胞放置在t细胞附近;检测被第一捕获物体捕获的第一分泌生物分子;并确定目标细胞在t附近暴露一段时间后的活力。图29示出了示例性联合测定的示意图。
508.在各个实施方式中,靶细胞表达了t细胞特异性的抗原。靶细胞可能表达与黑素瘤、乳腺癌、肺癌、前列腺癌或胰腺癌相关的抗原。靶细胞可以是癌细胞。在一些实施方式中,靶癌细胞可以是来自细胞系的细胞,该细胞系表达癌症相关性或癌症特异性抗原。
509.分泌的生物分子。t细胞释放的分泌的生物分子可以是一种蛋白质。在一些实施方式中,分泌的生物分子可以是细胞因子或生长因子。细胞因子可能是肿瘤坏死因子α(tnfα)、干扰素γ(ifnγ)、白介素
‑
2(il2)、白介素
‑
4(il
‑
4)、白介素
‑
5(il
‑
5)、白介素
‑
10(il
‑
10)或白介素
‑
13(il
‑
13)。在该方法的其他实施方式中,从抗原特异性t细胞释放的分泌的蛋白可以是颗粒酶或穿孔素蛋白。在其他实施方式中,所分泌的生物分子可以是激素(例如,蛋白质激素)。或者,分泌的生物分子可以是抗体。在其他实施方式中,分泌的生物分子可以是小分子,其可以是肽或有机分子。分泌的生物分子可以是神经递质、代谢物、第二信使、激素(即肽类或有机分子激素)、脂质、脂肪酸或碳水化合物等。
510.t细胞或其他免疫细胞。t细胞可以是初始t细胞、记忆t细胞、中央记忆t细胞或效应t细胞等。在该方法的各个实施方式中,t细胞可以是哺乳动物t细胞。t细胞可以对肿瘤相
关抗原呈抗原特异性。在一些实施方式中,肿瘤相关抗原可以是slc452、tcl 1、vcx3a、mart1或nyeso1。在一些实施方式中,t细胞可表达嵌合抗原受体。在其他实施方式中,t细胞不表达嵌合抗原受体。在一些实施方式中,该方法可替代地使用另一类型的免疫细胞代替t细胞,例如b细胞(例如记忆b细胞)、成浆细胞或浆细胞;nk细胞或巨噬细胞。为简单起见,以下讨论将参照t细胞,但方法不受此限制。
511.捕获物体。捕获物体可以是可以被改进以更好地承载能够结合分泌的生物分子的结合剂的珠或其他固体颗粒。在该方法的多种实施方式中,结合剂可以包括蛋白质。蛋白质可以是抗体。或者,结合剂的蛋白质可以是目标分子的受体。结合剂不限于这些种类的结合剂,而是可以是能够特异性地结合分泌的生物分子的任何合适部分。其他结合剂可包括螯合复合物或合成结合基序,其被设计以捕获小分子或肽。
512.可用于本方法的微流体设备。在该方法的各个实施方式中,可用于该方法的微流体设备可包括用于容纳第一流体介质的流动的流动区域和通向流动区域的腔室。微流体设备可进一步包括微流体通道。在一些实施方式中,微流体设备的流动区域可包括微流体通道。
513.在该方法的各个实施方式中,微流体设备的腔室可以是包括隔离区域和连接区域的隔离坞。隔离坞可以具有大约100pl到大约1nl的体积。隔离坞的隔离区域可以是本文所述的微流体设备的未扫过区域,并具有通向连接区域的单个开口,而隔离坞的连接区域可以将隔离区域流体连接到微流体设备的流动区域。隔离坞的连接区域具有通向微流体设备的流动区域的近端开口和通向隔离区域的远端开口。在一些实施方式中,连接区域仅具有单个近端开口和单个远端开口(即,没有其他开口)。在一些实施方式中,连接区域的近端开口的宽度w
con
为大约20微米至大约100微米,并且从近端开口到远端开口的连接区域的长度l
con
是近端开口的宽度w
con
的至少1.0倍。在其他实施方式中,从近端开口到远端开口的连接区域的长度l
con
可以是连接区域的宽度w
con
的至少1.5倍或至少2.0倍。从近端开口到远端开口的连接区域的长度l
con
可以为大约20微米至大约500微米。在各个实施方式中,隔离坞的隔离区域的体积可以为1x106立方微米,2x106立方微米或6x106立方微米。在一些实施方式中,腔室可以具有小于约2微升的体积,而在其他实施方式中,腔室可以是具有约100pl至约2nl的体积的微流体设备的管路元件,例如隔离坞。在一些实施方式中,微流体设备可以包括多个腔室。微流体设备的多个腔室内的至少一些可以各自是本文所述的具有隔离区域和连接区域的隔离坞。在一些实施方式中,所有多个腔室可以是隔离坞。
514.在方法的各个实施方式中,微流体设备可进一步包括电极激活衬底。电极激活衬底可被配置用于产生dep力。可用于这些方法的微流体设备可以是本文所述的任何微流体设备,并且可以具有任何特征的组合。
515.向微流体设备中引入细胞和物体。在方法的各个实施方式中,t细胞、捕获物体和靶细胞可各自彼此相邻地置于微流体设备内。在一些实施方式中,t细胞、捕获物体和靶细胞可分别置于微流体设备的腔室内。在一些实施方式中,捕获物体可邻近腔室设置。在一些实施方式中,可以将多于一个t细胞引入到微流体设备的腔室内。在一些实施方式中,t细胞、捕获物体和靶细胞各种可以置于隔离坞的隔离区域内。在多种实施方式中,将t细胞置于腔室内包括将单个t细胞置于腔室内。使用介电泳(dep)力将t细胞置于微流体设备内。在一些实施方式中,将靶细胞置于腔室内可以包括将单个靶细胞置于腔室内。可以使用介电
泳(dep)力将捕获物体置于t细胞附近。在多种实施方式中,使用介电泳(dep)力将靶细胞置于t细胞附近。将t细胞、生物细胞和捕获物体置于微流体环境中后,可进行至少10分钟的温育(如15、20、25、30、35、40、45、50、55、60分钟或更长时间),或者大约1h、2h、3h、4h、5h、7h、8h、10h、12h或更长时间。t细胞可以提供有利于产生生物分子的环境。例如,如实施例部分中所描述的,细胞因子释放测定(其测量通过抗原特异性t淋巴细胞产生细胞因子)可包括腔室/坞,在此t细胞和捕获物体与其他细胞一起温育,所述其他细胞将启动(或不启动)从t细胞(例如,特异性抗原脉冲肿瘤细胞或非靶标抗原脉冲肿瘤细胞)产生的生物分子。这仅是一个示例,并不限于温育期间存在的细胞类型或其他分子物质。此外,在一些实施方式中,可以在旨在抑制目标生物分子产生的条件下用微物体温育t细胞。温育期还可以包括分泌的生物分子从t细胞扩散到捕获物体以被捕获所需的时间。
516.检测。在方法的各个实施方式中,所述方法还包括将分泌的生物分子检测试剂引入微流体设备。在一些实施方式中,当第一捕获物体捕获分泌的生物分子时,分泌的生物分子检测试剂与分泌的生物分子结合,而当分泌的生物分子未被捕获物体捕获时,分泌的生物分子检测试剂不与分泌的生物分子结合。检测分泌的生物分子包括检测比色、发光或荧光信号。试剂与目标分子结合,而目标分子与微物体结合。试剂可以在位点(例如,表位)与目标分子结合,使得试剂与目标分子的结合不干扰目标分子与微物体的结合。在其他实施方式中,当目标分子也与结合剂结合时,试剂可以与微物体的结合剂结合,但当结合剂不与目标分子结合时,试剂则不与微物体的结合剂结合。试剂可包括标记。标记可允许比色、发光或发光检测。检测可在周期性时间点重复进行或可仅在一个预定时间点进行。检测可包括获得生物细胞、微流体以及微流体设备的腔室/隔离坞中存在的任何其他物质的明场图像。检测还可以包括获得生物细胞、微流体和微流体设备的腔室/隔离坞中存在的任何其他物质的一种或多种荧光图像。微物体的确定和表征的自动化方法可用于提供测定的结果,并将在荧光图像中观察到的物体与在明场图像中观察到的物体相关联,并且可以包括2018年11月1日提交的题为“methods for detection of secreted biomolecule of interest in a microfluidic environment using automated detection and characterization of micro
‑
objects(使用微物体的自动检测和表征来检测微流体环境中分泌的目标生物分子的方法)”的美国临时申请第62/754107号中描述的任何方法,其全部公开内容以引用方式并入本文。
517.联合测定和进一步的多重测定。可以使用在此描述的方法来执行多种多重联合测定。多重联合测定的绝对数量仅受微流体环境内可检测到的可区分信号数量的限制。信号可基于但不限于以下各项来区分:荧光/比色/发光信号的波长、荧光/比色/发光信号的强度、荧光/比色/发光信号的组合、检测到的微物体的大小和检测到的信号的空间位置(任选地,结合明场检测和包括本文所述的生物细胞和捕获物体的微物体的表征)等。
518.在一些实施方式中,靶细胞(例如肿瘤细胞)可以在联合测定开始之前用一种染色剂(例如羧基荧光素琥珀酰亚胺酯,cfse)进行预染色,以允许更好地确定、表征和区分如本文所述的微流体设备/腔室/隔离坞内的不同生物细胞和/或其他微物体。
519.细胞毒性。在本文所述的联合测定方法中,通常需要结合细胞毒性测定。各种生化过程可以作为细胞毒性的测量方法进行测试。可以采用任何评估细胞活力的过程,特别是与不可逆的功能破坏相关的过程。方法可以包括评估膜完整性的丧失、膜代谢活性、细胞在
不同细胞周期阶段的停滞以及进入凋亡/坏死细胞死亡途径中的任何一种。识别细胞因子的产生可能有助于阐明哪种t细胞可能提供最有效的细胞毒性作用。乳酸脱氢酶(ldh)测定、台盼蓝排除和其他活/死染色试剂、3
‑
(4,5
‑
二甲基噻唑基
‑
2)
‑
2,5,
‑
二苯基
‑
四唑溴化物(mtt)和相关类似物是一些可用于指示膜完整性是否丧失的试剂。线粒体膜电位可作为细胞毒性的测量方法以及钙通量的测量。细胞毒性评估的另一个工具是测定靶细胞表现出的caspase活性,特别是caspase 3或caspase 8的活性。下面的实施例3和4证明了检测caspase活性作为细胞死亡标记物的能力,但方法不限于此。
520.因此,确定靶细胞的活力可包括将靶细胞与被配置用于标记无活力细胞的可检测标记物接触。在一些实施方式中,被配置用于标记无活力细胞的可检测标记物可被配置用于检测凋亡细胞。在其他实施方式中,被配置用于标记无活力细胞的可检测标记物可被配置用于标记钙通量或线粒体膜电位。在各个实施方式中,在多个暴露于t细胞的时间段中重复确定在暴露于t细胞一段时间后的靶细胞的活力。
521.在一些实施方式中,测定t细胞的细胞毒性以及评估t细胞的细胞因子分泌可能是有用的。细胞因子可以是干扰素γ、tnfα、il
‑
2、il
‑
4、il
‑
10、il
‑
13和il
‑
5等中的任一种。然后联合测定可以将caspase 3或caspase 8表达与对任何干扰素γ、tnfα、il
‑
2、il
‑
4、il
‑
10、il
‑
13和il
‑
5等的捕获物体的捕获相结合。在其他实施方式中,联合测定可以将钙通量的监测与对干扰素γ、tnfα、il
‑
2、il
‑
4、il
‑
10、il
‑
13和il
‑
5等的捕获物体的捕获相结合。在其他实施方式中,联合测定可以将线粒体膜电位的监测与对干扰素γ、tnfα、il
‑
2、il
‑
4、il
‑
10、il
‑
13和il
‑
5等的捕获物体的捕获相结合。
522.在其他实施方式中,t细胞的分泌的生物分子可以是具有可影响细胞毒性的特定活性的蛋白质。实例包括但不限于颗粒酶或穿孔素。在一些实施方式中,可以将上述任何细胞毒性测量与评估颗粒酶和/或穿孔素对捕获物体的捕获相结合来进行联合测定。
523.因此,在该方法的各个实施方式中,该方法还可以包括将第二捕获物引入微流体设备/微流体设备的腔室或隔离坞中,其中第二捕获物体被配置用于捕获第二分泌的生物分子,其中第二分泌的生物分子不同于第一分泌生物分子。第二捕获物体被配置用于捕获第二分泌的生物分子,但不捕获第一分泌生物分子,并且第一捕获物被配置用于捕获第一分泌生物分子但不捕获第二分泌的生物分子。第一捕获物体和第二捕获物体各自分别特异性地捕获第一分泌生物分子和第二分泌的生物分子。可以将第二捕获物体引入到微流体设备中并设置在微流体设备的腔室或隔离坞内或其附近。该方法还可包括在足以允许生物细胞将分泌的生物分子分泌到腔室内并使分泌的生物分子扩散并结合到捕获物体的条件下将生物细胞与第二捕获物体一起温育。
524.第二分泌的生物分子、第二捕获物体和第二捕获物体的结合剂可以是针对本文所述的第一目标分子、第一结合剂和/或第一微物体描述的类别中的任一种。
525.检测第二分泌的生物分子的结合可以根据本文所述的用于微物质的检测和表征的任何方法进行。检测第二分泌的生物分子包括检测比色、发光或荧光信号。第二分泌的生物分子检测试剂的比色、发光或荧光信号区别于第一分泌生物分子检测试剂的比色、发光或荧光信号区。第二分泌生物分子检测试剂的比色、发光或荧光信号可以通过信号强度或相关捕获物体的大小与第一分泌生物分子的比色、发光或荧光信号区分开来。第二分泌的生物分子检测试剂的比色、发光或荧光信号可以通过微流体设备、腔室或隔离坞内的位置
而与第一分泌生物分子的比色、发光或荧光信号区分开来。通过与相关捕获物体的明场图像和/或自发荧光特性的相关性,可以将第二分泌的生物分子检测试剂的比色、发光或荧光信号与第一分泌生物分子的比色、发光或荧光信号区分开来。第二分泌的生物分子检测试剂的比色、发光或荧光信号可以在光谱上不同于第一分泌的蛋白检测试剂的比色、发光或荧光信号。
526.该方法可以允许进一步的多重操作并且包括允许用于检测三个、四个或更多个分泌的生物分子的三个、四个或更多个捕获物体,同时仍然允许每个的可区分检测。三个、四个或更多个捕获物体中的每一个分别特异性地和实质上捕获三个、四个或更多个分泌的生物分子中的每一个。
527.表型测定。在该方法的各个实施方式中,该方法还可以包括标记t细胞是否存在一种或多种与增殖、活化、代谢活性、记忆、耗竭和/或谱系相关的细胞表面标记物。这对于鉴定t细胞的表型可能特别有用,但本发明不限于此。一种或多种细胞表面标记物的标记可以是比色的、发光的或荧光的,或者可以产生比色、发光或荧光信号。在一些实施方式中,蛋白质可以在t细胞的表面上或者它可以被分泌,从而允许捕获到如上文针对细胞因子所述的捕获物体。
528.可以对标记物进行表面染色,例如:cd4、cd8、cd137、cd107a和/或cd69,t细胞分类状态的每个指标。在其他实施方式中,可以针对cd28、cd127、ccr7和/或cd107的存在进行表面染色或基于珠的捕获。任何这些表面标记物都可以与ifnγ细胞因子的释放组合进行额外的测定。
529.可以通过cfse染色或活
‑
死细胞染色针对t细胞或针对靶细胞检查增殖(倍数扩增或细胞分裂)。
530.t细胞是否具有记忆表型可以通过使用cd45ra、cd45ro、ccr7中的一种或多种的表面或细胞内染色来研究。此外,可以使用mitoview或2
‑
nbdg来研究代谢状态。
531.通过使用标记物(例如cd57、klrg1、tim
‑
3、lag
‑
3和/或pd
‑
1)的表面染色,可以进一步探测t细胞的状态是否耗竭。
532.此外,可以通过观察细胞因子的释放和ifnγ、il
‑
4和/或il13释放的捕获,或通过对ifnγ、il
‑
4和/或il
‑
13表达进行转录谱分析来探测t细胞的谱系,例如是th1/th2和cd4等。
533.后联合测定。在该方法的多个实施方式中,该方法还可包括,在确定靶细胞的活力后,从t细胞捕获核酸。捕获核酸可以如在任何合适的方法中所描述的那样进行,并且可以包括如于2017年9月29日提交的题为“dna barcode compositions and methods of in
‑
situ identification(原位识别dna条形码组合物和方法)”的国际申请号pct/us2017/054628或于2017年10月23日提交的题为“methods for screening b cell lymphocytes(筛选b细胞淋巴细胞的方法)”的国际申请号pct/us2017/057926中所述的方法,每个中公开的内容通过引用整体并入本文。可以对从t细胞捕获的核酸进行测序。
534.在其他实施方式中,该方法还可包括,在确定靶细胞的活力后,从微流体设备输出t细胞,用于进一步培养、处理和/或测定,例如测序。
535.套组。提供了用于在微流体设备中联合测定t淋巴细胞(t细胞)的抗原特异性细胞毒性和从其释放的生物分子的套组,包括:微流体设备,包括用于容纳第一流体介质流动的
流动区域和通向流动区域的腔室;以及被配置为检测靶细胞活力的细胞毒性检测试剂。在一些实施方式中,微流体设备的腔室可包括隔离坞。隔离坞可以包括用于容纳第二流体介质的隔离区域,隔离区域具有单个开口,其中隔离坞的隔离区域是微流体设备的未扫过区域;以及将隔离区域流体连接到流动区域的连接区域。在一些实施方式中,微流体设备可包括微流体通道。在各个实施方式中,微流体设备的流动区域可以是微流体通道。该套组的微流体设备还可包括被配置为产生介电泳(dep)力的电极激活衬底。微流体设备的电极激活衬底可以被光学致动。微流体设备可以是本文描述的任何微流体设备并且可以具有本文描述的特征的任何组合。该套组还可包括用于在微流体设备内提供调节表面的试剂。所述试剂可以是用于提供调节表面的任何合适的试剂,包括于2017年5月26日提交的题为“covalently modified surfaces,kits and methods of preparation and use(共价修饰的表面、试剂盒、制备方法和用途)”的pct申请号pct/us2017/034832中所述的共价改性的表面。
536.在套组的各个实施方式中,细胞毒性检测试剂可以包括被配置为标记凋亡细胞的试剂。在其他实施方式中,细胞毒性检测试剂可包括被配置为检测钙通量或线粒体膜电位的试剂。
537.在套组的其他实施方式中,套组可以包括被配置为捕获t细胞的第一分泌生物分子的第一捕获物体。该套组还可包括配置为检测第一分泌蛋白的第一生物分子检测试剂,其中该试剂配置为产生比色、发光或荧光信号。
538.在套组的各个实施方式中,套组还可包括第二捕获物体和第二分泌的生物分子检测试剂,其中第二分泌的生物分子不同于第一分泌生物分子。第二分泌的生物分子检测试剂可产生比色、发光或荧光信号。第二分泌的生物分子检测试剂的比色、发光或荧光信号可以与第一分泌生物分子检测试剂的比色、发光或荧光信号区分开来。第二分泌的生物分子检测试剂的比色、发光或荧光信号可通过信号强度或相关捕获物体的大小与第一分泌生物分子的比色、发光或荧光信号区分开来。第二分泌的生物分子试剂的比色、发光或荧光信号可以在光谱上不同于第一分泌生物分子检测试剂的比色、发光或荧光信号。
539.在套组的其他实施方式中,套组还可包括一种或多种试剂以标记t淋巴细胞的细胞表面标记物,其可以是任何合适的细胞表面标记物。一种或多种细胞表面标记物可以是本文所述的任何细胞表面标记物。在一些实施方式中,在所述方法中使用多于一种细胞表面标记物。
540.用于操作和观察此类设备的微流体设备和系统。图1a图示了可用于导入、培养和/或监测微物体的微流体设备100和系统150的示例。显示了微流体设备100的透视图,其盖110被部分切开以提供微流体设备100的局部视图。微流体设备100通常包括微流体管路120,该微流体管路120包括流体介质180可以流动通过的流动路径106,任选地携带一个或多个微物体(未示出)进入和/或通过微流体管路120。尽管图1a中示出了单个微流体管路120,但合适的微流体设备可包括多个(例如,2或3个)这样的微流体管路。无论如何,微流体设备100可以被配置为纳米流体设备。如图1a所示,微流体管路120可以包括多个微流体隔离坞124、126、128和130,其中每个隔离坞可以具有一个或多个与流动路径106流体连通的开口。在图1a的设备的一些实施方式中,隔离坞可以仅具有与流动路径106流体连通的单个开口。如下文进一步讨论的,微流体隔离坞包括各种特征和结构,这些特征和结构已经被优
化以在微流体设备例如微流体设备100中保留微物体,即使当介质180流过流动路径106时。然而,在转向前述内容之前,提供了微流体设备100和系统150的简要描述。
541.如图1a中大体所示,微流体管路120由外壳102限定。尽管外壳102可以物理地构造成不同的配置,但是在图1a所示的示例中,外壳102被描绘为包括支撑结构104(例如,基座)、微流体管路结构108和盖110。支撑结构104、微流体管路结构108和盖110可以彼此附接。例如,微流体管路结构108可以设置在支撑结构104的内表面109上,并且盖110可以设置在微流体管路结构108上方。微流体管路结构108可以与支撑结构104和盖110一起限定微流体管路120的元件。
542.如图1a所示,支撑结构104可位于底部,盖110可位于微流体管路120的顶部。或者,支撑结构104和盖110可以以其他取向进行配置。例如,支撑结构104可以位于微流体管路120的顶部,而盖110可以位于微流体管路120的底部。无论如何,可以有一个或多个端口107,每个端口都包括进入或离开外壳102的通道。通道的示例包括阀、门、贯通孔等。如图所示,端口107是由微流体管路结构108中的间隙产生的通孔。然而,端口107可以位于外壳102的其他组件中,例如盖110。图1a中仅示出了一个端口107,但是微流体管路120可以具有两个或更多个端口107。例如,可以存在第一端口107,其用作进入微流体管路120的流体的入口,并且存在第二端口107,其用作离开微流体管路120的流体的出口。端口107作为入口或出口使用可取决于流体流过流动路径106的方向。
543.支撑结构104可以包括一个或多个电极(未示出)和衬底或多个互连衬底。例如,支撑结构104可以包括一个或多个半导体衬底,每个半导体衬底电连接到电极(例如,半导体衬底的全部或子集可以电连接到单个电极)。支撑结构104还可包括印刷电路板组件(“pcba”)。例如,半导体衬底可以安装在pcba上。
544.微流体管路结构108可以限定微流体管路120的电路元件。这样的电路元件可以包括当微流体管路120充满流体时可以流体互连的空间或区域,例如流动区域(其可以包括或者是一个或多个流动通道)、腔室、坞和捕集器等。在图1a所示的微流体管路120中,微流体管路结构108包括框架114和微流体管路材料116。框架114可以部分地或完全地包围微流体管路材料116。框架114可以是例如基本上围绕微流体管路材料116的相对刚性的结构。例如,框架114可以包括金属材料。
545.微流体管路材料116可以由腔室或类似物图案化以限定微流体管路120的管路元件和互连。微流体管路材料116可以包括柔性材料,诸如柔性聚合物(例如,橡胶、塑料、弹性体、硅树脂、聚二甲基硅氧烷(“pdms”)等),其可以是透气的。可构成微流体管路材料116的材料的其他示例包括模制玻璃、诸如硅树脂(例如可光图案化的硅树脂或“pps”)的可蚀刻材料、光致抗蚀剂(例如,su8)等。在一些实施方式中,这种材料、即微流体管路材料116可以是刚性的和/或基本上不透气。无论如何,微流体管路材料116可设置在支撑结构104上且在框架114内。
546.盖110可以是框架114和/或微流体管路材料116的整体部分。或者,如图1a所示,盖110可以是结构上不同的元件。盖110可以包括与框架114和/或微流体管路材料116相同或不同的材料。类似地,支撑结构104可以是与所示的框架114或微流体管路材料116分离的结构,或者是框架114或微流体管路材料116的整体部分。同样,框架114和微流体管路材料116可以是如图1a所示的单独结构或相同结构的整体部分。
547.在一些实施方式中,盖110可以包括刚性材料。刚性材料可以是玻璃或具有类似特性的材料。在一些实施方式中,盖110可以包括可变形材料。可变形材料可以是聚合物,例如pdms。在一些实施方式中,盖110可以包括刚性和可变形材料。例如,盖110的一个或多个部分(例如,位于隔离坞124、126、128、130上方的一个或多个部分)可以包括与盖110的刚性材料对接的可变形材料。在一些实施方式中,盖110可以还包括一个或多个电极。一个或多个电极可以包括导电氧化物,诸如氧化铟锡(ito),其可涂覆在玻璃或类似绝缘材料上。可替代地,一个或多个电极可以是柔性电极,例如单壁纳米管、多壁纳米管、纳米线、导电纳米颗粒簇或其组合,嵌入在可变形材料中,诸如聚合物(例如,pdms)。可在微流体设备中使用的柔性电极已在例如us2012/0325665(chiou等人)中描述,其内容通过引用并入本文。在一些实施方式中,盖110可以被修饰(例如,通过调节朝向微流体管路120的朝向内侧的表面的全部或部分)以支持细胞粘附、活力和/或生长。修饰可以包括合成或天然聚合物的涂层。在一些实施方式中,盖110和/或支撑结构104对光透明。盖110还可以包括至少一种透气的材料(例如,pdms或pps)。
548.图1a还示出了用于操作和控制诸如微流体设备100的微流体设备的系统150。系统150包括电源192、成像设备(结合在成像模块164内,成像设备本身未在图1a中示出)和倾斜设备(倾斜模块166的部分,其中倾斜设备本身未在图1a中示出)。
549.电源192可以向微流体设备100和/或倾斜设备190提供电力,根据需要提供偏置电压或电流。电源192可以例如包括一个或多个交流(ac)和/或直流(dc)电压或电流源。成像设备194(下文论述的成像模块164的部分)可以包括用于捕获微流体管路120内部的图像的设备,例如数码相机。在一些情况下,成像设备194还包括具有快速帧速率和/或高灵敏度(例如,用于低光应用)的检测器。成像设备194还可以包括用于将刺激辐射和/或光束引导到微流体管路120中并且收集从微流体管路120(或包含在其中的微物体)反射或发射的辐射和/或光束的机构。发射的光束可以在可见光谱中并且可以例如包括荧光发射。反射光束可以包括源自led或宽光谱灯的反射发射,诸如汞灯(例如高压汞灯)或氙弧灯。如关于图3b所论述,成像设备194还可以包含显微镜(或光具组),其可包含目镜或不包含目镜。
550.系统150还包括倾斜设备190(下面描述的倾斜模块166的一部分),该倾斜设备190被配置为使微流体设备100围绕一个或多个旋转轴线旋转。在一些实施方式中,倾斜设备190被配置为围绕至少一个轴线支撑和/或保持包括微流体管路120的外壳102,使得微流体设备100(因此微流体管路120)可以保持在水平取向(即,相对于x轴和y轴为0
°
)、垂直取向(即,相对于x轴和/或y轴呈90度)或它们之间的任何取向。微流体设备100(和微流体管路120)相对于轴线的取向在本文中被称为微流体设备100(和微流体管路120)的“倾斜”取向。例如,倾斜设备190可使微流体设备100相对于x轴倾斜0.1
°
、0.2
°
、0.3
°
、0.4
°
、0.5
°
、0.6
°
、0.7
°
、0.8
°
、0.9
°
、1
°
、2
°
、3
°
、4
°
、5
°
、10
°
、15
°
、20
°
、25
°
、30
°
、35
°
、40
°
,45
°
,50
°
、55
°
、60
°
、65
°
、70
°
、75
°
、80
°
、90
°
或在它们之间的任何角度。水平取向(以及因此x轴和y轴)被限定为垂直于由重力限定的竖直轴线。倾斜设备还可使微流体设备100(和微流体管路120)相对于x轴和/或y轴倾斜大于90
°
,或使微流体设备100(和微流体管路120)相对于x轴或y轴倾斜180
°
,以便完全倒置微流体设备100(和微流体管路120)。类似地,在一些实施方式中,倾斜设备190使微流体设备100(和微流体管路120)围绕由流动路径106或微流体管路120的一些其他部分限定的旋转轴线倾斜。
551.在一些情况下,微流体设备100被倾斜成垂直取向,使得流动路径106定位在一个或多个隔离坞的上方或下方。如本文所使用的术语“上方”表示流动路径106在由重力限定的竖直轴线上定位在高于一个或多个隔离坞(即,流动路径106上方的隔离坞中的物体具有比流动路径中的物体更高的重力势能)。如本文所使用的术语“下方”表示流动路径106在由重力限定的竖直轴线上定位在低于一个或多个隔离坞(即,流动路径106下方的隔离坞中的物体具有比流动路径中的物体更低的重力势能)。
552.在一些情况下,倾斜设备190使微流体设备100围绕平行于流动路径106的轴线倾斜。此外,微流体设备100可以倾斜到小于90
°
的角度,使得流动路径106位于一个或多个隔离坞的上方或下方,而不直接位于隔离坞的上方或下方。在其他情况下,倾斜设备190使微流体设备100围绕垂直于流动路径106的轴线倾斜。在其他情况下,倾斜设备190使微流体设备100围绕既不平行也不垂直于流动路径106的轴线倾斜。
553.系统150还可以包括介质源178。介质源178(例如,容器、贮存器等)可以包括多个部分或容器,每个部分或容器用于保持不同的流体介质180。因此,介质源178可以是在微流体设备100外部且与微流体设备100分离的设备,如图1a所示。或者,介质源178可全部或部分地位于微流体设备100的外壳102内。例如,介质源178可以包括作为微流体设备100的一部分的贮存器。
554.图1a还示出了构成系统150的一部分并且可以与微流体设备100结合使用的控制和监测设备152的示例的简化框图描绘。如图所示,这样的控制和监测设备152的示例包括主控制器154,其包括:用于控制介质源178的介质模块160;用于控制微流体管路120中的微物体(未示出)和/或介质(例如,介质的液滴)的移动和/或选择的运动模块162;用于控制成像设备194(例如,用于捕获图像(例如,数字图像)的相机、显微镜、光源或其任何组合)的成像模块164;以及用于控制倾斜设备190的倾斜模块166。控制设备152还可以包括用于控制、监测或执行关于微流体设备100的其他功能的其他模块168。如图所示,设备152还可以包括显示设备170和输入/输出设备172。
555.主控制器154可以包括控制模块156和数字存储器158。控制模块156可以包括例如被配置为根据存储为存储器158中的非暂时性数据或信号的机器可执行指令(例如,软件、固件、源代码等)操作的数字处理器。另外地或额外地,控制模块156可以包括硬连线数字电路和/或模拟电路。介质模块160、运动模块162、成像模块164、倾斜模块166和/或其他模块168可以被类似地配置。因此,本文所描述的关于微流体设备100或任何其他微流体设备执行的过程的功能、过程动作、动作或步骤可以由如上所述配置的主控制器154、介质模块160、运动模块162、成像模块164、倾斜模块166和/或其他模块168中的任何一个或多个来执行。类似地,主控制器154、介质模块160、运动模块162、成像模块164、倾斜模块166和/或其他模块168可以通信地耦合以发送和接收在本文描述的功能、过程、过程动作、动作或步骤中的任意一个使用的数据。
556.介质模块160控制介质源178。例如,介质模块160可以控制介质源178以将所选择的流体介质180输入到外壳102中(例如,通过入口端口107)。介质模块160还可以控制介质从外壳102的移除(例如,通过出口端口(未示出))。因此,可将一种或多种介质选择性地输入到微流体管路120中和从微流体管路120移除。介质模块160还可以控制微流体管路120内的流动路径106中的流体介质180的流动。例如,在一些实施方式中,介质模块160在倾斜模
块166使倾斜设备190将微流体设备100倾斜到期望的倾斜角度之前,阻止介质180流动到流动路径106中和穿过外壳102。
557.运动模块162可以被配置为控制微流体管路120中的微物体(未示出)的选择、捕获和移动。如下面关于图1b和1c所描述的,外壳102可以包括介电泳(dep)、光电镊子(oet)和/或光电润湿(oew)结构(图1a中未示出),并且运动模块162可以控制电极和/或晶体管(例如,光电晶体管)的激活,以选择和移动流动路径106和/或隔离坞124、126、128、130中的微物体(未示出)和/或介质的液滴(未示出)。
558.成像模块164可以控制成像设备194。例如,成像模块164可以从成像设备194接收和处理图像数据。来自成像设备194的图像数据可以包括由成像设备194捕获的任何类型的信息(例如,微物体的存在或不存在、介质的液滴、例如荧光标记等的标记的累积等)。使用由成像设备194捕获的信息,成像模块164还可以计算物体(例如,微物体、介质的液滴)和/或此类物体在微流体设备100内的运动速率。
559.倾斜模块166可以控制倾斜设备190的倾斜运动。另外地或额外地,倾斜模块166可以控制倾斜速率和定时,以优化微物体经由重力向一个或多个隔离坞的转移。倾斜模块166与成像模块164通信地耦合以接收描述微流体管路120中的微物体和/或介质液滴的运动的数据。使用该数据,倾斜模块166可以调节微流体管路120的倾斜,以便调节微流体和/或介质液滴在微流体管路120中移动的速率。倾斜模块166还可以使用该数据来迭代地调节微流体管路120中的微物体和/或介质液滴的位置。
560.在图1a所示的示例中,微流体管路120被示出为包括微流体通道122和隔离坞124、126、128、130。每个坞包括通向通道122的开口,其余的被封闭,使得坞可以将坞内的微物体与流体介质180和/或微物体基本上隔离在通道122的流动路径106中或其他坞中。隔离坞的壁从基部的内表面109延伸到盖110的内表面以进行封闭。坞到微流体通道122的开口被取向为与流体介质180的流体106成一角度,使得流体106不被引导到坞中。流体可以与坞的开口的平面相切或正交。在一些情况下,坞124、126、128、130被配置为在微流体管路120内物理地支撑一个或多个微物体。如将在下面详细讨论和示出的,本公开的隔离坞可以包括各种形状、表面和特征,这些形状、表面和特征被优化以与dep、oet、oew、流动流体和/或重力一起使用。
561.微流体管路120可包括任何数量的微流体隔离坞。尽管示出了五个隔离坞,但是微流体管路120可以具有更少或更多的隔离坞。如图所示,微流体管路120的微流体隔离坞124、126、128和130各自包括不同的特征和形状,其可以提供一个或多个对于维持、分离、测定或培养生物微物体物来说有用的益处。在一些实施方式中,微流体管路120包括多个相同的微流体隔离坞。
562.在图1a所示的实施方式中,示出了单个通道122和流动路径106。然而,其他实施方式可以包含多个通道122,每个通道被配置为包括流动路径106。微流体管路120还包括与流动路径106和流体介质180流体连通的入口阀或端口107,由此流体介质180可以经由入口端口107流入通道122。在一些情况下,流动路径106包括单个路径。在一些情况下,单个路径以锯齿形图案布置,由此流动路径106沿交替方向两次或更多次在微流体设备100上延伸。
563.在一些情况下,微流体管路120包括多个平行通道122和流动路径106,其中每个流动路径106内的流体介质180在相同方向上流动。在一些情况下,每个流动路径106内的流体
介质在向前或向后方向中的至少一个方向上流动。在一些情况下,多个隔离坞被配置(例如,相对于通道122),使得隔离坞可以平行地加载有目标微物体。
564.在一些实施方式中,微流体管路120还包括一个或多个微物体捕集器(traps)132。捕集器132通常在形成通道122的边界的壁中形成,并且可以定位成与微流体隔离坞124、126、128、130中的一个或多个的开口相对放置。在一些实施方式中,捕集器132被配置为从流动路径106接收或捕集单个微物体。在一些实施方式中,捕集器132被配置为从流动路径106接收或捕集多个微物体。在一些情况下,捕集器132包括近似与单个目标微物体的体积相等的体积。
565.捕集器132还可以包括开口,所述开口被配置为辅助靶微物体流入捕集器132中。在一些情况下,捕集器132包括具有近似等于单个靶微物体的尺寸的高度和宽度的开口,由此防止较大的微物体进入微物体捕集器。捕集器132还可以包括被配置为帮助将靶微物体保持在捕集器132内的其他特征。在一些情况下,捕集器132相对于微流体隔离坞的开口与通道122的相对侧对准并位于其相对侧,使得在微流体设备100围绕平行于微流体通道122的轴倾斜时,被捕获的微物体以使得微物体落入隔离坞的开口中的轨迹离开捕集器132。在一些情况下,捕集器132包括侧通道134,该侧通道134小于目标微物体以便于流过捕集器132,从而增加在捕集器132中捕获微物体的可能性。
566.在一些实施方式中,介电泳(dep)力经由一个或多个电极(未示出)施加在流体介质180(例如,在流动路径和/或隔离坞中)以操纵、传输、分离和分类位于其中的微物体。例如,在一些实施方式中,dep力被施加到微流体管路120的一个或多个部分,以便将单个微物体从流动路径106转移到期望的微流体隔离坞中。在一些实施方式中,dep力用于防止隔离坞(例如,隔离坞124、126、128或130)内的微物体从其移位。此外,在一些实施方式中,dep力用于从先前根据本公开的实施方式而收集的隔离坞选择性地移出微物体。在一些实施方式中,dep力包括光电镊子(oet)力。
567.在其他实施方式中,光电润湿(oew)力经由一个或多个电极(未示出)施加到微流体设备100的支撑结构104(和/或盖110)中的一个或多个位置(例如,帮助限定流动路径和/或隔离坞的位置)以操纵,传输、分离和分选位于微流体管路120中的液滴。例如,在一些实施方式中,oew力被施加到支撑结构104(和/或盖110)中的一个或多个位置,以便将单个液滴从流动路径106转移到期望的微流体隔离坞中。在一些实施方式中,oew力用于防止隔离坞(例如,隔离坞124、126、128或130)内的液滴从其移位。此外,在一些实施方式中,oew力用于从先前根据本公开的实施方式收集的隔离坞选择性地移出液滴。
568.在一些实施方式中,dep力和/或oew力与其他力,诸如流量和/或重力)组合,以便操纵、运输、分离和分类微流体管路120内的微物体和/或液滴。例如,外壳102可以倾斜(例如,通过倾斜设备190)以将流动路径106和位于其中的微物体定位在微流体隔离坞上方,并且重力可以将微物体和/或液滴输送到坞中。在一些实施方式中,dep力和/或oew力可以在其他力之前施加。在其他实施方式中,dep力和/或oew力可以在其他力之后施加。在其他情况下,dep力和/或oew力可以与其他力同时或以与其他力交替的方式施加。
569.图1b、图1c和图2a
‑
图2h示出了可用于实践本公开的实施方式的微流体设备的各种实施方式。图1b描绘了其中微流体设备200被配置为光学致动的电动设备的实施方式。多种光学致动的电动设备在本领域中是已知的,包括具有光电镊子(oet)结构的设备和具有
光电电润湿(oew)结构的设备。合适的oet结构的实例在以下美国专利文献中说明,所述文献中的每一个以全文引用的方式并入本文中:美国专利号re44,711(wu等人)(最初公布为美国专利号7612355);和美国专利号7,956,339(ohta等人)。oew结构的实例在美国专利号6,958,132(chiou等人)和美国专利申请公开号2012/0024708(chiou等人)中说明,两者均以全文引用的方式并入本文中。光学致动的电动设备的又一示例包括组合的oet/oew配置,其示例在美国专利公开号20150306598(khandros等人)和20150306599(khandros等人)及其对应的pct公开wo2015/164846和wo2015/164847中,所有这些专利通过引用整体并入本文。
570.已经描述了具有坞的微流体设备的实例,其中可以放置、培养和/或监测生物微物体,例如在us2014/0116881(申请号14/060,117,2013年10月22日提交),us2015/0151298(申请号14/520,568,2014年10月22日提交),以及us2015/0165436(申请号14/521,447,2014年10月22日提交)中,其每一篇全文以引用的方式并入本文中。美国申请号14/520,568和14/521,447还描述了分析在微流体设备中培养的细胞的分泌物的示例性方法。前述申请中的每一个进一步描述了微流体设备被配置为产生介电泳(dep)力,例如光电镊子(oet),或被配置为提供光电润湿(oew)。例如,在us2014/0116881的图2中示出的光电镊子设备是可以在本公开的实施方式中利用以选择和移动单独的生物微物体或一组生物微物体的设备的示例。
571.微流体设备动力配置。如上所述,系统的控制和监测设备可以包括用于在微流体设备的微流体管路中选择和移动诸如微物体或液滴的物体的运动模块。微流体设备可具有各种动力配置,这取决于所移动的物体的类型和其他考虑因素。例如,可以利用介电泳(dep)结构来选择和移动微流体管路中的微物体。因此,微流体设备100的支撑结构104和/或盖110可以包括dep结构,用于选择性地在微流体管路120中的流体介质180中的微物体上诱导dep力,并由此选择、捕获和/或移动单独的微物体或多组微物体。可替代地,微流体设备100的支撑结构104和/或盖110可以包括电润湿(ew)结构,用于选择性地在微流体管路120中的流体介质180中的液滴上感应ew力,并且由此选择、捕获和/或移动单独的液滴或多组液滴。
572.在图1b和图1c中示出包括dep配置的微流体设备200的一个示例。虽然为了简化的目的,图1b和图1c分别示出了具有区域/腔室202的微流体设备200的外壳102的一个侧面截面图和俯视截面图,应当理解,区域/腔室202可以是具有更详细结构的流体管路元件的一部分,例如生长室、隔离坞、流动区域或流动通道。此外,微流体设备200可以包括其他流体管路元件。例如,微流体设备200可以包括多个生长腔室或隔离坞和/或一个或多个流动区域或流动通道,诸如本文关于微流体设备100所述的那些。dep结构可以被合并到微流体设备200的任何这样的流体管路元件中,或选择部分。还应当理解,任何上述或下面描述的微流体设备部件和系统部件可以结合到微流体设备200中和/或与微流体设备200结合使用。例如,包括上述控制和监测设备152的系统150可以与微流体设备200一起使用,微流体设备200包括介质模块160、运动模块162、成像模块164、倾斜模块166和其他模块168中的一个或多个。
573.如图1b所示,微流体设备200包括支撑结构104,其具有底部电极204和覆盖底部电极204的电极激活衬底206,以及具有顶部电极210的盖110,顶部电极210与底部电极204间
隔开。顶部电极210和电极激活衬底206限定区域/腔室202的相对表面。因此,包含在区域/腔室202中的介质180提供顶部电极210与电极激活衬底206之间的电阻连接。还示出了电源212,其被配置为为连接到底部电极204及顶部电极210且根据需要在电极之间产生偏置电压,以用于区域/腔室202中的dep力的产生。电源212可以是例如交流(ac)电源。
574.在某些实施方式中,图1b和图1c中所示的微流体设备200可具有光学致动的dep结构。因此,改变来自光源216的光的图案218,其可以由运动模块162控制,可以选择性地激活和去激活电极激活衬底206的内表面208的区域214处的dep电极的改变图案。(下文中,具有dep结构的微流体设备的区域214被称为“dep电极区域”)。如图1c所示,被引导到电极激活衬底206的内表面208上的光图案218可以以例如正方形的图案照明选择的dep电极区域214a(以白色示出)。未被照明的dep电极区域214(交叉阴影线)在下文中被称为“暗的”dep电极区域214。通过dep电极激活衬底206的相对电阻抗(即,从底部电极204直到电极激活衬底206的与流动区域106中的介质180对接的内表面208)大于通过在每个暗dep电极区域214处的区域/腔室202中的介质180的相对电阻抗(即从电极激活衬底206的内表面208到盖110的顶部电极210)。然而,被照明的dep电极区域214a表现出整个电极激活衬底206的减小的相对阻抗,其小于每个被照明的dep电极区域214a处的区域/腔室202中的整个介质180的相对阻抗。
575.在电源212被激活的情况下,前述dep结构在被照明的dep电极区域214a和相邻的暗的dep电极区域214之间的流体介质180中产生电场梯度,这进而产生局部dep力,其吸引或排斥流体介质180中的附近微物体(未示出)。因此,通过改变从光源216投射到微流体设备200中的光图案218,可以在区域/腔室202的内表面208处的许多不同的这样的dep电极区域214处选择性地激活和去激活吸引或排斥流体介质180中的微物体的dep电极。dep力是否吸引或排斥附近的微物体可以取决于诸如电源212的频率和介质180和/或微物体(未示出)的介电性质的参数。
576.在图1c中示出的被照明的dep电极区域214a的方形图案220仅是示例。可通过投射到微流体设备200中的光图案218来照明(且由此激活)dep电极区域214的任何图案,且可通过改变或移动光图案218而重复地改变经照明/激活的dep电极区域214的图案。
577.在一些实施方式中,电极激活衬底206可以包括光电导材料或由光电导材料组成。在这样的实施方式中,电极激活衬底206的内表面208可以是无特征的。例如,电极激活衬底206可以包括氢化非晶硅(a
‑
si:h)层或由氢化非晶硅(a
‑
si:h)层组成。a
‑
si:h可包含例如约8%到40%的氢(以100
×
氢原子的数目/氢和硅原子的总数来计算)。a
‑
si:h层可以具有约500nm至约2.0微米的厚度。在这样的实施方式中,可以根据光图案218在电极激活衬底206的内表面208上的任何地方和任何图案中创建dep电极区域214。因此,dep电极区域214的数量和图案不需要是固定的,而是可以对应于光图案218。具有包括如上所述的光导层的dep结构的微流体设备的示例已经在例如美国专利号re44,711(wu等人)(最初公布为美国专利号7,612,355)中进行了描述,其全部内容通过引用并入本文。
578.在其他实施方式中,电极激活衬底206可以包括衬底,该衬底包括多个掺杂层、电绝缘层(或区域)和形成半导体集成电路的导电层,例如在半导体领域中是已知的。例如,电极激活衬底206可以包括多个光电晶体管,包括例如横向双极光电晶体管,每个光电晶体管对应于dep电极区域214。可替代地,电极激活衬底206可以包括由光电晶体管开关控制的电
极(例如,导电金属电极),其中每个这样的电极对应于dep电极区域214。电极激活衬底206可以包括这样的光电晶体管或光电晶体管控制的电极的图案。图案例如可以是布置成行和列的基本上正方形的光电晶体管或光电晶体管控制的电极的阵列,如图2b中所示。可替代地,图案可以是形成六边形晶格的基本上六边形光电晶体管或光电晶体管控制的电极的阵列。不管图案如何,电路元件可在电极激活衬底206的内表面208处的dep电极区域214与底电极210之间形成电连接,并且那些电连接(即,光电晶体管或电极)可以通过光图案218选择性地激活和去激活。当未被激活时,每个电连接可以具有高阻抗,使得在对应的dep电极区域214处,整个电极激活衬底206的相对阻抗(即,从底部电极204到电极激活衬底206的与区域/腔室202中的介质180接合的内表面208)大于整个介质180的相对阻抗(即,从电极激活衬底206的内表面208到盖110的顶部电极210)。然而,当由在光图案218中的光激活时,整个电极激活衬底206的相对阻抗小于在每个被照明的dep电极区域214处的整个介质180的相对阻抗,从而如上所述在对应的dep电极区域214处激活dep电极。因此,吸引或排斥介质180中的微物体(未示出)的dep电极可以以由光图案218确定的方式在区域/腔室202中的电极激活衬底206的内表面208处的许多不同的dep电极区域214处被选择性地激活和去激活。
579.具有包含光电晶体管的电极激活衬底的微流体设备的示例已描述于例如美国专利号7,956,339(ohta等人)(参见例如图21和22中所说明的设备300及其描述)中,其全部内容通过引用并入本文。具有包括由光电晶体管开关控制的电极的电极激活衬底的微流体设备的示例,例如美国专公开号2014/0124370(short等人)中描述(参见例如在整个附图中示出的设备200、400、500、600和900及其描述),其全部内容通过引用并入本文。
580.在dep结构的微流体设备的一些实施方式中,顶部电极210是外壳102的第一壁(或盖110)的一部分,并且电极激活衬底206和底部电极204是外壳102的第二壁(或支撑结构104)的一部分。区域/腔室202可以在第一壁和第二壁之间。在其他实施方式中,电极210是第二壁(或支撑结构104)的一部分,并且电极激活衬底206和/或电极210中的一者或两者是第一壁(或盖110)的一部分。此外,光源216可替代地用于从下方照亮外壳102。
581.利用具有dep结构的图1b至图1c的微流体设备200,运动模块162可以通过将光图案218投射到微流体设备200中,以在围绕并捕获微物体的图案(例如,正方形图案220)中激活电极激活衬底206的内表面208的dep电极区域214a处的一个或多个dep电极中的第一组,从而选择区域/腔室202中的介质180中的微物体(未示出)。然后,运动模块162可以通过相对于微流体设备200移动光图案218以激活dep电极区域214处的一个或多个dep电极中的第二组来移动原位生成的捕获的微物体。或者,微流体设备200可相对于光图案218移动。
582.在其他实施方式中,微流体设备200可以具有dep配置,其不依赖于在电极激活衬底206的内表面208处的dep电极的光激活。例如电极激活衬底206可包括选择性可寻址且可激励的电极,其位于与包括至少一个电极(例如盖110)的表面相对的位置。开关(例如半导体衬底中的晶体管开关)可以被选择性地接通和关断以在dep电极区域214处激活或去激活dep电极,从而在激活的dep电极附近的区域/腔室202中的微物体(未示出)上产生净dep力。取决于诸如电源212的频率和介质(未示出)和/或微物体在区域/腔室202中的介电性质之类的特性,dep力可以吸引或排斥附近的微物体。通过选择性地激活和去激活一组dep电极(例如在形成正方形图案220的一组dep电极区域214处),区域/腔室202中的一个或多个微物体可以被捕获并在区域/腔室202内移动。图1a中的运动模块162可以控制这样的开关,并
且因此激活和去激活各个dep电极,以选择、捕获和移动区域/腔室202周围的特定微物体(未示出)。具有包括选择性可寻址和可激励电极的dep结构的微流体设备在本领域中是已知的,并且已经在例如美国专利6,294,063(becker等人)和6,942,776(medoro)中进行了描述,其全部内容通过引用并入本文。
583.作为又一实例,微流体设备200可具有电润湿(ew)配置,其可代替dep配置或可位于微流体设备200的与具有dep配置的部分分离的部分中。ew配置可以是光电电润湿配置或电介质上电润湿(ewod)配置,这两者在本领域中是已知的。在一些ew配置中,支撑结构104具有夹在介电层(未示出)和底部电极204之间的电极激活衬底206。介电层可包括疏水材料和/或可涂覆有疏水材料,如下所述。对于具有ew配置的微流体设备200,支撑结构104的内表面208是介电层或其疏水涂层的内表面。
584.介电层(未示出)可以包括一个或多个氧化物层,并且可以具有约50nm至约250nm(例如,约125nm至约175nm)的厚度。在某些实施方式中,介电层可包括氧化物层,诸如金属氧化物(例如,氧化铝或氧化铪)。在某些实施方式中,介电层可包括除金属氧化物之外的介电材料,诸如氧化硅或氮化物。无论确切的组成和厚度如何,介电层可具有约10k欧姆至约50k欧姆的阻抗。
585.在一些实施方式中,朝向区域/腔室202朝向内侧的介电层的表面涂覆有疏水材料。疏水材料可包括例如氟化碳分子。氟化碳分子的实例包括全氟聚合物,例如聚四氟乙烯(例如,或聚(2,3
‑
二氟甲基戊基
‑
全氟四氢呋喃)(例如,cytop
tm
)。构成疏水材料的分子可以共价结合到介电层的表面。例如,疏水性材料的分子可以通过诸如硅氧烷基团、膦酸基或硫醇基团的连接体与介电层的表面共价结合。因此,在一些实施方式中,疏水性材料可包括烷基封端的硅氧烷、烷基封端的膦酸或烷基封端的硫醇。烷基可以是长链烃(例如,具有至少10个碳的链,或至少16、18、20、22或更多个碳)。或者,可使用氟化(或全氟化)碳链代替烷基。因此,例如,疏水材料可包含氟代烷基封端的硅氧烷、氟代烷基封端的膦酸或氟代烷基封端的硫醇。在一些实施方式中,疏水涂层具有约10nm至约50nm的厚度。在其他实施方式中,疏水性涂层具有小于10nm(例如,小于5nm或约1.5至3.0nm)的厚度。
586.在一些实施方式中,具有电润湿配置的微流体设备200的盖110也涂覆有疏水材料(未示出)。疏水材料可以是用于涂覆支撑结构104的介电层的相同的疏水材料,并且疏水涂层可以具有与支撑结构104的介电层上的疏水涂层的厚度基本相同的厚度。此外,盖110可以包括以支撑结构104的方式夹在介电层和顶电极210之间的电极激活衬底206。电极激活衬底206和盖110的介电层可以具有与电极激活衬底206和支撑结构104的介电层相同的组成和/或尺寸。因此,微流体设备200可具有两个电润湿表面。
587.在一些实施方式中,电极激活衬底206可包含光电导材料,如上文所述。因此,在某些实施方式中,电极激活衬底206可包括氢化非晶硅层(a
‑
si:h)或由其组成。a
‑
si:h可包含例如约8%到40%的氢(计算以100
×
氢原子的数/氢和硅原子的总数计算)。a
‑
si:h层可以具有约500nm至约2.0微米的厚度。可替代地,如上所述,电极激活衬底206可以包括由光电晶体管开关控制的电极(例如,导电金属电极)。具有光电润湿配置的微流体设备在本领域中是已知的和/或可以用本领域已知的电极激活衬底构造。例如,美国专利第6,958,132号(chiou等人)公开了具有诸如a
‑
si:h的光电导材料的光电电润湿配置,其全部内容通过引用并入本文,而上面提到的美国专利公开号2014/0124370(short等人)公开了具有由光电
晶体管开关控制的电极的电极激活衬底。
588.微流体设备200因此可具有光电润湿配置,且光图案218可用于激活电极激活衬底206中的光电导ew区域或光电响应ew电极。电极激活衬底206的这样的激活ew区域或ew电极可以在支撑结构104的内表面208(即,覆盖介电层的内表面或其疏水涂层)处产生电润湿力。通过改变电极激活衬底206上发生的光图案218(或相对于光源216移动微流体设备200),接触支撑结构104的内表面208的液滴(例如,包含水性介质、溶液或溶剂)可以移动通过存在于区域/腔室202中的不混溶的流体(例如,油介质)。
589.在其他实施方式中,微流体设备200可以具有ewod配置,并且电极激活衬底206可包括选择性可寻址且可激励的电极,其不依赖于光来激活。因此,电极激活衬底206可以包括这种电润湿(ew)电极的图案。图案例如可以是以行和列布置的基本正方形ew电极的阵列,诸如图2b所示。可替代地,图案可以是形成六边形晶格的基本六边形ew电极的阵列。不管图案如何,ew电极可以通过电开关(例如,半导体衬底中的晶体管开关)选择性地被激活(或去激活)。通过选择性地激活和去激活电极激活衬底206中的ew电极,接触覆盖介电层的内表面208或其疏水涂层的液滴(未示出)可以在区域/腔室202内移动。图1a中的运动模块162可以控制这样的开关,从而激活和去激活单独的ew电极以选择和移动围绕区域/腔室202的特定液滴。具有选择性可寻址和可激励电极的ewod结构的微流体设备在本领域中是已知的,并且已在例如美国专利第8,685,344号(sundarsan等人)中进行了描述,其全部内容通过引用并入本文。
590.不管微流体设备200的配置如何,电源212可用于提供给微流体设备200的电路供电的电位(例如,ac电压电位)。电源212可以与图1中参考的电源192相同,或者是图1中参考的电源192的部件。电源212可以被配置为向顶部电极210和底部电极204提供ac电压和/或电流。对于ac电压,电源212可以提供足以产生足够强的净dep力(或电润湿力)的频率范围和平均或峰值功率(例如,电压或电流)范围,以捕获和移动区域/腔室202中的各个微物体(未示出),和/或如上所述改变区域/腔室202中的支撑结构104的内表面208(即,介电层和/或介电层上的疏水涂层)的润湿特性,同样如上所述。这样的频率范围和平均或峰值功率范围在本领域中是已知的。参见例如美国专利号6,958,132(chiou等人)、美国专利re44,711(wu等人)(最初公布为美国专利号7,612,355)和美国专利申请公开号us2014/0124370(short等人),us2015/0306598(khandros等人)和us2015/0306599(khandros等人)。
591.隔离坞。在图2a至图2c所示的微流体设备230内示出了通用隔离坞224、226和228的非限制性示例。每个隔离坞224、226和228可以包括限定隔离区域240的隔离结构232和将隔离区域240流体连接到通道122的连接区域236。连接区域236可包括至微流体通道122的近端开口234和至隔离区域240的远端开口238。连接区域236可以被配置为使得从通道122流入隔离坞224、226、228的流体介质(未示出)的流动的最大穿透深度不延伸到隔离区域240中。因此,由于连接区域236,设置在隔离坞224、226、228的隔离区域240中的微物体(未示出)或其他材料(未示出)因此可以与之隔离,并且基本上不受在流体通道122中的介质180的流动的影响。
592.图2a至图2c的隔离坞224、226和228各自具有直接通向微流体通道122的单个开口。隔离坞的开口从微流体通道122侧向地打开。电极激活衬底206覆盖微流体通道122和隔离坞224、226和228两者。在隔离坞的外壳内的电极激活衬底206的上表面形成隔离坞的底
板,被布置在通道122(如果通道不存在的话则为流动区域)内的电极激活衬底206的上表面的相同水平或基本上相同的水平,形成微流体设备的流动通道(或分别为流动区域)的底板。电极激活衬底206可以是无特征的或者可以具有从其最高高度到其最低凹陷变化小于约3微米、2.5微米、2微米、1.5微米、1微米、0.9微米、0.5微米、0.4微米、0.2微米、0.1微米或更小的不规则或图案化表面。跨越微流体通道122(或流动区域)和隔离坞的衬底的上表面中的高度的变化可以小于所述隔离坞或所述微流体设备的壁的高度的约3%、2%、1%、0.9%、0.8%、0.5%、0.3%或0.1%。虽然详细描述微流体设备200,但这也适用于本文所述的微流体设备100、200、230、250、280、290、300中的任一者。
593.因此,微流体通道122可以是扫过区域的示例,并且隔离坞224、226、228的隔离区域240可以是未扫过区域的示例。如上所述,微流体通道122和隔离坞224、226、228可以被配置为容纳一种或多种流体介质180。在图2a至图2b所示的示例中,端口222连接到微流体通道122并且允许流体介质180被引入到微流体设备230中或从微流体设备230移出。在引入流体介质180之前,微流体设备可以用诸如二氧化碳气体的气体打底。一旦微流体设备230包含流体介质180,微流体通道122中的流体介质180的流体242可以被选择性地产生和停止。例如,如图所示,端口222可以设置在微流体通道122的不同位置(例如相对端),并且可以产生从用作入口的一个端口222通向用作出口的另一个端口222介质的流242。
594.图2c示出了根据本公开的隔离坞224的示例的详细视图。还示出了微物体246的示例。
595.如已知的,流体介质180在微流体通道122中经过隔离坞224的近端开口234的流242可导致介质180的次级流244进入和/或流出隔离坞224。为了将隔离坞224的隔离区域240中的微物体246与次级流244隔离,隔离坞224的连接区域236的长度l
con
(即,从近端开口234到远端开口238)应当大于次级流244到连接区域236中的穿透深度d
p
。次级流244的穿透深度d
p
取决于在微流体通道122中流动的流体介质180的速度、和与微流体通道122以及连接区域236通往微流体通道122的近端开口234的配置有关的各种参数。对于给定的微流体设备,微流体通道122和开口234的配置将是固定的,而流体介质180在微流体通道122中的流动速率242将是可变的。因此,对于每个隔离坞224,可以识别通道122中的流体介质180的流242的最大速度v
max
,其确保次级流244的穿透深度d
p
不超过连接区域236的长度l
con
。只要微流体通道122中的流体介质180的流242的速率不超过最大速度v
max
,所得到的次级流244就可以被限制到微流体通道122和连接区域236并且保持在隔离区域240之外。微流体通道122中的介质180的流242因此不会将微物体246从隔离区域240中抽出。相反,不管流体介质180在微流体通道122中的流242如何,位于隔离区域240中的微物体246将保持在隔离区域240中。
596.此外,只要微流体通道122中的介质180的流体242的速率不超过v
max
,流体介质180在微流体通道122中的流242将不会移动混杂颗粒(例如,微粒和/或纳米颗粒)从微流体通道122进入隔离坞224的隔离区域240中。具有连接区域236的长度l
con
大于次级流244的最大穿透深度d
p
能够防止一个隔离坞224与来自微流体通道122或另一隔离坞的混杂颗粒的污染(例如,图2d中的隔离坞226、228)。
597.因为微流体通道122和隔离坞224、226、228的连接区域236可受到微流体通道122中的介质180的流242的影响,所以微流体通道122和连接区域236可被视为微流体设备230
的扫过(或流动)区域。另一方面,隔离坞224、226、228的隔离区域240可以被认为是未扫过(或非流动)区域。例如,微流体通道122中的第一流体介质180中的组分(未示出)可以基本上仅通过第一介质180的组分从微流体通道122通过连接区域236扩散到隔离区域240中的第二流体介质248中来与隔离区域240中的第二流体介质248混合。类似地,隔离区域240中的第二介质248的组分(未示出)可以基本上仅通过第二介质248的组分从隔离区域240通过连接区域236扩散到微流体通道122中的第一介质180中来与微流体通道122中的第一介质180混合。在一些实施方式中,隔离坞的隔离区域与流动区域之间通过扩散进行的流体介质交换程度为大于流体交换的约90%、91%、92%、93%、94%、95%、96%、97%、98%或大于约99%。第一介质180可以是与第二介质248相同的介质或不同的介质。此外,第一介质180和第二介质248可以开始相同,然后变得不同(例如,通过由隔离区域240中的一个或多个细胞或通过改变流过微流体通道122的介质180来调节第二介质248的通过条件)。
598.如上所述,由流体介质180在微流体通道122中的流242引起的次级流244的最大穿透深度d
p
可以取决于多个参数。这样的参数的示例包括:微流体通道122的形状(例如,微流体通道可以将介质引导到连接区域236中,将介质从连接区域236转移走,或者在基本上垂直于连接区域236的近端开口234的方向上引导介质到微流体通道122);在近端开口234处的微流体通道122的宽度w
ch
(或横截面积);以及在近端开口234处的连接区域236的宽度w
con
(或横截面积);流体介质180的流242在微流体通道122中的速度v;第一介质180和/或第二介质248的粘度等。
599.在一些实施方式中,微流体通道122和隔离坞224、226、228的尺寸可以相对于通道122中的流体介质180的流242的向量来取向:通道宽度w
ch
(或微流体通道122的横截面积)可以基本上垂直于介质180的流242;在开口234处的连接区域236的宽度w
con
(或横截面积)可以基本上平行于微流体通道122中的介质180的流242;和/或连接区域的长度l
con
可以基本上垂直于通道122中的介质180的流242。前述仅是示例,微流体通道122和隔离坞224、226、228的相对位置可以相对于彼此为其他取向。
600.如图2c所示,连接区域236的宽度w
con
可以从近端开口234到远端开口238是均匀的。因此,远端开口238处的连接区域236的宽度w
con
可以是在本文针对近端开口234处的连接区域236的宽度w
con
所标识的任何值。可替代地,在远端开口238处的连接区域236的宽度w
con
可以大于在近端开口234处的连接区域236的宽度w
con
。
601.如图2c所示,在远端开口238处的隔离区域240的宽度可以与近端开口234处的连接区域236的宽度w
con
基本上相同。因此,在远端开口238处的隔离区域240的宽度可以是本文中针对近端开口234处的连接区域236的宽度w
con
所标识的任何值。可替代地,在远端开口238处的隔离区域240的宽度可以大于或小于近端开口234处的连接区域236的宽度w
con
。此外,远端开口238可以小于近端开口234,并且连接区域236的宽度w
con
可以在近端开口234和远端开口238之间变窄。例如,连接区域236可以使用各种不同的几何形状(例如,对连接区域进行倒角、斜切)而在近端开口和远端开口之间变窄。此外,连接区域236的任何部分或子部分可以变窄(例如,连接区域的与近端开口234相邻的部分)。
602.图2d至图2f描绘了微流体设备250的另一示例性实施方式,微流体设备250包含微流体管路262和流动通道264,其是图1a的对应的微流体设备100、线路132和通道134的变型。微流体设备250还具有多个隔离坞266,其是上述隔离坞124、126、128、130、224、226或
228的另外的变型。特别地,应当理解,图2d至图2f中示出的设备250的隔离坞266可以代替设备100、200、230、280、290、300中的上述隔离坞124、126、128、130、224、226或228中的任一个。同样,微流体设备250是微流体设备100的另一变型,并且还可具有与上述微流体设备100、200、230、280、290、300相同或不同的dep配置以及本文所述的任何其他微流体系统部件。
603.图2d至图2f的微流体设备250包括支撑结构(在图2d至图2f中不可见,但可与图1a中描绘的设备100的支撑结构104相同或大体上类似),微流体管路结构256和盖(在图2d
‑
2f中不可见,但是可以与图1a中描绘的设备100的盖122相同或大体类似)。微流体管路结构256包括框架252和微流体管路材料260,其可以与图1a中所示的设备100的框架114和微流体管路材料116相同或大致类似。如图2d所示,由微流体管路材料260限定的微流体管路262可以包括多个通道264(示出了两个,但可以更多),多个隔离坞266流体连接到多个通道264。
604.每个隔离坞266可以包括隔离结构272、隔离结构272内的隔离区域270和连接区域268。从微流体通道264处的近端开口274至隔离结构272处的远端开口276,连接区域268将微流体通道264流体连接至隔离区域270。通常,根据以上对图2b和图2c的描述,通道264中的第一流体介质254的流278可以创建从微流体通道264流入和/或流出隔离坞266的对应的连接区域268的第一介质254的次级流282。
605.如图2e所示,每个隔离坞266的连接区域268通常包括在到通道264的近端开口274与到隔离结构272的远端开口276之间延伸的区域。连接区域268的长度l
con
可以大于次级流282的最大穿透深度d
p
,在这种情况下,次级流282将延伸到连接区域268中而不被重新导向隔离区域270(如图2d所示)。可替换地,如图2f所示,连接区域268可以具有小于最大穿透深度d
p
的长度l
con
,在这种情况下,次级流282将延伸穿过连接区域268并且重新导向隔离区域270。在后一种情况下,连接区域268的长度l
c1
和l
c2
的总和大于最大穿透深度d
p
,使得次级流282将不延伸到隔离区域270中。无论连接区域268的长度l
con
是否大于穿透深度d
p
,或者连接区域268的长度l
c1
和l
c2
的总和是否大于穿透深度d
p
,通道264中不超过最大速度v
max
的第一介质254的流278将产生具有穿透深度d
p
的次级流,并且隔离坞266的隔离区域270中的微物体(未示出但可以与图2c中示出的微物体246相同或大致类似)将不会被通道264中的第一介质254的流278从隔离区域270中抽出。通道264中的流体278也不将混杂材料(未示出)从通道264抽出到隔离坞266的隔离区域270中。因此,扩散是唯一的机制,通过该机制,微流体通道264中的第一介质254中的组分可以从微流体通道264移动到隔离坞266的隔离区域270中的第二介质258中。同样地,扩散是隔离坞266的隔离区域270中的第二介质258中的组分可以从隔离区域270移动到通道264中的第一介质254的唯一机制。第一介质254可以是与第二介质258相同的介质,或者第一介质254可以是与第二介质258不同的介质。或者,第一介质254和第二介质258可以在开始时相同,然后例如通过由隔离区域270中的一个或多个细胞调节第二介质或通过改变流过微流体通道264的介质而变得不同。
606.如图2e所示,微流体通道264中的微流体通道264的宽度w
ch
(即,横向于流体介质流过微流体通道的方向,如图2d中的箭头278所指示的)可以基本上垂直于近端开口274的宽度w
con1
并且基本上平行于远端开口276的宽度w
con2
。然而,近端开口274的宽度w
con1
和远端开口276的宽度w
con2
不需要基本上彼此垂直。例如,近端开口274的宽度w
con1
所取向的轴线(未
示出)与远端开口276的宽度w
con2
所取向的另一个轴线之间的角度可以不是垂直因而不是90度。可替代地取向的角度的示例包括以下角度:约30度至约90度、约45度至约90度、约60度至约90度等。
607.在隔离坞(例如124、126、128、130、224、226、228或266)的各种实施方式中,隔离区域(例如240或270)被配置为包含多个微物体。在其他实施方式中,隔离区域可以被配置为仅包含一个、两个、三个、四个、五个或类似的相对少量的微物体。因此,隔离区的体积可以是例如至少1
×
106、2
×
106、4
×
106、6
×
106立方微米或更多。
608.在隔离坞的各种实施方式中,近端开口(例如234)处的微流体通道(例如122)的宽度w
ch
可以为:约50
‑
1000微米、50
‑
500微米、50
‑
400微米、50
‑
300微米、50
‑
250微米、50
‑
200微米、50
‑
150微米、50
‑
100微米、70
‑
500微米、70
‑
400微米、70
‑
300微米、70
‑
250微米、70
‑
200微米、70
‑
150微米、90
‑
400微米、90
‑
300微米、90
‑
250微米、90
‑
200微米、90
‑
150微米、100
‑
300微米、100
‑
250微米、100
‑
200微米、100
‑
150微米或100
‑
120微米。在一些其他实施方式中,近端开口(例如,234)处的微流体通道(例如,122)的宽度w
ch
可以为约200
‑
800微米、200
‑
700微米或200
‑
600微米。前述内容仅是示例,微流体通道122的宽度w
ch
可以由上面列出的任何端点定义的宽度。此外,微流体通道122的w
ch
可以被选择为在除隔离坞的近端开口之外的微流体通道的区域中的这些宽度中的任一个。
609.在一些实施方式中,隔离坞的高度为约30至约200微米或约50至约150微米。在一些实施方式中,隔离坞的横截面积为约1
×
104‑3×
106平方微米、2
×
104‑2×
106平方微米、4
×
104‑1×
106平方微米、2
×
104‑5×
105平方微米、2
×
104‑1×
105平方微米或大约2
×
105‑2×
106平方微米。
610.在隔离坞的各种实施方式中,近端开口(例如,234)处的微流体通道(例如,122)的高度h
ch
可以是以下高度中的任何高度内的高度:20
‑
100微米、20
‑
90微米、20
‑
80微米、20
‑
70微米、20
‑
60微米、20
‑
50微米、30
‑
100微米、30
‑
90微米,30
‑
80微米、30
‑
70微米、30
‑
60微米、30
‑
50微米、40
‑
100微米、40
‑
90微米、40
‑
80微米、40
‑
70微米、40
‑
60微米或40
‑
50微米。前述仅是示例,并且微流体通道(例如,122)的高度h
ch
可以是以上列出的任何端点内的高度。微流体通道122的高度h
ch
可以被选择为在微流体通道的除了隔离坞的近端开口之外的区域中的这些高度中的任一个。
611.在隔离坞的各种实施方式中,在近端开口(例如,234)处的微流体通道(例如,122)的横截面积可以是约500
‑
50,000平方微米、500
‑
40,000平方微米、500
‑
30,000平方微米、500
‑
25,000平方微米、500
‑
20,000平方微米、500
‑
15,000平方微米、500
‑
10,000平方微米、500
‑
7,500平方微米、500
‑
5,000平方微米、1,000
‑
25,000平方微米、1,000
‑
20,000平方微米、1,000
‑
15,000平方微米、1,000
‑
10,000平方微米、1,000
‑
7,500平方微米、1,000
‑
5,000平方微米、2,000
‑
20,000平方微米、2,000
‑
15,000平方微米、2,000
‑
10,000平方微米、2,000
‑
7,500平方微米、2,000
‑
6,000平方微米、3,000
‑
20,000平方微米、3,000
‑
15,000平方微米、3,000
‑
10,000平方微米、3,000
‑
7,500平方微米、或3,000
‑
6,000平方微米。前述仅是示例,并且在近端开口(例如,234)处的微流体通道(例如,122)的横截面积可以是上面列出的任何端点内的任何区域。
612.在隔离坞的各种实施方式中,连接区域(例如,236)的长度l
con
可以是大约1
‑
600微米、5
‑
550微米、10
‑
500微米、15
‑
400微米、20
‑
300微米,20
‑
500微米、40
‑
400微米、60
‑
300微
米、80
‑
200微米或约100
‑
150微米。前述内容仅是示例,并且连接区域(例如,236)的长度l
con
可以在以上列出的任何端点内的任何长度中。
613.在隔离坞的各种实施方式中,近端开口(例如,234)处的连接区域(例如,236)的宽度w
con
可为约20
‑
500微米、20
‑
400微米、20
‑
300微米、20
‑
200微米、20
‑
150微米、20
‑
100微米、20
‑
80微米、20
‑
60微米、30
‑
400微米、30
‑
300微米、30
‑
200微米、30
‑
150微米、30
‑
100微米、30
‑
80微米、30
‑
60微米、40
‑
300微米、40
‑
200微米、40
‑
150微米、40
‑
100微米、40
‑
80微米、40
‑
60微米、50
‑
250微米、50
‑
200微米、50
‑
150微米、50
‑
100微米、50
‑
80微米、60
‑
200微米、60
‑
150微米、60
‑
100微米、60
‑
80微米、70
‑
150微米、70
‑
100微米或80
‑
100微米。前述仅为示例,并且近端开口(例如,234)处的连接区域(例如,236)的宽度w
con
可不同于前述示例(例如,上述任何端点内的任何值)。
614.在隔离坞的各种实施方式中,近端开口(例如,234)处的连接区域(例如,236)的宽度w
con
可至少与隔离坞预期用于的微物体(例如,生物细胞,其可为t细胞、b细胞或卵(ovum)或胚胎)的最大尺寸一样大。前述仅是示例,并且近端开口(例如,234)处的连接区域(例如,236)的宽度w
con
可不同于前述示例(例如,以上列出的任何端点内的宽度)。
615.在隔离坞的各种实施方式中,连接区域的近端开口的宽度w
pr
可以至少与隔离坞预期用于的微物体(例如,生物微物体例如细胞)的最大尺寸一样大。例如,宽度w
pr
可为约50微米、约60微米、约100微米、约200微米、约300微米或可为约50
‑
300微米、约50
‑
200微米、约50
‑
100微米、约75
‑
150微米、约75
‑
100微米或约200
‑
300微米。
616.在隔离坞的各种实施方式中,连接区域(例如,236)的长度l
con
与近端开口234处的连接区域(例如,236)的宽度w
con
的比率可以大于或等于以下比率中的任一个:0.5、1.0、1.5、2.0、2.5、3.0、3.5、4.0、4.5、5.0、6.0、7.0、8.0、9.0、10.0或更多。前述仅是示例,并且连接区域236的长度l
con
与近端开口234处的连接区域236的宽度w
con
的比率可以不同于前述示例。
617.在微流体设备100、200、23、250、280、290、300的各种实施方式中,v
max
可以设定为约0.2、0.5、0.7、1.0、1.3、1.5、2.0、2.5、3.0、3.5、4.0、4.5、5.0、5.5、6.0、6.7、7.0、7.5、8.0、8.5、9.0、10、11、12、13、14或15微升/秒。
618.在具有隔离坞的微流体设备的各种实施方式中,隔离坞的隔离区域(例如,240)的体积可以是例如至少5
×
105、8
×
105、1
×
106、2
×
106、4
×
106、6
×
106、8
×
106、1
×
107、5
×
107、1
×
108、5
×
108、8
×
108立方微米或更大。在具有隔离坞的微流体设备的各种实施方式中,隔离坞的体积可以是约5
×
105、6
×
105、8
×
105、1
×
106、2
×
106、4
×
106、8
×
106、1
×
107、3
×
107、5
×
107或约8
×
107立方微米或更大。在一些其他实施方式中,隔离坞的体积可以是约1纳升到约50纳升、2纳升到约25纳升、2纳升到约20纳升、约2纳升到约15纳升、或约2纳升到约10纳升。
619.在各种实施方式中,微流体设备具有如本文所讨论的任何实施方式中配置的隔离坞,其中微流体设备具有约5至约10个隔离坞、约10
‑
约50个隔离坞、约100
‑
约500个隔离坞、约200至约1000个隔离坞、约500至约1500个隔离坞、约1000至约2000个隔离坞、约1000至约3500个隔离坞、约3000至约7000个隔离坞、约5000
‑
约10,000个隔离坞、约9,000
‑
约15,000个隔离坞、或约12,000
‑
约20,000个隔离坞。隔离坞不需要全部是相同的尺寸,并且可以包括各种配置(例如,隔离坞内的不同的宽度、不同特征)。
620.图2g示出了根据一个实施方式的微流体设备280。图2g所示的微流体设备280是微流体设备100的程式化图。特别地,微流体设备280及其组成管路元件(例如,通道122和隔离坞128)将具有本文所讨论的尺寸。图2g中所示的微流体管路120具有两个端口107、四个不同的通道122和四个不同的流动路径106。微流体设备280还包括向每个通道122开口的多个隔离坞。在图2g所示的微流体设备中,隔离坞具有类似于在图2c中示出的坞的几何形状,并且因此具有连接区域和隔离区域两者。因此,微流体管路120包括扫过区域(例如,通道122和连接区域236的在次级流244的最大穿透深度d
p
内的部分)和非扫过区域(例如,隔离区域240和连接区域236的不在次级流244的最大穿透深度d
p
内的部分)。
621.图3a至3b示出了根据本公开的可用于操作和观察微流体设备(例如,100、200、230、250、280、290、300)的系统150的各种实施方式。如图3a中所示,系统150可包括被配置为保持微流体设备100(未示出)或本文所述的任何其他微流体设备的结构(“巢”)300。巢300可包含能够与微流体设备320(例如,光学致动的电动设备100)接合并提供从电源192到微流体设备320的电连接的插口302。巢300还可以包括集成电信号生成子系统304。电信号生成子系统304可以被配置为向插口302提供偏置电压,使得当插口302被保持时,横跨微流体设备320中的一对电极施加偏置电压。因此,电信号生成子系统304可以是电源192的一部分。将偏置电压施加到微流体设备320的能力并不意味着在微流体设备320由插口302保持时将始终施加偏置电压。相反,在大多数情况下,偏置电压将被间歇地施加,例如,仅根据需要来促进微流体设备320中的电动力学力,例如介电泳或电润湿的产生。
622.如图3a所示,巢300可以包括印刷电路板组件(pcba)322。电信号生成子系统304可以被安装在pcba 322上并且被电集成到pcba 322中。示例性支撑件还包括安装在pcba 322上的插口302。
623.通常,电信号生成子系统304包括波形发生器(未示出)。电信号生成子系统304还可以包括示波器(未示出)和/或波形放大电路(未示出),其被配置为放大从波形发生器接收的波形。示波器(如果存在)可被配置为测量供应到由插口302保持的微流体设备320的波形。在某些实施方式中,示波器测量在微流体设备320近端(和远离波形发生器)的位置处的波形,从而确保测量实际上施加到设备的波形时的更高精度。从示波器测量获得的数据可以例如作为反馈被提供给波形发生器,并且波形发生器可以被配置为基于这样的反馈来调整其输出。合适的组合波形发生器和示波器的示例是red pitaya
tm
。
624.在某些实施方式中,巢300还包括控制器308,例如用于感测和/或控制电信号生成子系统304的微处理器。合适的微处理器的示例包括arduino
tm
微处理器,例如arduino nano
tm
微处理器。控制器308可以用于执行功能和分析,或者可以与外部主控制器154(在图1a中示出)通信以执行功能和分析。在图3a所示的实施方式中,控制器308通过接口310(例如,插头或连接器)与主控制器154通信。
625.在一些实施方式中,巢300可以包括电信号生成子系统304,所述电信号生成子系统304包括red pitaya
tm
波形发生器/示波器单元(“red pitaya单元”)和放大由red pitaya单元产生的波形并将放大的电压传递到微流体设备100的波形放大电路。在一些实施方式中,red pitaya单元被配置为测量微流体设备320处的放大后的电压,且接着根据需要调整其自身的输出电压,使得微流体设备320处的所测量电压为期望值。在一些实施方式中,波形放大电路可以具有由安装在pcba322上的一对dc
‑
dc转换器生成的+6.5v到
‑
6.5v的电源,
导致微流体设备100处高达13vpp的信号。
626.如图3a所示,支撑结构300还可以包括热控制子系统306。热控制子系统306可被配置为调节由支撑结构300(例如巢)保持的微流体设备320的温度。例如,热控制子系统306可以包括peltier热电设备(未示出)和冷却单元(未示出)。peltier热电设备可以具有被配置为与微流体设备320的至少一个表面接合的第一表面。冷却单元可以是例如冷却块(未示出),例如液体冷却的铝块。peltier热电设备的第二表面(例如,与第一表面对置的表面)可以被配置为与这样的冷却块的表面接合。冷却块可以连接到流体路径314,流体路径314被配置为使冷却流体循环通过冷却块。在图3a所示的实施方式中,支撑结构300包括入口316和出口318,以接收来自外部贮存器(未示出)的冷却流体,将冷却流体引入流体路径314并通过冷却块,然后将冷却的流体返回到外部贮存器。在一些实施方式中,peltier热电设备、冷却单元和/或流体路径314可以安装在支撑结构300的壳体312上。在一些实施方式中,热控制子系统306被配置为调节peltier热电设备的温度,以便实现微流体设备320的目标温度。例如,peltier热电设备的温度调节可以通过诸如pololu
tm
热电电源(pololu robotics and electronics corp.)的热电电源来实现。热控制子系统306可以包括反馈电路,诸如由模拟电路提供的温度值。或者,反馈电路可由数字电路提供。
627.在一些实施方式中,巢300可以包括具有反馈电路的热控制子系统306,该反馈电路是模拟分压器电路(未示出),该模拟分压器电路包括电阻器(例如,具有1kω+/
‑
0.1%的电阻,+/
‑
0.02ppm/c0的温度系数)和ntc热敏电阻(例如,标称电阻为1kω+/
‑
0.01%)。在一些情况下,热控制子系统306测量来自反馈电路的电压,并且然后使用所计算的温度值作为到机载pid控制环路(loop)算法的输入。pid控制环路算法的输出可以驱动例如pololu
tm
电动机驱动器(未示出)上的方向和脉冲宽度调制的信号引脚,以使热电电源致动,从而控制peltier热电设备。
628.巢300可以包括串行端口324,其允许控制器308的微处理器经由接口310(未示出)与外部主控制器154进行通信。另外,控制器308的微处理器可以与电信号生成子系统304和热控制子系统306进行通信(例如经由plink工具(未示出))。因此,经由控制器308、接口310和串行端口324的组合,电信号生成子系统304和热控制子系统306可以与外部主控制器154进行通信。以这种方式,除了其他方面之外,主控制器154还可以通过执行用于输出电压调节的换算(scaling)计算来辅助电信号生成子系统304。通过耦接到外部主控制器154的显示设备170所提供的图形用户界面(gui)(未示出)可以被配置为绘制分别从热控制子系统306和电信号生成子系统304获得的温度和波形数据。或者或此外,gui可以允许更新控制器308、热控制子系统306和电信号生成子系统304。
629.如上所述,系统150可以包括成像设备194。在一些实施方式中,成像设备194包括光调制子系统330(参见图3b)。光调制子系统330可包含数字镜设备(dmd)或微光闸阵列系统(msa),其任一者可被配置为从光源332接收光,且将所接收光的子集发射到显微镜350的光具组中。或者,光调制子系统330可包含产生其自身光(且因此无需光源332而分配)的设备,例如有机发光二极管显示器(oled)、硅基液晶(lcos)设备、硅设备上的铁电液晶(flcos)或透射液晶显示器(lcd)。光调制子系统330可以是例如投影仪。因此,光调制子系统330能够发射结构光和非结构光两者。在某些实施方式中,系统150的成像模块164和/或运动模块162可控制光调制子系统330。
630.在某些实施方式中,成像设备194还包括显微镜350。在这样的实施方式中,巢300和光调制子系统330可以被单独地配置为安装在显微镜350上。显微镜350可以是例如标准研究级别的光显微镜或荧光显微镜。因此,巢300可以被配置为安装在显微镜350的平台344上,和/或光调制子系统330可以被配置为安装在显微镜350的端口上。在其他实施方式中,本文描述的巢300和光调制子系统330可以是显微镜350的集成组件。
631.在某些实施方式中,显微镜350还可以包括一个或多个检测器348。在一些实施方式中,检测器348由成像模块164控制。检测器348可包含目镜、电荷耦合设备(ccd)、相机(例如,数码相机)或其任何组合。如果存在至少两个检测器348,则一个检测器可以是例如快速帧速率相机,而另一个检测器可以是高灵敏度相机。此外,显微镜350可以包括光具组,该光具组被配置为从微流体设备320接收反射和/或发射的光,并且将反射和/或发射的光的至少一部分聚焦在一个或多个检测器348上。显微镜的光具组(optical train)还可以包括用于不同检测器的不同的镜筒透镜(tube lenses)(未示出),使得每个检测器上的最终放大率可以不同。
632.在某些实施方式中,成像设备194被配置为使用至少两个光源。例如,第一光源332可以用于产生结构光(例如,经由光调制子系统330),并且第二光源334可以用于提供非结构光。第一光源332可以产生用于光学致动电动力学和/或荧光激发的结构光,并且第二光源334可以用于提供明场照明。在这些实施方式中,运动模块164可以用于控制第一光源332,并且成像模块164可以用于控制第二光源334。显微镜350的光具组可以被配置为(1)从光调制子系统330接收结构光,并且当设备被巢300保持时,将结构光聚焦在微流体设备(诸如光学致动的电动设备)中的至少第一区域上,以及(2)接收来自微流体设备的反射和/或发射的光并且将这样的反射和/或发射的光的至少一部分聚焦到检测器348上。光具组还可以被配置为从第二光源接收非结构光,并且当设备由巢300保持时将非结构光聚焦在微流体设备的至少第二区域上。在某些实施方式中,微流体设备的第一区域和第二区域可以是重叠区域。例如第一区域可以是第二区域的子集。在其他实施方式中,第二光源334可另外或替代地包含激光器,所述激光器可具有任何合适波长的光。图3b中所示的光学系统的表示仅是示意性表示,并且光学系统可以包括附加滤波器、陷波滤波器和透镜等。当第二光源334包括用于明场和/或荧光激发的一个或多个光源以及激光照明时,光源的物理布置可以与图3b中所示的不同,并且可以在光学系统内的任何合适的物理位置处引入激光照明。光源334和光源332/光调制子系统330的示意性位置也可以互换。
633.在图3b中,第一光源332被示为将光提供给光调制子系统330,其将结构光提供给系统355(未示出)的显微镜350的光具组。第二光源334被示为经由分束器336将非结构光提供给光具组。来自光调制子系统330的结构光和来自第二光源334的非结构光一起从分束器336通过光具组行进到达第二分束器(或二向色滤波器338,取决于光调制子系统330提供的光),在此光通过物镜336向下反射到样本平面342。然后来自样本平面342的被反射和/或发射的光通过物镜340、通过分束器和/或二向色滤波器338返回至二向色滤波器346。到达二向色滤波器346的仅仅一部分光穿过并到达检测器348。
634.在一些实施方式中,第二光源334发射蓝光。利用适当的二向色滤波器346,从样本平面342反射的蓝光能够穿过二向色滤波器346并到达检测器348。相比之下,来自光调制子系统330的结构光从样本平面342反射,但不穿过二向色滤波器346。在该示例中,二向色滤
波器346滤除波长大于495nm的可见光。如果从光调制子系统发射的光不包括短于495nm的任何波长,则仅完成来自光调制子系统330的光的滤波(如图所示)。实际上,如果来自光调制子系统330的光包括短于495nm的波长(例如,蓝光波长),则来自光调制子系统的一些光将穿过滤波器346到达检测器348。在这样的实施方式中,滤波器346用于改变从第一光源332和第二光源334到达检测器348的光量之间的平衡。如果第一光源332明显强于第二光源334,则这会是有益的。在其他实施方式中,第二光源334可以发射红光,并且二向色滤波器346可以滤除除了红光之外的可见光(例如,波长比650nm短的可见光)。
635.涂层溶液和涂层剂。不希望受理论的限制,当微流体设备的至少一个或多个内表面已经被调节或涂覆以展现有机和/或亲水分子层(其提供微流体设备和保持在其中的生物微物体之间的主要界面)时,可以促进微流体设备(例如,dep配置和/或ew配置的微流体设备)内的生物微物体(例如,生物细胞)的维持(即,生物微物体在微流体设备内表现出增加的活力,更大的扩增和/或更大的移植性)。在一些实施方式中,微流体设备的一个或多个内表面(例如,dep配置的微流体设备的电极激活衬底的内表面、微流体设备的盖、和/或管路材料的表面)可以用涂层溶液和/或涂层剂处理或修饰,以产生所需的有机和/或亲水分子层。
636.涂层可在引入生物微物体之前或之后施加,或可与生物微物体同时引入。在一些实施方式中,生物微物体可在包括一种或多种涂层剂的流体介质中输入微流体设备中。在其他实施方式中,微流体设备的内表面(例如,dep配置的微流体设备)在将生物微物体引入微流体设备之前,用包含涂层剂的涂层溶液处理或“打底”。
637.在一些实施方式中,微流体设备的至少一个表面包括涂层材料,该涂层材料提供适合于生物微物体的保持和/或扩增的有机和/或亲水性分子层(例如,提供如下所述的调节后的表面)。在一些实施方式中,微流体设备的基本上所有内表面都包括涂层材料。涂覆的内表面可以包括流动区域(例如,通道)、腔室或隔离坞或其组合的表面。在一些实施方式中,多个隔离坞中的每一个具有涂覆有涂层材料的至少一个内表面。在其他实施方式中,多个流动区域或通道中的每一个具有涂覆有涂层材料的至少一个内表面。在一些实施方式中,多个隔离坞中的每一个和多个通道中的每一个的至少一个内表面涂覆有涂层材料。
638.涂层剂/溶液。可以使用任何方便的涂层剂/涂层溶液,包括但不限于:血清或血清因子、牛血清白蛋白(bsa)、聚合物、洗涤剂、酶及其任何组合。
639.基于聚合物的涂层材料。所述至少一个内表面可以包括包含聚合物的涂层材料。聚合物可以与至少一个表面共价或非共价结合(或可以非特异性地粘附)。聚合物可以具有多种结构基序,例如在嵌段聚合物(和共聚物)、星形聚合物(星形共聚物)和接枝或梳状聚合物(接枝共聚物)中发现的,所有这些都可以适用于本文公开的方法。
640.聚合物可以包括包含亚烷基醚部分的聚合物。多种含亚烷基醚的聚合物可适用于本文所述的微流体设备中。一类非限制性示例性的含亚烷基醚的聚合物是两性非离子嵌段共聚物,其包括聚环氧乙烷(peo)和聚环氧丙烷(ppo)亚单元的嵌段,其在聚合物链内具有不同的比率和位置。聚合物(basf)是这种类型的嵌段共聚物,并且在本领域中已知适用于与活细胞接触时使用。聚合物的平均分子量m
w
可以为约2000da至约20kda。在一些实施方式中,peo
‑
ppo嵌段共聚物可具有大于约10(例如12
‑
18)的亲水亲油平衡(hlb)。可用于产生涂覆表面的具体的聚合物包括l44、l64、p85和f127(包括
f127nf)。另一类含亚烷基醚的聚合物是聚乙二醇(peg m
w
<100,000da)或任选地聚环氧乙烷(peo,m
w
>100,000)。在一些实施方式中,peg可具有约1000da、5000da、10,000da或20,000da的m
w
。
641.在其他实施方式中,涂层材料可包括含有羧酸部分的聚合物。羧酸子单元可以是含有烷基、烯基或芳香族部分的亚单元。一个非限制性实例是聚乳酸(pla)。在其他实施方式中,涂层材料可以包括含有磷酸酯部分的聚合物,所述聚合物在聚合物主链的末端或者来自聚合物主链的侧链。在其他实施方式中,涂层材料可以包括含有磺酸部分的聚合物。磺酸子单元可以是含有烷基、烯基或芳基部分的亚单元。一个非限制性实例为聚苯乙烯磺酸(pssa)或聚茴香脑磺酸。在进一步的实施方式中,涂层材料可以包括包含胺部分的聚合物。聚氨基聚合物可包括天然聚胺聚合物或合成聚胺聚合物。天然多胺的实例包括精胺、亚精胺和腐胺。
642.在其他实施方式中,涂层材料可以包括含有糖部分的聚合物。在非限制性实例中,诸如黄原胶或葡聚糖的多糖可适合于形成可减少或防止微流体设备中的细胞粘附的材料。例如,具有约3kda的尺寸的葡聚糖聚合物可用于为微流体设备内的表面提供涂层材料。
643.在其他实施方式中,涂层材料可以包括含有核苷酸部分的聚合物,即核酸,其可以具有核糖核苷酸部分或脱氧核糖核苷酸部分,从而提供聚电解质表面。核酸可仅含有天然核苷酸部分或可含有非天然核苷酸部分,其包含核碱基、核糖或磷酸酯部分类似物,例如7
‑
脱氮杂腺嘌呤、戊糖、甲基膦酸或硫代磷酸酯部分,但不限于此。
644.在其他实施方式中,涂层材料可包括含有氨基酸部分的聚合物。含有氨基酸部分的聚合物可包括含有天然氨基酸的聚合物或含有非天然氨基酸的聚合物,其中任一者可包含肽、多肽或蛋白质。在一个非限制性实例中,蛋白质可以是牛血清白蛋白(bsa)和/或血清(或多个不同血清的组合),其包含白蛋白和/或一种或多种其他类似蛋白质作为涂层剂。血清可以来自任何方便的来源,包括但不限于胎牛血清、绵羊血清、山羊血清、马血清等。在某些实施方式中,涂层溶液中的bsa以约1mg/ml至约100mg/ml的浓度存在,包括5mg/ml、10mg/ml、20mg/ml、30mg/ml、40mg/ml、50mg/ml、60mg/ml、70mg/ml、80mg/ml、90mg/ml,或更多或两者之间的任何值。在某些实施方式中,涂层溶液中的血清可以约20%(v/v)至约50%v/v的浓度存在,包括25%、30%、35%、40%、45%或更多或介于两者之间的任何值。在一些实施方式中,bsa可作为涂层溶液以5mg/ml存在于涂层溶液中,而在其他实施方式中,bsa可作为涂层剂以70mg/ml存在于涂层溶液中。在某些实施方式中,血清作为涂层剂以30%存在于涂层溶液中。在一些实施方式中,可以在涂层材料内提供细胞外基质(ecm)蛋白以优化细胞粘附以促进细胞生长。可包括在涂层材料中的细胞基质蛋白可包括但不限于胶原蛋白、弹性蛋白、含rgd的肽(例如纤连蛋白)或层粘连蛋白。在其他实施方式中,生长因子、细胞因子、激素或其他细胞信号传导物质可存在于微流体设备的涂层材料内。
645.在一些实施方式中,涂层材料可包括含有环氧烷部分、羧酸部分、磺酸部分、磷酸酯部分、糖部分、核苷酸部分或氨基酸部分中超过一种的聚合物。在其他实施方式中,聚合物处理表面可包括多于一种聚合物的混合物,每个聚合物具有环氧烷部分、羧酸部分、磺酸部分、磷酸酯部分、糖部分、核苷酸部分和/或氨基酸部分,其可以独立地或同时地掺入到涂层材料中。
646.共价连接的涂层材料。在一些实施方式中,至少一个内表面包括共价连接的分子,
其提供适合于生物微物体在微流体设备内的维持/扩增的有机和/或亲水性分子层,提供用于此类细胞的调节后的表面。
647.共价连接的分子包括连接基团,其中连接基团共价连接到微流体设备的一个或多个表面,如下所述。连接基团还与被配置为提供适合于生物微物体的维持/扩增的有机和/或亲水分子层的部分共价连接。
648.在一些实施方式中,被配置为提供适合于生物微物体的维持/扩增的有机和/或亲水性分子层的共价连接部分可包括烷基或氟烷基(其包括全氟烷基)部分;单糖或多糖(其可包括但不限于葡聚糖);醇(包括但不限于炔丙醇);多元醇,包括但不限于聚乙烯醇;亚烷基醚,包括但不限于聚乙二醇;聚电解质(包括但不限于聚丙烯酸或聚乙烯基膦酸);氨基基团(包括其衍生物,例如但不限于烷基化胺、羟基烷基化氨基、胍盐和含有非芳香化氮环原子的杂环基团,例如但不限于吗啉基或哌嗪基);羧酸,包括但不限于丙酸(其可提供羧酸根阴离子表面);膦酸,包括但不限于乙炔膦酸(其可提供膦酸盐阴离子表面);磺酸根阴离子;羧基甜菜碱;磺基甜菜碱;氨基磺酸;或氨基酸。
649.在各种实施方式中,被配置为提供适于微流体设备中的生物微物体的维持/扩增的有机和/或亲水性分子层的共价连接部分可包含非聚合部分,例如烷基部分、取代的烷基部分、例如氟烷基部分(包括但不限于全氟烷基部分)、氨基酸部分、醇部分、氨基部分、羧酸部分、膦酸部分、磺酸部分、氨基磺酸部分或糖部分。或者,共价连接的部分可包括聚合物部分,其可以是上述任何部分。
650.在一些实施方式中,共价连接的烷基部分可以包含形成直链(例如,至少10个碳、或至少14、16、18、20、22或更多个碳的直链)的碳原子并且可以是无支链的烷基部分。在一些实施方式中,烷基可以包括取代的烷基(例如,烷基中的一些碳可以是氟化的或全氟化的)。在一些实施方式中,烷基可包括第一链段,第一链段可包括全氟烷基,第一链段连接至第二链段,第二链段包括未取代的烷基,其中第一链段和第二链段可直接或间接连接(例如,借助于醚键)。烷基的第一链段可以位于连接基团的远端,并且烷基的第二链段可以位于连接基团的近端。
651.在其他实施方式中,共价连接的部分可包括至少一个氨基酸,其可包括多于一种类型的氨基酸。因此,共价连接的部分可包括肽或蛋白质。在一些实施方式中,共价连接的部分可包括可提供两性离子表面以支持细胞生长、活力、移植性或其任何组合的氨基酸。
652.在其他实施方式中,共价连接的部分可以包括至少一个环氧烷部分,并且可以包括如上所述的任何环氧烷烃聚合物。一类有用的含亚烷基醚的聚合物是聚乙二醇(peg m
w
<100,000da)或任选地聚环氧乙烷(peo,m
w
>100,000)。在一些实施方式中,peg可具有约1000da、5000da、10,000da或20000da的m
w
。
653.共价连接的部分可以包括一种或多种糖类。共价连接的糖可以是单糖、二糖或多糖。共价连接的糖可以被修饰以引入反应性配对部分,其允许偶联或精制以附着于表面。示例性的反应性配对部分可包括醛、炔或卤素部分。多糖可以随机方式修饰,其中可以修饰多糖单体中的每一种或仅修饰多糖内的糖单体的一部分以提供可以直接或间接偶联到表面的反应性配对部分。一个示例可包括葡聚糖多糖,其可通过未支化的连接基团间接偶联至表面。
654.共价连接的部分可包括一个或多个氨基。氨基可以是取代的胺部分、胍部分、含氮
杂环部分或杂芳基部分。含氨基部分可具有允许对微流体设备内以及任选地对隔离坞和/或流动区域(例如,通道)内的环境进行ph修饰的结构。
655.提供调节后的表面的涂层材料可以仅包含一种共价连接的部分,或者可以包括多种不同种类的共价连接的部分。例如,氟烷基调节的表面(包括全氟烷基)可具有多个共价连接的部分,其全部相同,例如具有相同的连接基团和共价连接至表面,相同的总长度和相同数量的包含氟烷基部分的氟亚甲基单元。或者,涂层材料可具有附着于表面的多于一种共价连接的部分。例如,涂层材料可以包括具有共价连接的烷基或氟烷基部分、具有指定数量的亚甲基或氟亚甲基单元的分子,并且可以还包括具有共价连接到具有更多数量的亚甲基或氟亚甲基单元的烷基或氟烷基链的带电部分的另外一组分子,这可以提供在涂覆表面上呈现较大部分的能力。在这种情况下,具有不同的、较低空间需求的末端和较少主链原子的第一组分子可以帮助使整个衬底表面功能化,从而防止不期望的衬底本身与硅/氧化硅、氧化铪或氧化铝的粘附或接触。在另一个实例中,共价连接的部分可以提供在表面上以随机方式呈现交替电荷的两性离子表面。
656.调节后的表面性质。除了调节后的表面的组成之外,诸如疏水材料的物理厚度的其他因素可影响dep力。各种因素可以改变调节后的表面的物理厚度,诸如在衬底上形成调节后的表面的方式(例如气相沉积、液相沉积、旋涂、浸渍和静电涂覆)。在一些实施方式中,调节后的表面的厚度为约1nm至约10nm;约1nm至约7nm;约1nm至约5nm;或它们之间的任何单独的值。在其他实施方式中,由共价连接的部分形成的调节后的表面可具有约10nm至约50nm的厚度。在各种实施方式中,如本文所述制备的调节后的表面具有小于10nm的厚度。在一些实施方式中,当共价连接至微流体设备的表面(例如,dep配置的衬底表面)时,调节后的表面的共价连接的部分可形成单层,并且可具有小于10nm的厚度(例如,小于5nm,或约1.5至3.0nm)。这些值与通过旋涂制备的表面的值相反,例如,其通常可以具有约30nm的厚度。在一些实施方式中,调节后的表面不需要完美地形成的单层以适当地用于在dep配置的微流体设备内的操作。
657.在各种实施方式中,提供微流体设备的调节后的表面的涂层材料可提供所需的电性质。不希望受理论的限制,影响涂覆有特定涂层材料的表面的稳健性的一个因素是固有电荷捕获。不同的涂层材料可捕获电子,这可导致涂层材料的击穿。涂层材料中的缺陷可增加电荷捕获且导致涂层材料的进一步击穿。类似地,不同的涂层材料具有不同的介电强度(即导致介电击穿的最小施加电场),其可能影响电荷捕获。在某些实施方式中,涂层材料可具有减少或限制电荷捕捉量的整体结构(例如,致密堆积的单层结构)。
658.除了其电性质外,调节后的表面还可具有有益于与生物分子一起使用的性质。例如,相对于烷基封端的链,含有氟化(或全氟化)碳链的调节后的表面可以在减少表面结垢量方面提供益处。如本文所用,表面结垢是指在微流体设备的表面上的任意材料沉积的量,其可包括生物材料(诸如蛋白质及其降解产物、核酸和各自的降解产物等)的永久或半永久沉积。
659.单一或多部分调节后的表面。共价连接的涂层材料可以通过分子的反应形成,该分子已经含有被配置为提供适合于在微流体设备中维持/扩增生物微物体的有机和/或亲水分子层的部分,如下所述。或者,共价连接的涂层材料可以通过将配置为提供适合于保持/扩增生物微物体的有机和/或亲水分子层的部分偶联到自身已经共价连接到表面的表
面修饰配体来按照两步顺序进行。
660.制备共价连接的涂层材料的方法。在一些实施方式中,与微流体设备的表面(例如,包括隔离坞和/或流动区域的至少一个表面)共价连接的涂层材料具有式1或式2的结构。当在一个步骤中将涂层材料引入表面时,其具有式1的结构,而当在多步骤方法中引入涂层材料时,其具有式2的结构。
[0661][0662]
涂层材料可以共价地连接到dep配置或ew配置的衬底。dep配置或ew配置的衬底可以包括硅、氧化硅、氧化铝或氧化铪。氧化物可以作为衬底的天然化学结构的一部分存在,或者可以如下所述引入。
[0663]
涂层材料可以经由连接基团(“lg”)与氧化物连接,该连接基团可以是由硅氧烷或膦酸基团与氧化物的反应形成的甲硅烷氧基或膦酸酯基团。被配置为提供适用于生物微物体在微流体设备中的维持/扩增的有机和/或亲水性分子层的部分可以是本文所述的任何部分。连接基团lg可以直接或间接地连接到被配置为提供适合于在微流体设备中维持/扩增生物微物体的有机和/或亲水分子层的部分。当连接基团lg直接连接至部分时,不存在任选的连接体(“l”)且n为0。当连接基团lg间接连接至部分时,连接体l存在且n为1。连接体l可以具有线性部分,其中线性部分的主链可以包括选自硅、碳、氮、氧、硫和/或磷原子的任意组合的1至200个非氢原子,其受本领域已知的化学键合限制。它可以被一个或多个部分的任意组合中断,其可以选自醚、氨基、羰基、酰氨基和/或膦酸酯基团、亚芳基、杂亚芳基或杂环基团。在一些实施方式中,连接体l的主链可以包括10至20个原子。在其他实施方式中,连接体l的主链可以包括约5个原子至约200个原子;约10个原子至约80个原子;约10个原子至约50个原子;或约10个原子至约40个原子。在一些实施方式中,骨架原子全部是碳原子。
[0664]
在一些实施方式中,被配置为提供适合于生物微物体的维持/扩增的有机和/或亲水性分子层的部分可在多步骤过程中被添加到衬底的表面,并且具有如上所示的式2的结构。该部分可以是上述任何部分。
[0665]
在一些实施方式中,偶联基团cg表示由反应性部分r
x
和反应性配对部分r
px
(即,被配置为与反应性部分r
x
反应的部分)的反应得到的基团。例如,一个典型的偶联基团cg可以包括羧酰氨基基团,其是氨基与羧酸衍生物反应的结果,例如活化酯或酰氯等。其他cg可包括三唑基、羧酰胺基、硫代酰胺基、肟基、巯基、二硫化物、醚基或烯基,或可在反应性部分与其相应的反应性配对部分反应后形成的任何其他合适的基团。偶联基团cg可以位于连接体l的第二末端(即,与配置成提供适于维持/扩增微流体设备中的生物微物体的有机和/或亲水分子层的部分接近的末端),其可以包括如上所述的任何元素组合。在一些其他实施方式
中,偶联基团cg可以中断连接体l的主链。当偶联基团cg是三唑基时,它可以是由点击偶联反应产生的产物,并且可以进一步被取代(例如,二苯并环辛烯基稠合三唑基)。
[0666]
在一些实施方式中,使用化学气相沉积将涂层材料(或表面修饰配体)沉积在微流体设备的内表面上。可任选地例如通过预清洁盖110、微流体管路材料116和/或衬底(例如dep配置的衬底的电极激活衬底206的内表面208,或ew配置的衬底的支撑结构104的介电层)、通过暴露于溶剂浴、超声处理或其组合来改进气相沉积过程。作为另外一种选择或除此之外,这种预清洁可包括在氧等离子体清洁剂中处理盖110、微流体管路材料116和/或衬底,这可移除各种杂质,而同时引入氧化表面(例如表面上的氧化物,其可以如本文所述共价修饰)。或者,可使用液相处理,例如盐酸和过氧化氢的混合物或硫酸和过氧化氢的混合物(例如食人鱼(piranha)溶液,其硫酸与过氧化氢的比例可为约3:1至约7:1)来代替氧等离子体清洁剂。
[0667]
在一些实施方式中,在微流体设备200已被组装以形成限定微流体管路120的外壳102之后,使用气相沉积来涂覆微流体设备200的内表面。在不希望受理论限制的情况下,在完全组装的微流体管路120上沉积这样的涂层材料可以有益于防止由微流体管路材料116与电极激活衬底206介电层和/或盖110之间的弱化键引起的分层。在采用两步法的实施方式中,表面修饰配体可以通过如上所述的气相沉积引入,随后引入部分被配置为提供适合于生物微物体的维持/扩增的有机和/或亲水分子层。随后的反应可以通过将表面修饰的微流体设备暴露于合适的偶联剂溶液来进行。
[0668]
图2h描绘了具有提供调节后的的表面的示例性共价连接的涂层材料的微流体设备290的横截面图。如图所示,涂层材料298(示意性地示出)可以包括共价结合到基底286(可以是dep衬底)的内表面294和微流体设备290的盖288的内表面292上的致密堆积的分子的单层。涂层材料298可置于微流体设备290的外壳284近端并朝向内侧的基本上所有内表面294、292上,包括在一些实施方式中和如上所述的,微流体管路材料(未示出)的表面,其用于限定微流体设备290内的管路元件和/或结构。在替代实施方式中,涂层材料298可以仅置于在微流体设备290的一个或一些内表面上。
[0669]
在图2h所示的实施方式中,涂层材料298可以包括有机硅氧烷分子的单层,每个分子经由甲硅烷氧基连接基团296共价结合到微流体设备290的内表面292、294。可以使用任何上述涂层材料298(例如烷基封端的、氟烷基封端的部分、peg封端的部分、葡聚糖封端的部分或含有用于有机甲硅烷氧基部分的正电荷或负电荷的末端部分),其中封端部分置于在其朝向外壳的封端(即,未结合到内表面292、294并且接近外壳284的涂层材料298的单层的部分)。
[0670]
在其他实施方式中,用于涂覆微流体设备290的内表面292、294的涂层材料298可包括阴离子、阳离子或两性离子部分或其任何组合。不受理论的限制,通过在微流体管路120的外壳284的内表面处呈现阳离子部分、阴离子部分和/或两性离子部分,涂层材料298可与水分子形成强氢键,使得所得到的水合水充当将生物微物体与非生物分子(例如,衬底的硅和/或氧化硅)相互作用分开的层(或“屏障物”)。此外,在涂层材料298与涂层剂结合使用的实施方式中,涂层材料298的阴离子、阳离子和/或两性离子可与存在于外壳284中的介质180(例如,涂层溶液)中的非共价涂层剂(例如溶液中的蛋白质)的带电部分形成离子键。
[0671]
在其他实施方式中,涂层材料可包含或通过化学修饰以在其朝向外壳的封端呈现
亲水性涂层剂。在一些实施方式中,涂层材料可包括含亚烷基醚的聚合物,例如peg。在一些实施方式中,涂层材料可以包括多糖,例如葡聚糖。与上面讨论的带电部分(例如,阴离子、阳离子和两性离子部分)一样,亲水性涂层剂可以与水分子形成强氢键,使得所得到的水合水充当将生物微物体与非生物分子(例如,衬底的硅和/或氧化硅)的相互作用分离的层(或“屏障物”)。
[0672]
合适的涂层处理和修饰的进一步细节可见于2016年4月22日提交的申请号为15/135,707的美国专利申请,并且其全部内容通过引用并入本文。
[0673]
用于维持微流体设备的隔离坞内的细胞活力的另外的系统部件。为了促进细胞群的生长和/或扩增,有助于保持功能细胞的环境条件可由系统的其他组件提供。例如,这样的其他组件可以提供营养物、细胞生长信号物质、ph调节、气体交换、温度控制和从细胞中移除废物产物。
[0674]
计算机系统
[0675]
图5是示出了可以在其上实现本教导的实施方式或实施方式的部分的计算机系统1000的框图。在本教导的各种实施方式中,计算机系统1000可包括总线1002或用于传送信息的其他通信机制、以及与总线1002耦合以用于处理信息的处理器1004。在各种实施方式中,计算机系统1000还可以包括存储器1006,其可以是耦合到总线1002的随机存取存储器(ram)或其他动态存储设备,用于确定要由处理器1004执行的指令。存储器1006还可以用于在要由处理器1004执行的指令的执行期间存储临时变量或其他中间信息。在各种实施方式中,计算机系统1000还可以包括耦合到总线1002的只读存储器(rom)1008或其他静态存储设备,用于存储用于处理器1004的静态信息和指令。诸如磁盘或光盘的存储设备1010可以被提供并且耦合到总线1002以用于存储信息和指令。
[0676]
在各种实施方式中,计算机系统1000可经由总线1002耦合到显示器1012,例如阴极射线管(crt)或液晶显示器(lcd),用于向计算机用户显示信息。包括字母数字和其他键的输入设备1014可以耦合到总线1002,用于向处理器1004传送信息和命令选择。另一种类型的用户输入设备是光标控件1016,诸如鼠标、轨迹球或光标方向键,用于向处理器1004传送方向信息和命令选择以及用于控制显示器1012上的光标移动。该输入设备1014通常在两个轴(第一轴(即x)和第二轴(即y))中具有两个自由度,其允许设备指定平面中的位置。然而,应当理解,本文还设想了允许三维(x、y和z)光标移动的输入设备1014。
[0677]
根据本教导的某些实施方式,计算机系统1000可以响应于处理器1004执行存储器1006中包含的一个或多个指令的一个或多个序列来提供结果。此类指令可从另一计算机可读介质或计算机可读存储介质(例如,存储设备1010)读取到存储器1006中。包含在存储器1006中的指令序列的执行可以使处理器1004执行本文描述的过程。可替代地,可以使用硬连线电路来代替软件指令或与软件指令组合来实现本教导。因此,本教导的实施方式不限于硬件电路和软件的任何特定组合。
[0678]
如本文所使用的术语“计算机可读介质”(例如,数据保存、数据存储等)或“计算机可读存储介质”是指参与向处理器1004提供指令以供执行的任何介质。这样的介质可以采取许多形式,包括但不限于非易失性介质、易失性介质和传输介质。非易失性介质的示例可以包括但不限于光学、固态、磁盘,诸如存储设备1010。易失性介质的示例可以包括但不限于动态存储器,诸如存储器1006。传输介质的示例可包括但不限于同轴电缆、铜线和光纤,
包括具有总线1002的导线。
[0679]
计算机可读介质的常见形式包括例如软盘、软磁盘、硬盘、磁带或任何其他磁介质、cd
‑
rom、任何其他光学介质、打孔卡、纸带、具有孔图案的任何其他物理介质、ram、prom和eprom、flash
‑
eprom、任何其他存储器芯片或盒、或者计算机可以从中读取的任何其他有形介质。
[0680]
除了计算机可读介质之外,可以将指令或数据提供为包括在通信装置或系统中的传输介质上的信号,以向计算机系统1000的处理器1004提供用于执行的一个或多个指令的序列。例如,通信装置可以包括具有指示指令和数据的信号的收发机。所述指令和数据被配置为致使一或多个处理器实施本文中所概述的功能。数据通信传输连接的代表性示例可以包括但不限于:电话调制解调器连接、广域网(wan)、局域网(lan)、红外数据连接,nfc连接等
[0681]
应当理解,本文描述的方法包括流程图、图表和所附的公开内容可以使用作为独立设备的计算机系统1000实现或在诸如云计算网络之类的共享计算机处理资源的分布式网络上实现。
[0682]
还应当理解,在某些实施方式中,提供了用于存储用于执行或进行本文描述的方法的非暂时性机器可读指令的机器可读存储设备。机器可读指令可以控制以下详细描述的图像处理、卷积神经网络(cnn)流(下面详细描述)、逻辑和存储器模块、以及微物体检测和计数的所有方面。此外,机器可读指令可以最初被加载到存储器模块中或者经由云或者经由api被访问。
[0683]
目标微物体的自动检测。在一个方面,提供了用于自动检测照明图像中的目标微物体的方法,照明图像诸如是明场图像,并且特别是数字图像(或已经被数字化的图像)。目标微物体可设置在微流体设备内。目标微物体可以是细胞,例如哺乳动物细胞(例如,血细胞、杂交瘤、癌细胞、转化细胞、配子或胚胎等)。或者,目标微物体可以是珠,例如可以用在测定中(例如,微珠、磁珠等)。所述方法可涉及使用机器学习算法来处理图像数据(即,与图像中的像素有关的数据)。机器学习算法可以包括神经网络,诸如卷积神经网络。
[0684]
图像分类需要接收输入图像并输出最佳地描述图像的类别或类别的概率。这可以使用配备有处理引擎的计算机系统来完成,该处理引擎利用算法来处理输入图像并输出结果。图像检测还可以利用类似的处理引擎,由此系统接收输入图像并且使用预先编程到处理引擎中的算法以高精度地识别该图像内的目标物体。
[0685]
关于输入图像,系统通常将输入图像取向为像素值的阵列。这些像素值取决于图像分辨率和大小,对应于(长度)
×
(宽度)
×
(通道的#)的数字阵列。通道的数量也可以被称为深度。例如,该阵列可以是l
×
w
×
红绿蓝颜色模型(rbg值)。rgb将被认为是三个通道,每个通道表示rgb颜色模型中的三种颜色中的一种。例如,系统通常可以用20
×
20
×
3(对于rgb)的代表性阵列来表征20
×
20图像,其中阵列中的每个点被分配表示像素强度的值(例如,0至255)。给定该值的阵列,处理引擎可以使用其算法来处理这些值,以输出描述图像是某个类别的概率(例如,对于细胞为0.80,对于细胞壁为0.15,对于无细胞为0.05)。
[0686]
卷积神经网络(cnn)通常通过首先寻找诸如边缘和曲线的低级特征,然后通过一系列卷积层推进到更抽象的(例如,对于被分类的图像的类型而言独特的)概念来实现图像处理和分类/检测的高级形式。cnn可以通过使图像通过一系列卷积、非线性、汇集(或下采
样,如将在下面更详细地讨论的)和完全连接的层并且获得输出来实现。同样,输出可以是单个类别或类别的概率,其最好地描述图像或检测图像上的物体。
[0687]
关于cnn中的层,第一层通常是卷积层(conv)。此第一层将使用一系列参数来处理图像的代表性阵列。cnn不是将图像作为整体来处理,而是将使用滤波器(或神经元或内核)来分析图像子集的集合。子集将包括阵列中的焦点以及周围点。例如,滤波器可以检查32
×
32图像中的一系列5
×
5区(或区域)。这些区域可以被称为感受野。由于滤波器通常将具有与输入相同的深度,所以尺寸为32
×
32
×
3的图像将具有相同深度的滤波器(例如,5
×5×
3)。使用上述示例性尺寸对滤波器进行卷积的实际步骤包括沿输入图像滑动滤波器、将滤波器值与图像的原始像素值相乘以计算逐元素的乘法(element wise multiplications)、以及将这些值求和以得到该图像的该检查区域的单个数字。
[0688]
在完成此卷积步骤之后,使用5
×5×
3滤波器,将产生具有28
×
28
×
1的尺寸的激活图(或滤波器映射)。对于所使用的每个附加层,空间维度被更好地保留,使得使用两个滤波器将产生28
×
28
×
2的激活图。每一滤光器通常将具有其表示(例如,色彩、边缘、曲线等)的独特特征,所述独特特征一起表示最终图像输出所需的特征识别符。这些滤波器在组合使用时允许cnn处理图像输入以检测存在于每个像素处的那些特征。因此,如果滤波器用作曲线检测器,则滤波器沿着图像输入的卷积将在激活图中产生数字阵列,其对应于曲线的高可能性(高总和元素分量乘法)、曲线的低可能性(低总和元素分量乘法)或零值,其中在某些点处的输入体积不会激活曲线检测器滤波器。因此,在conv(卷积)中的滤波器(也被称为通道)的数量越多,激活图上提供的深度(或数据)就越多,因此有关输入的更多信息将导致更准确的输出。
[0689]
与cnn的准确性平衡是产生结果所需的处理时间和功率。换言之,使用的滤波器(或通道)越多,执行卷积所需的时间和处理功率就越多。因此,应当特别选择满足cnn方法的需要的滤波器(或通道)的选择和数量,以便在考虑可用时间和功率的同时产生尽可能准确的输出。
[0690]
为了进一步使cnn能够检测更复杂的特征,可以添加附加的卷积以分析来自先前卷积(即,激活图)的输出。例如,如果第一卷积寻找诸如曲线或边缘的基本特征,则第二卷积可以寻找更复杂的特征,诸如形状,其可以是在较早的卷积层中检测到的各个特征的组合。通过提供一系列卷积,cnn可以检测越来越高级的特征以最终达到检测特定期望物体的可能。此外,当卷积堆叠在彼此之上时,分析先前的激活图输出,堆栈中的每个卷积自然地通过在每个卷积级别出现的按比例缩小来分析越来越大的感受野,从而允许cnn在检测目标物体时响应像素空间的增长区域。
[0691]
cnn架构通常由一组处理块组成,该组处理块包括用于卷积输入体积(图像)的至少一个处理块和用于去卷积(或转置卷积)的至少一个处理块。此外,处理块可以包括至少一个池化块(pooling block)和上池化块(unpooling block)。池化块可以用于按分辨率缩小图像以产生可用于卷积的输出。这可以有助于计算效率(高效的时间和功率),这进而可以改善cnn的实际性能。尽管池化或上采样块会使滤波器变小并且计算要求合理,这些块可以使输出粗化(可以导致感受野内的空间信息的丢失),从输入的大小以特定的比例进行减小。
[0692]
可以使用上池化块来重构这些粗略的输出,以产生具有与输入体积相同的维度的
输出体积。上池化块可以被认为是卷积块的反向操作,以将激活输出返回到原始输入体积维数。
[0693]
然而,上池化块处理通常仅简单地将粗略输出放大成稀疏激活图。为了避免这种结果,去卷积块将该稀疏激活图致密化以产生放大和致密的激活图,其在任何进一步必要的处理之后产生更接近输入体积的尺寸和密度的输出体积。作为卷积块的反向操作,去卷积块将单个激活输出点与多个输出相关联以放大和致密化所得的激活输出,而不是将感受野中的多个阵列点减小到单个数。
[0694]
应当注意,池化块可以用于缩小图像并且上池化块可以用于放大这些按比例缩小的激活图,而卷积和去卷积块可以被构造为卷积/去卷积和缩小/放大,而不需要单独的池化和上池化块。
[0695]
池化和上池化处理可以具有取决于在图像输入中检测到的目标物体的缺陷。由于池化通常通过在不重叠窗口的情况下查看子图像窗口来按比例缩小图像,因此随着缩小发生,空间信息的损失明显。
[0696]
处理块可以包括用卷积或去卷积层封装的其他层。这些可以包括,例如,经整流的线性单元层(relu)或指数线性单元层(elu),其为在其处理块中检查来自卷积的输出的激活函数。relu或elu层用作门函数以仅推进对应于对卷积而言独特的目标特征的正检测的那些值。
[0697]
给定基本架构,然后为训练过程准备cnn以训练其在图像分类/检测(目标物体)中的准确性。这涉及称为反向传播的过程(“反向传播”),其使用训练数据集或用于训练cnn的样本图像,使得其在达到最优或阈值准确度时更新其参数。反向传播涉及一系列重复的步骤(训练迭代),这取决于回溯的参数,将缓慢地或快速地训练cnn。反向传播步骤通常包括前向传递、损失函数、向后传递和根据给定学习速率的参数(权重)更新。前向传递涉及通过cnn传递训练图像。损失函数是输出中的误差的量度。后向传递通过确定损失函数的影响因素。权重更新涉及更新滤波器的参数以使cnn朝向最优移动。学习速率确定每次迭代的权重更新的程度以达到最优。如果学习速率太低,则训练可能花费太长并且涉及太多的处理能力。如果学习速率太快,则每个权重更新可能过大,以允许精确地实现给定的最优或阈值。
[0698]
反向传播过程可导致训练的复杂化,从而导致在训练开始时对于较低的学习速率和更具体地并且更仔细地确定的初始参数的需要。一种这样的复杂化是,当在每次迭代结束时发生权重更新时,对卷积的参数的改变放大了网络工作的深度,使其更深。举例来说,如果cnn具有多个卷积,如上文所论述,所述多个卷积允许较高层级特征分析,则对第一卷积的参数更新在每一后续卷积处相乘。净效应是参数的最小改变可取决于给定cnn的深度而具有大的影响。这种现象被称为内部协变量移位。
[0699]
本文公开的实施方式相对于已知的cnn具有若干优点。这些优点包括,例如,提供避免池化层中固有的丢失空间信息的cnn,减少/最小化了在反向传播过程中固有的内部协变量移位,并且减少了深度神经网络中通常需要的处理时间和速度以实现更复杂的特征检测。
[0700]
如上所述,cnn由多层感受野(multiple layers of receptive fields)组成。这些是处理输入图像的各部分的“神经元”(或内核)集群。然后平铺这些集群的输出,使得它们的输入区域重叠,以获得更好的原始图像;对于每个这样的层重复这一点。平铺允许cnn
容忍输入图像的平移。例如已经在long等人的“用于语义分割的完全卷积网络”cvpr2015,和noh等人的“用于语义分割的学习解卷积网络”iccv 2015中描述了cnn,这些文献中的每一个的内容通过引用并入本文。
[0701]
cnn可以包括卷积层和完全连接层的组合,其中在每层的末端或之后应用逐点非线性。引入对小输入区域的卷积操作以减少自由参数的数量并改善泛化。卷积网络的一个主要优点是在卷积层中使用共享权重,这意味着对于层中的每个像素使用相同的滤波器(权重组);这既减少了内存占用,又提高了性能。
[0702]
在一个实施方式中,cnn由通过可微分函数将输入体积变换为输出体积(例如,保持类别得分)的不同层的堆叠形成。
[0703]
在该实施方式中,卷积层定义为空的、单克隆的和多克隆的。层的参数可以包括一组可学习的滤波器,其具有小的感受野,但是延伸到输入体积的整个深度。在正向传递期间,每个滤波器在输入体积的宽度和高度上进行卷积,计算滤波器的条目与输入之间的点积,并且产生该滤波器的二维激活图。结果,在输入中的某个空间位置处看到某个特定类型的特征时,网络学习激活的滤波器。
[0704]
沿着深度维度对所有滤波器的激活图进行堆叠形成卷积层的全部输出体积。因此,输出体积中的每个条目也可以被解释为在输入中查看小区域并且与同一激活图中的神经元共享参数的神经元的输出。
[0705]
在一个实施方式中,空间布置基于控制卷积层的输出体积的大小的超参数:诸如深度、步幅(stride)和零填充。
[0706]
在一个实施方式中,输出体积的深度控制连接到输入体积的相同区域的层中的神经元的数量。所有这些神经元将学习以激活输入中的不同特征。例如,如果第一卷积层将原始图像作为输入,则沿着深度维度的不同神经元可以在存在各种取向边缘或颜色斑点的情况下激活。
[0707]
在一个实施方式中,步幅控制如何分配围绕空间维度(宽度和高度)的深度列。当步幅为1时,新的神经元的深度列被分配给仅相隔1个空间单位的空间位置。这导致列之间的感受野的严重重叠,并且还导致大的输出体积。相反地,如果使用较高的步幅,则感受野将重叠较少,并且所得的输出体积将在空间上具有较小的尺寸。
[0708]
有时,在输入体积的边界上用零填充输入是方便的。该零填充的大小是第三超参数。零填充提供对输出体积空间大小的控制。特别地,有时期望精确地保留输入体积的空间大小。
[0709]
在该实施方式中,在卷积层中使用参数共享方案来控制自由参数的数量。它依赖于一个合理的假设:如果一个补丁特征对于在某个空间位置处计算是有用的,则在不同的位置计算也应当是有用的。换句话说,将深度的单个二维切片表示为深度切片,我们将每个深度切片中的神经元约束为使用相同的权重和偏差。
[0710]
由于单个深度切片中的所有神经元共享相同的参数化,因此卷积层的每个深度切片中的前向传递可被计算为神经元的权重与输入体积的卷积(因此名称:卷积层)。
[0711]
因此,通常将权重集合称为与输入卷积的滤波器。此卷积的结果为激活图,且用于每一不同滤波器的激活图集合沿深度维度堆叠在一起以产生输出体积。参数共享有助于cnn架构的平移不变性。
[0712]
在各种实施方式中,提供神经网络(或cnn),如例如图7的神经网络700所示。与示例神经网络有关的附加细节在图8和图9a至图9d中示出,并且将仅在描述该实施方式时用于参考目的,因为由图8和图9a至图9d所捕获的cnn特征可以与图7的所示网络或本文中的各种其他实施方式结合使用。
[0713]
在图7中,神经网络700包括第一下采样块710、第二下采样块730和第三下采样块750,其具有相关联的第一处理块720、第二处理块740和第三处理块760(或残差网络块)。第一下采样块710接收输入图像701。如所说明,每一向下采样块之后可跟随其相关联的处理(或残差)块。如下面详细讨论的,处理(或残差)块可以是单分支或多分支的。
[0714]
cnn可以包括多个下采样块(例如,图7中的三个),其中每个下采样块可以包括下采样卷积层(conv),批量归一化(norm)层,以及包括门函数的激活层。
[0715]
图8b示出了下采样块的示例,其接收输入871并提供输出879,并且包括具有内核尺寸d
×
d的卷积874、批量归一化层876和激活层878。激活层可以是例如elu或relu。在各种实施方式中,激活层直接从批量归一化层接收图像数据,该批量归一化层直接从下采样卷积层接收图像数据。下采样卷积层可以起到降低其接收的图像数据的空间分辨率的作用。这将参考图9a至图9d更详细地讨论。
[0716]
处理块(或残差网络块)可以是单个分支处理块或多分支处理块,其中每个分支处理来自先前下采样块的输出,且接着组合两个分支的输出以产生下采样的激活图以用于进一步下采样或上采样到最终输出。
[0717]
图8a说明被配置为从上游下采样块(未描绘,参见与图8b相关的讨论)接收输入805(例如,以激活图的形式)的多分支处理块800(或残差网络块)的实例。块800包括第一分支810和第二分支840。第一分支810包括:具有n
×
n的内核的第一卷积层815(conv)、从第一卷积815接收数据的第一批量归一化(norm)层820、从第一批量归一化层820接收数据的第一激活层825(其可以包括或充当门函数)、接收通过第一激活层825的数据的具有m
×
m内核的第二卷积830、以及接收来自第二卷积830的数据的第二批量归一化层835。需要注意的是,卷积815(n
×
n)和830(m
×
m)的内核可以具有相同的大小或者可以不同。如图9a至图9c所示(下面讨论),在所示的残差网络中,来自串行卷积的内核是相同的(3
×
3)。无论如何,卷积815/830通常优选具有大于1
×
1的内核。
[0718]
第二分支840包括第三卷积845、从第三卷积845接收数据的第三批量归一化层850和从第三批量归一化层850接收数据的第二激活层855(其可以包括或充当门函数)。块800还包括重组层860,其接收来自第二批量归一化层835的数据和通过第二激活层855的数据。最后,块800包括块激活层862,其可以在从块800产生输出864用于进一步处理之前,用作从重组层860接收的数据的门函数。如上所述,激活层可以是例如elu或relu。在各种实施方式中,激活层是elu。
[0719]
在图8a中,第二分支840以比第一分支810小的程度处理从先前下采样块接收的图像数据。具体地,第二分支840的第三卷积845使用1
×
1的滤波器窗口(或维度或内核),而第一分支810的第一和第二卷积815/830分别使用n
×
n和m
×
m的滤波器窗口(或维度或内核),如上所述,其通常将大于1
×
1。可以根据需要调整这些滤波器窗口,考虑的因素例如是图像类型、图像质量、物体类型、物体大小、物体形状、输出要求、时间约束、步幅长度(下面讨论)和功率/处理资源。例如,第一和第二卷积815/830可以使用3
×
3的滤波器窗口(或维度)(参
见下面的图9a至图9d,示出了该滤波器窗口大小)。
[0720]
虽然图8a中的两个分支都可以具有步幅为1的卷积,但是步幅也可以不同。然而,为了允许重组层860是有效的,将卷积815/830的步幅乘以第一分支810的乘积必须等于第二分支840的卷积845的步幅。再次,下面将更详细地讨论步幅。
[0721]
在激活步骤之前插入批量归一化层提供了有助于使内部协变量移位最小化的优点。通过这样插入批量归一化层,并且通过扩展,在卷积之后,批量归一化可以对卷积的输出进行归一化,从而将归一化数据提供给激活步骤,从而允许激活的更稳定的分布。通过最小化反向传播过程期间的内部协变量移位,可以经由较高的学习速率(权重更新的程度)更积极地进行训练神经网络,从而导致更快的cnn学习,而不损失效率和准确度,因为cnn朝着网络中的给定滤波器的最优参数工作。
[0722]
此外,添加具有最低限度处理的信息(例如,1
×
1卷积分支)的分支的残差网络允许在训练期间更容易的学习。该最低限度处理的分支提供更直接的路径以跟踪较早参数对最终结果的影响。实际上,此分支与给定残差网络内的跳过连接(以下将更详细地论述)在很大程度上具有相同的目的,从而允许一些信息未改变地通过网络以便不会丢失在下采样期间可能丢失的空间信息。
[0723]
因此,总之,单独使用残差网络并且与批量归一化层组合允许在训练期间比现有技术中已知的神经网络更容易和更有效的学习。该优点通过例如在下采样期间保持更多的空间信息并最小化内部协变量移位来实现。最小化空间信息的损失也使用步幅(以下更详细地讨论)来实现,相对于已知方法(诸如池化,以及跳过连接),其在下采样期间允许更多重叠,这允许在神经网络过程期间前馈较少处理的信息(在上面讨论的下采样步骤中,并转向到上采样步骤,如下所述)。
[0724]
通过使用多分支残差网络,特别是使用1
×
1滤波器窗口(即,未被下采样)的分支中的一个,神经网络被允许进一步卷积来自前面的卷积的输出数据,同时保持相同的分辨率以确保组合每个像素作为单个窗口的分析,在重组层860处,具有来自另一分支的数据(其可以在更大的内核或滤波器大小处经历多个卷积)以输出质量图像数据(不是从前面的卷积下采样),为进一步的下采样做准备。
[0725]
返回到图7,神经网络700还包含第一上采样块770、第二上采样块780和第三上采样块790,其中输出799紧随第三上采样块790。每个上采样块可以包括转置卷积(或去卷积)层、上采样批量归一化层和包括门函数的上采样激活层。
[0726]
图8c示出了上采样块的示例,该上采样块接收输入881并提供输出889,并且包括具有内核尺寸z
×
z、批量归一化层886和激活层888的转置卷积884。将参照图9a至图9d更详细地讨论这些子组件。每一上采样块的转置卷积层可被配置为增加其接收的图像数据的空间分辨率,且由此重建下采样的输出。另外,一个或多个上采样块中还可包含重组层,由此来自上采样批量归一化层的图像数据与来自先前残差网络块的图像数据合并(经由跳过连接,下面讨论)。
[0727]
关于神经网络的架构,上采样块的数目可被配置为等于下采样块的数目。在各种实施方式中,神经网络具有n个下采样块、n个残差网络(或处理)块、n个上采样块、以及包括重组层的n
‑
1个上采样块(参见图9d的讨论)。如下文将更详细地论述,随着空间分辨率在下采样过程期间微小地减小,人们可能希望以相同分数速率增加空间分辨率。举例来说,如果
每次通过下采样块(或组合的下采样及残差网络块)将空间分辨率减半(二分之一),那么又可最有效地将空间分辨率加倍(二倍)回到原始图像尺寸。这可导致相等数目的下采样和上采样块。
[0728]
例如,在图7中,每个卷积将图像数据的空间分辨率降低到二分之一,并且每个转置卷积将图像数据的空间分辨率增加二倍。空间分辨率的降低可以例如通过一次滑动卷积滤波器(或内核)两个像素来实现。这两个像素滑动被称为步幅长度。在每次滑动两个像素的情况下,步幅将为2。通过使用步幅长度2,卷积可以通过将从卷积输出的激活图的尺寸减半来对采样进行下采样。
[0729]
然而,通过跨步而不是如以上所教导的池化,可以避免在池化中可能固有的空间信息的损失。滤波器大小确定多少局部信息引入单个像素分析中以影响网络中的下一层的每个像素。通常,滤波器大小是奇数,以便以目标像素为中心。例如,5
×
5滤波器将检查周围的24个像素以分析给定区域的一个中心像素。利用池化,检查第一区域以有效地确定对应于该第一区域中的像素的单个值。一旦滤波器移动到第二区域,在该滤波器扫描期间不再分析第一区域中的像素。这可能导致非常误导、粗糙或不准确的结果,这取决于所进行的图像分析的类型(例如,检测到的物体类型)。
[0730]
另一方面,使用步幅理论,一旦检查了第一区域(例如,5
×
5区域),并且对于第二区域(也是5
×
5)发生了两像素步幅,显然会通过重叠使像素点不止一次被查看并被考虑到多个像素的决策中,同时仍允许进行下采样,因为两像素步幅采样的最终结果将导致图像输出(激活图输出)的大小是之前的一半。因此,与池化相比,通过跨步,下采样将发生更少的空间信息损失。用于确定适当步幅长度的因素包括例如图像类型、图像质量、物体类型、物体大小、物体形状、输出要求、时间约束和功率/处理资源。
[0731]
如所说明,如果输入图像701的空间分辨率为x,则下采样块710可将空间分辨率降低一半到x/2,接着通过向下采样块730降低到x/4,接着通过下采样块750降低到x/8。上采样块770然后可以将x/8输入加倍到x/4、块780将其加倍到x/2并且块790将其加倍到x,或者在输出799加倍到原始大小。图7在视觉上表示每个下采样块的高度减小和每个上采样块的高度增加。
[0732]
随着下采样的进行,cnn可以被设计为增加其处理的特征复杂度,从较低层级特征分析变为较高层特征分析。如先前所讨论的,为了进一步使得cnn能够检测更复杂的特征,可以添加附加的卷积以分析来自先前卷积(即,激活图)的哪些输出。例如,如果第一卷积寻找诸如曲线或边缘的基本特征,则第二卷积可以寻找更复杂的特征,诸如形状,其可以是在较早的卷积中检测到的各个特征的组合。通过提供一系列卷积,cnn可以检测越来越高级的特征以最终达到特定的期望物体检测。此外,当卷积堆叠在彼此之上时,分析先前的激活图输出,堆栈中的每个卷积自然地通过在每个卷积水平出现的按比例缩小来分析越来越大的感受野,从而允许cnn响应于在检测到目标物体时的像素空间的增长区域。
[0733]
在图7中,每个卷积和处理块将通道深度增加二倍,并且每个上采样块将通道深度降低到二分之一,直到第三上采样块790。如图所示,在下采样块710和处理块720处,使用32个通道或滤波器。在下采样块730和处理块740处,通道的数量是64。最后,下采样块750和处理块760使用128个通道。相反,上采样块770将通道减半回到64,上采样块780将其减少到32,且上采样块790到3(其重要性将在下文中更详细地论述)。图7一般地表示通道使用的这
种增加和减少,其中每个下采样块的宽度增加并且每个上采样块的宽度减小(最终块790除外)。
[0734]
而空间分辨率(原始、x/2、x/4、x/8、x/4、x/2、原始)的变化率几乎与通道深度速率(0、32、64、128、64、32、3、0)是相反的,这对于cnn架构不是必需的。然而,空间分辨率与通道数的一致变化有利地允许cnn通过使滤波器深度的顺序增加与输入数据的顺序减小(激活图维度)偏移来使输出799的时间、处理能力和质量最大化。实际上,随着对cnn的处理需求随着通过每个连续下采样块的滤波器深度而增加,cnn通过减少通过每个连续下采样块的图像阵列输入(激活图维度)来使其偏移以允许cnn分析较大深度的较小输入。相应地,反向发生将上采样块备份到输出799。
[0735]
还可以通过一种形式的跳跃架构来辅助图像体积的重建。例如,在神经网络中插入的跳过连接可以将信息从较早的下采样层投影到稍后的上采样层,使得该较早的、最小处理的信息成为重构过程的一部分。在不使用跳跃架构的情况下,在初始卷积层中捕获的一些信息(其可极大地帮助在上采样期间的重建)将在下采样过程期间已丢失。换句话说,这些有价值的信息将被下采样到可能变得太抽象以至于不能进一步使用信息。使用跳跃架构将此信息从主层提供给后面的上采样层允许保留较早的信息并用于有效的上采样。
[0736]
在各种实施方式中,神经网络可以包括具有从第二残差网络块(例如,经由跳过连接)接收图像数据的重组层的第一上采样块、具有从第一残差网络块(例如,经由跳过连接)接收图像数据的重组层的第二上采样块,及不包含重组层的第三上采样块。
[0737]
在图7中,例如,提供了第一跳过连接792和第二跳过连接794。第一跳过连接792在x/2分辨率下将输出信息同样在x/2分辨率下从处理块720前馈到上采样块780的重组层,后批量归一化(以下讨论)。经由该跳过连接,神经网络以与对应的上采样块相同的分辨率提供较早和最低程度处理的信息,以允许更准确和高效的上采样。第二跳过连接794类似地通过将来自处理块740的在x/4分辨率下的输出信息同样在x/4分辨率后前馈到上采样块770的重组层,后批量归一化(下文论述)。
[0738]
如上所述,cnn可以用于许多目的,包括图像分类和图像检测(也包括图像内的物体检测)。因此,取决于cnn的目标,输出必须回答对cnn提出的主要问题。在本文的各种实施方式中,cnn用于图像检测。在各种实施方式中,可以使用图像检测来检测目标物体。在各种实施方式中,目标物体可以是微物体。在各种实施方式中,图像检测可用于将微物体分类为多个微物体类型中的至少一者。在各种实施方式中,微物体是生物细胞。在各种实施方式中,生物细胞是免疫细胞,例如t细胞、b细胞、nk细胞、巨噬细胞或其组合。在各种实施方式中,生物细胞是来自细胞系的细胞(例如cho细胞)或癌细胞。在各种实施方式中,生物细胞是卵母细胞、精子或胚胎。
[0739]
关于图7的上采样块790中的三个通道的所说明的使用,在各种实施方式中,利用cnn的系统从图像输入获得微物体计数。系统可以通过注释输入图像的多个像素来做到这一点,该组的每个像素注释表示图像中的对应像素表示对应的微物体特性的概率。根据该分析,可以获得微物体计数。在各种实施方式中,所述多个微物体特性包括至少三个微物体特性。在各种实施方式中,多个微物体特性至少包括微物体中心、微物体边缘和非微物体(或细胞中心、细胞边缘和非细胞)。图7的上采样块790示出了通过其三个通道深度的这三个微物体表征。因此,图7的最后的上采样块790提供神经网络700确定准确的微物体(例如,
单元)计数所需的物体表征。
[0740]
图9a至图9d示出了根据各种实施方式的更详细的卷积神经网络(cnn)900的示意图。该示意图结合了以上讨论的许多神经网络原理,并且出于该原因,这些原理将不被详细地重复。然而,应注意,虽然原理可以是类似的,但本文中各种实施方式中所使用的参数全部可基于如上文所论述的特定原因而变化,其包含例如图像类型、图像质量、物体类型、物体大小、物体形状、输出要求、时间约束和功率/处理资源。因此,在图9a至图9d的示意图中使用的参数仅是示例。
[0741]
为了取向目的,图9a从左到右示出了根据各种实施方式的第一下采样块910,之后是第一残差网络块920。根据各种实施方式,图9b从左到右示出了从第一残差网络块920(图9a)接收数据的第二下采样块930,之后是第二残差网络块940。根据各种实施方式,图9c从左到右示出了从第二残差网络块940(图9b)接收数据的第三下采样块950,之后是第三残差网络块960。图9d从左到右示出了第一上采样块970、第二上采样块980和第三上采样块990。第一上采样块970从第三残差网络块960接收数据(图9c),并且包括第一上采样重组层976,由此来自第一上采样块970的批量归一化层的数据与来自经由第二跳过连接994前馈的第二残差网络块940的最终elu层948的数据重组。类似地,第二上采样块980包括第二上采样重组层986,由此来自第二上采样块980的批量归一化层的数据与来自经由第一跳过连接992前馈的第一残差网络块920的最终elu层928的数据重组。
[0742]
返回参考图9a,cnn900包括被配置为接收图像输入901的第一下采样块910。第一下采样块910包括第一卷积912、第一批量归一化层914和第一激活层916(例如,图9a中的elu)。第一卷积912可以具有用于内核尺寸和步幅的不同参数。这里,内核是5
×
5并且步幅是两个像素。来自层916的输出馈送第一残差网络块920,其包括第一分支922和第二分支924。对于残差网络的布局的一般讨论,参见图8。在第一分支922中,两个卷积具有3
×
3的内核尺寸。图9a还示出了馈送前向数据的第一跳过连接992的开始,如前所述,该前向数据在第一重组层926和第一elu928之后输出。还应注意,cnn900的该阶段的缩小是2倍(下采样到1/2空间分辨率),并且在该阶段使用32个通道的特征。
[0743]
参考图9b,cnn900还包括第二下采样块930,其包括第二卷积932、第二批量归一化层934和第二激活层936(例如图9b中的elu)。第二下采样块930被配置为接收来自第一elu928的输出。第二卷积932可具有用于内核尺寸和步幅的不同参数。在此,内核再次为5
×
5,并且步幅再次是两个像素。来自层936的输出馈送第二残差网络块940,其包括第三分支942和第四分支944。对于残差网络的布局的一般讨论,参见图8。在第一分支942中,两个卷积具有3
×
3的内核尺寸。图9b还示出了馈送前向数据的第二跳过连接994的开始,如前所述,该前向数据在第二重组层946和第二elu948之后输出。还应注意,cnn900的该阶段相对于图9a的先前阶段的缩小倍数是2倍(相对于初始,下采样为1/4空间分辨率),并且在该阶段使用64个通道的特征。
[0744]
参考图9c,cnn900包括第三下采样块950,其包括第三卷积952、第三批量归一化层954和第三激活层956(例如,图9c中的elu)。第三下采样块950被配置为接收来自第二elu948的输出。第三卷积952可以具有用于内核尺寸和步幅的不同参数。在此,内核再次为5
×
5,并且步幅再次是两个像素。来自层956的输出馈送第三残差网络块960,其包含第五分支962和第六分支964。对于残差网络的布局的一般讨论,参见图8。在第五分支962中,两个
卷积具有3
×
3的内核尺寸。还应注意,cnn900的该阶段的缩小倍数是2倍(下采样到1/8空间分辨率),并且在该阶段使用128个通道的特征。
[0745]
参考图9d,cnn900包括第一上采样块970、第二上采样块980和第三上采样块990。第一上采样块970包括第一上采样卷积972、第一上采样批量归一化层974、第一上采样重组层976和第一上采样激活层978(例如,elu)。第一上采样重组层976被配置为从第一跳过连接992接收输入,将所述输入与来自第一上采样批量归一化层974的输出组合,且将所述组合输出馈送到第一上采样激活层978。如上文参考下采样卷积912/932/952所述,上采样卷积层可具有用于内核尺寸及步幅的不同参数。在此,针对第一上采样卷积972,内核是5
×
5并且步幅是两个像素。还要注意的是,相对于来自第三残差网络960的输出,cnn900的该阶段的放大倍数为2(上采样到1/4空间分辨率),并且在该阶段使用64个通道的特征。
[0746]
第二上采样块980包括第二上采样卷积982、第二上采样批量归一化层984、第二上采样重组层986和第二上采样激活层988(例如,elu)。第二上采样重组层986被配置为从第二跳过连接994接收输入,将所述输入与来自第二上采样批量归一化层984的输出组合,且将所述组合输出馈送到第二上采样激活层988。如上文参考下采样卷积912/932/952所述,上采样卷积层可具有用于内核尺寸及步幅的不同参数。在此,针对第二上采样卷积982,内核是5
×
5并且步幅是两个像素。还要注意的是,相对于来自第一上采样块970的输出,cnn900的该阶段的放大倍数为2(上采样到1/2空间分辨率),并且在该阶段使用32个通道的特征。
[0747]
第三上采样块990包括第三上采样卷积992、第三上采样批量归一化层994以及第三上采样激活层996(例如,elu)。层996产生用于cnn900的输出999。如上文参考下采样卷积912/932/952所论述,上采样卷积层可具有用于内核尺寸及步幅的不同参数。在此,针对第三上采样卷积992,内核5
×
5并且步幅是两个像素。还要注意的是,相对于来自第二上采样块980,cnn900的该阶段的放大倍数为2(上采样到初始的空间分辨率),并且在该阶段使用3个通道的特征。
[0748]
如上文关于图7所论述,在各种实施方式中,利用cnn的系统从图像输入获得微物体计数。系统可以通过注释输入图像的多个像素来做到这一点,该组的每个像素注释表示图像中的对应像素表示对应的微物体特性的概率。根据该分析,可以获得微物体计数。在各种实施方式中,所述多个微物体特性包括至少三个微物体特性。在各种实施方式中,多个微物体特性至少包括微物体中心、微物体边缘和非微物体(或细胞中心、细胞边缘和非细胞)。图9d的上采样块990通过其三个通道深度示出了这三个微物体表征。如此,图9d的最后的上采样块990提供神经网络900确定准确的微物体(例如,细胞)计数所需的物体表征。
[0749]
根据各种实施方式,公开了用于自动检测图像中的微物体的系统和方法。在各种实施方式中,微物体是生物细胞。在各种实施方式中,生物细胞是免疫细胞,例如t细胞、b细胞、nk细胞、巨噬细胞或其组合。在各种实施方式中,生物细胞是来自细胞系的细胞(例如cho细胞)或癌细胞。在各种实施方式中,生物细胞是卵母细胞、精子或胚胎。在各种实施方式中,生物细胞是细菌。在各种实施方式中,生物细胞是真菌,例如酵母或丝状真菌。在各种实施方式中,在成像和检测之前,将细菌或真菌暴露于低渗溶液中,从而使细胞膨胀并促进其检测。
[0750]
图10是示出根据各种实施方式的用于自动检测图像中的微物体的方法的示例性
流程图。示例性流程图可以在例如图11的系统1200上执行,如将在下面详细描述的。如本文中所描绘,可由系统1200的图像获取单元1202的成像元件1206实施的步骤1110包含接收微流体设备的成像数据。
[0751]
如本文中所描绘,步骤1120详细描述了可由系统1200的图像获取单元1202的图像预处理引擎1208实施的示例性工作流步骤。在步骤1120中,该方法包括对图像数据进行预处理以减少图像数据中的异常,诸如噪声和/或图像失真。噪声的一个示例是重复图案,例如可能与微流体设备的内表面相关联。
[0752]
如本文中所描绘,步骤1130和1140详细描述了可由机器学习算法,例如系统1200的微物体检测单元1204的神经网络1210实施的示例性工作流步骤。在步骤1130,该方法包括根据多个微物体特性,使用神经网络处理成像数据中的像素数据,以注释像素数据。在步骤1140,该方法包括输出像素数据中每个像素的概率值。输出概率值可以是多个像素掩模的形式,每个掩模对应于来自多个微物体特性的微物体特性。每个掩模可以包括关于与该掩模相关联的特定微物体特性的图像的一组像素注释(或一组概率值)。
[0753]
如本文中所描绘,步骤1150详细说明可由系统1200的微物体检测单元1204的阈值引擎1212实施的示例性工作流步骤。在步骤1150,该方法包括应用阈值以确定哪些像素概率至少满足定义的阈值。
[0754]
如本文中所描绘,步骤1160详细说明可由系统1200的微物体检测单元1204的检测引擎1214实施的示例性工作流步骤。在步骤1160,该方法包括基于在阈值应用之后可识别的微物体的数量来确定微物体计数。
[0755]
图12是一个示例性流程图,其示出了根据各种实施方式的用于在微流体设备中检测和表征微物体的方法。例如,可以在图13的系统1400上执行示例性流程图,如下将详细描述。如本文所示,可由系统1400的成像元件1406执行的步骤1310包括接收微流体设备的同一目标区域的第一图像和一个或多个第二图像。根据各种实施方式,第一图像可以是明场(或“照明”)图像,并且一个或多个第二图像中的每一个图像可以是非明场(或非照明)图像,例如荧光图像、红外图像、紫外图像等。根据各种实施方式,第一图像可以是非照明图像(例如,荧光图像、红外图像、紫外图像),并且一个或多个第二图像中的每一个图像可以是非照明图像(例如,荧光图像、红外图像、紫外图像)。根据各种实施方式,第一图像可以是非照明图像(例如,荧光图像、红外图像、紫外图像),并且一个或多个第二图像中的每一个图像可以是照明或非照明图像(例如,荧光图像、红外图像、紫外图像)。尽管不是必需的,但是成像元件1406可以是系统1400的图像获取单元的一部分。
[0756]
在各种实施方式中,可以在选择的时间段内收集微流体设备的目标区域的延时图像。收集延时图像还可以包括选择延时值。延时值1818可以选自时间间隔、时间延迟、循环总数及其组合。在许多情况下延时图像分析可以是有用的。例如,对于追踪与诸如t细胞之类的细胞有关的细胞移动性可以是有用的。通过使用延时,可以基于诸如接近度、轨迹以及用于表征微物体的任何可选参数(诸如圆形度、位置、亮度等)的变化之类的因素来跟随微物体。此外,可以维持图像序列文件以捕获延时图像,该文件被配置为包括时间戳、曝光时间/序列、照明百分比以及理解随时间的变化所必需的其他变量。
[0757]
如本文中所描绘,步骤1320详述了可由系统1400的图像预处理引擎1408实施的示例性工作流步骤。在步骤1320中,该方法包括预处理图像数据以减少第一图像和每个第二
图像中的异常,诸如噪声和/或图像失真。虽然不是必需的,但是预处理引擎1408可以是系统1400的图像获取单元的一部分。
[0758]
如本文中所描绘,步骤1330详述了可由系统1400的图像对准引擎1409实施的示例性工作流步骤。在步骤1330中,该方法包括变换每个第二图像以将第二图像与第一图像光学对准。尽管不是必需的,但是图像对准元件1409可以是系统1400的图像获取单元的一部分。
[0759]
在各种实施方式中,(第一图像和一个或多个第二图像中的)每个图像可以与特定参数相关联,该特定参数例如是滤波器(或荧光)立方体(cube)。此外,每个立方体可沿z轴具有其自己的焦平面(或偏移)。如果生成并分析沿着z轴的多个图像,则可以使用相对于图像的z堆栈的z(d/dz)的导数来识别不连续,这通常可以对应于微物体(例如,细胞或细胞器等)的边缘。此外,可以对分析后的图像进行假着色和分层或组合以生成合成图像。这可能在图像预处理和对准之后发生。
[0760]
如本文中所描绘,步骤1340详述了可由系统1400的机器学习算法(例如,神经网络1410(例如,cnn))实施的示例性工作流步骤。在步骤1340处,该方法包括使用神经网络来处理第一图像中的像素数据以检测存在于目标区域中的微物体。检测存在于目标区域中的微物体可包含检测每个检测到的微物体的对应边界。尽管不是必需的,但是机器学习算法可以是系统1400的微物体检测单元(或微物体检测与表征单元
‑
参见图13)1404的一部分。此外,在步骤1340或在以下讨论的步骤1350之后的后续步骤,检测存在于目标区域中的微物体可包含增大或减小至少一个检测到的微物体或每个检测到的微物体的检测到的边界。边界可以增大或减小例如固定值(例如,+/
‑
0.5微米、+/
‑
1.0微米、+/
‑
1.5微米、+/
‑
2.0微米等)。可替换地,边界可以增大或减小例如相对值(例如,微物体的直径的10%、20%、30%、40%、50%或更大)。可以使用增大边界来确保在每个图像中都捕获到所有的“正”信号。增大边界可用于从图像中消除与微物体相关联的所有信号(例如,在计算背景时)。减小边界可以帮助确保来自相邻微物体的信号不会与目标微物体相关联。
[0761]
如本文所描绘,步骤1350详述了可由系统1400的检测引擎1414实现的示例性工作流步骤。在步骤1350,所述方法包括检测位于所述一个或多个第二图像中的每一个中的每个检测到的微物体的对应边界内的信号。该信号可以是例如荧光信号。检测信号可以包括量化信号的量。尽管不是必需的,但是检测引擎1414可以是系统1400的检测与表征单元1404的一部分。
[0762]
如本文所描绘,步骤1360详述了可由系统1400的数据处理引擎(未示出)实现的示例性工作流步骤。在步骤1360,该方法任选地包括提供与检测到的微物体的一个或多个特性的分布相对应的视觉显示。视觉显示可以是多维的(例如二维或三维)。视觉显示可以识别具有相同特性的微物体的子集。替换地或附加地,视觉显示可允许用户输入以选择微物体的特定子群。尽管不是必需的,但是数据处理引擎可以是系统1400的数据处理单元(未示出)的一部分。
[0763]
图12的方法可以用多种不同的方法来执行。第一图像可以是明场图像。一个或多个第二图像中的每一个图像可以是荧光图像、冷光图像、红外图像、紫外图像等。或者,第一图像和每个第二图像可以是荧光图像、冷光图像、红外图像、紫外图像等。每个图像可以例如捕获在电磁波谱的独特部分中发射的信号。电磁波谱的独特部分可以是重叠的或不重叠
的。微物体可以是细胞。该方法还可以包括接收多个第二图像(例如,两个、三个、四个等),其中每一个图像都可以对应于独特的特性(例如,特定生物分子如细胞表面蛋白的表达)。预处理可以包括针对每个接收到的图像计算失真校正。图像的失真校正可以包括例如使用查找表,该查找表通过检查具有点之间的已知间距的点阵列来计算。变换步骤可以包括对第二图像(例如,荧光图像)进行例如缩放、移位、旋转或其组合,以与第一图像(例如明场图像)对准。根据需要,缩放可以是线性的或更高阶的。移位可以沿着x轴或y轴发生。神经网络可以是卷积神经网络(上面详细讨论)。微物体特性可以包括例如微物体(例如,细胞)的直径、面积、体积、圆形度、亮度、亮度与背景的比率、位置、到最近邻的微物体的距离等。
[0764]
基于荧光、冷光和/或其它特性(例如,尺寸、形状、到最近邻的距离等)将微物体分组成子群可以以类似于荧光激活细胞分选(facs)的方式进行,其中量化荧光信号并且任选地在二维图中绘制前向散射,从而允许识别和选择不同的子群。通常,当涉及多个特性时,图形表示跨越n个维度,其中n表示所涉及的特性的数目(见上文),不管是多个不同的荧光信号,还是替换地或附加地诸如上面提供的那些示例特性之类的各种特性。在一些情况下,二维图可以用于表示n>2个维度,例如通过使用形状、颜色以及符号的存在或不存在来表示附加信息。例如,不同的形状和颜色可表示对应标记的不同表达水平。符号的存在可以表示在用户选择的阈值水平(或更大)存在标记或不存在标记(在背景或低于背景)。可替代地,符号的存在可以表示通过用户选择的最小距离将对应的微物体与其最近邻的微物体分离。
[0765]
通过识别微物体(例如,细胞)并且基于共同特性将这些微物体分组成子群,可以相应地选择和处置特定的微物体。例如,对于如上所述的细胞,当按特性分组时,可以适当地选择细胞以移动到相应坞中(例如,使用介电泳力)用于进一步分析。这样的分析可以在系统150本身上执行,或者可以使用诸如例如流式细胞术标准(fcs)格式之类的任何可用文件格式离线导出以用于在应用(诸如例如flowjo)上的分析。
[0766]
图11是根据各种实施方式的用于自动检测图像中的微物体的系统的示意图。如本文中所描绘,系统1200可包含图像获取单元1202、图像预处理引擎1208、微物体检测单元1204和输入/输出设备(i/o设备)1216,输入/输出设备(i/o设备)1216用于输出检测到的微物体的图像和/或最终计数。图13是根据各种实施方式的用于自动检测和表征图像中的微物体的系统的另一示意图。图13的系统1400包括图像对准引擎1409,但不包括如图11中提供的阈值引擎(以下讨论的阈值引擎1212)。下面关于系统1200的讨论也适用于系统1400中的类似特征(例如,单元、神经网络、成像元件和引擎)。
[0767]
i/o设备1216可以被配置为包括例如系统1000的相关联的显示设备1012和/或输入设备1014(参见图5),其可以是以数据的形式(例如,参数、用户要求等),其可被传送到例如,图像获取单元1202、图像预处理引擎1208、微物体检测单元1204或其组合。i/o设备1216还可以被配置为经由相关联的显示设备1012和/或系统1000的输入设备1014(参见图5)接收用户输入,其可以是可以以数据的形式(例如,参数、用户要求等)被传送到例如图像获取单元1202、图像预处理引擎1208、微物体检测单元1204或其组合。替代地或组合地,计算机系统1000的输入设备1014(参见图5)还可用于将用户输入、参数等直接传递到例如图像获取单元1202、图像预处理引擎1208、微物体检测单元1204或其组合。此外,i/o设备1216可以被配置为在嵌入式显示设备1012上显示从例如检测引擎1214接收的数据或图像。设备1216还可被配置为将数据或图像传输到单独显示器1012以用于数据或图像显示。
[0768]
图像获取单元1202(例如但不限于上文在图1a中所描绘的成像模块164)可包含成像元件1206(例如但不限于成像设备194)。可替代地,单元1202还可以被配置为包括(或容纳)图像预处理引擎1208。
[0769]
成像元件1206可被配置为捕获一或多个图像(或图像数据)。图像可以是例如微流体设备的多个腔室(例如,隔离坞)和/或周围结构(例如,通道)。微流体设备可包括本文所述的各种示例中的任一个(诸如但不限于图1a至图1c、图2a至图2b、图2d和图2g至图2h中所示的微流体设备100、200、230、250、280和290)。微流体设备可包括流动区域,以及可流体连接到流动区域的腔室或多个腔室,其中腔室内的每一个可保持一个或多个微物体。如前所述,腔室可以是例如隔离坞。应当理解,如它们所使用的特定应用所要求的,腔室可以具有任何形状、尺寸或取向。流动区域可以是单个微流体通道,或多个微流体流动通道(例如但不限于,如上面图1a和图2a至图2c所示的通道122,以及上面的图2d至图2f所示的流动通道264),其提供单个流动路径或多个流动路径(例如但不限于图1a和图2b中描绘的流动路径106)。流动区域可与单个腔室或多个腔室流体连通。或者,流动区域可经由可逆封闭件(例如,阀)与单个腔室或多个腔室流体连通。流动区域可被构造成通过如前所述的入口接收材料流。材料流可以包括例如微物体、粘合剂或试剂的流,或包括材料的介质流。
[0770]
在各种实施方式中,成像元件1206还可被配置为在向前发送以供进一步处理之前调整所捕获图像的大小。例如,可以通过合并(例如,四个像素到一个)来完成大小调整。
[0771]
在各种实施方式中,成像元件1206还可以被配置为接收微流体设备的同一目标区域的第一图像和一个或多个第二图像。这样的操作由图13的成像元件1406执行。
[0772]
图像预处理引擎1208可以被配置为根据各种实施方式准备用于进一步分析的图像。例如,如果捕获图像在被引擎1208接收之前被合并,则引擎1208可以将图像的大小调整到全尺寸以补偿合并。引擎1208可以使用例如像素值之间的线性插值来调整大小。引擎1208可以根据需要将图像翻转和/或旋转到期望的方向。引擎1208可以使用例如通过检查点之间具有已知间隔的点阵列计算的查找表来对图像应用失真校正步骤。引擎1208可以被提供为图像获取单元1202的一部分(如图13中的图像获取单元1402的图像预处理引擎1408所示)或者可以是独立的引擎(如图11所示)。
[0773]
要注意的是,图13的系统1400还包括图像对准引擎1409,其配置为变换每个第二图像以将第二图像与第一图像光学对准。或者,此功能可由图像预处理引擎1408执行,共同具有下文关于图11的图像预处理引擎1208描述的特性。
[0774]
在各种实施方式中,引擎1208可以跨图像执行分级亮度过程。例如,引擎1208可使用多项式最佳拟合校正,诸如二次或更高阶多项式最佳拟合校正。任选地,可以使用正弦波或指数函数来代替多项式函数。可通过将图像亮度乘以缩放图像来实现调平,其中在系统校准期间确定最佳拟合函数的期望乘数。引擎1208还可以执行辐射校正,以减去源自例如自发荧光的背景亮度。
[0775]
在各种实施方式中,有时需要荧光图像来使细胞可视化,否则细胞可能出现半透明(例如,dapi可用于染色细胞核作为更好地检测/计数某些细胞的手段)。在那些情况下,引擎1208可以缩放、移位和/或旋转荧光图像以与明场图像对准,其中使用点阵列实现校准。
[0776]
在各种实施方式中,可以使用傅里叶变换来减少来自微流体设备上的导电硅衬底
的干扰。傅里叶变换允许图像的频率表示,其有助于识别与导电硅衬底、诸如光电晶体管阵列相关联的伪像和干扰。时间函数的傅立叶变换本身是频率的复值函数,其绝对值表示原始函数中存在的频率的量,并且其复自变数是该频率中的基本正弦的相位偏移。傅立叶变换被称为原始信号的频域表示。术语“傅里叶变换”是指频域表示和将频域表示与时间函数相关联的数学运算两者。傅里叶变换不限于时间的函数,但是为了具有统一的语言,原始函数的域通常被称为时域。
[0777]
如下文将更详细地论述,与微流体设备(例如,光电晶体管阵列)的特征相比,目标微物体可具有类似的混杂形态。此外,与微流体设备的各种特征相比,诸如细胞的微物体可以是相对半透明的。因此,在识别目标微物体之前识别和移除微流体设备(例如,微流体设备的光电晶体管阵列、壁或管路元件)的不需要的特征可能是有帮助的。傅里叶分析可以用于在微物体检测之前移除例如晶体管图案。该步骤可以发生在引擎1208内,或者任选地,在微物体检测单元1204的检测引擎1214中的后处理步骤中(下面更详细地描述)。
[0778]
在各种实施方式中,对图像进行预处理可以包括利用亮度归一化或对比度增强来减少来自微流体设备上的导电硅衬底的干扰。
[0779]
在各种实施方式中,引擎1208可制作如上文所描述经预处理的图像的副本,且将其传递到各种“客户端”1220(例如gui、图像处理、电影创建、图像捕获、内存/存储器/服务器等)。
[0780]
在各种实施方式中,可以使用分水岭算法来填充原始图像输入上的细胞边界。该算法将图像视为地形图,将目标物体作为集水盆地,将这些物体的边缘作为盆地周围的分水岭线。这样,这种图像分析方法可以更清晰地定义围绕物体(集水盆地)的物体边界(分水岭线)。
[0781]
图11的系统1200的微物体检测单元1204可通信地连接到图像获取单元1202。在各种实施方式中,微物体检测单元1204可以包括神经网络1210、阈值引擎1212和检测引擎1214。应了解,描绘为微物体检测单元1204(本文中所描述)的部分的每一组件(例如,引擎、模块等)可实现为硬件、固件、软件,或其任何组合。
[0782]
在各种实施方式中,微物体检测单元1204可以被实现为具有图像获取单元1202的集成器械系统组件。即,微物体检测单元1204和图像获取单元1202可以容纳在相同的壳体组件中并且经由常规的设备/组件连接部件(例如,串行总线、光缆、电缆等)进行通信。
[0783]
在各种实施方式中,微物体检测单元1204可以被实现为经由光学、串行端口、网络或调制解调器连接而通信地连接到图像获取单元1202的独立计算设备(如图11所示)。例如,图像处理单元可经由lan或wan连接来连接,该lan或wan连接允许将由图像获取单元1202获取的成像数据传送到微物体检测单元1204以供分析。
[0784]
在各种实施方式中,微物体检测单元1204的功能可以在共享计算机处理资源(诸如云计算网络)的分布式网络上实现,该分布式网络经由wan(或等效)连接通信地连接到图像获取单元1202。例如,微物体检测单元1204的功能可以被划分为在诸如amazon web services
tm
的云处理服务上的一个或多个计算节点中实现。
[0785]
神经网络1210可被设计和配置为接收来自图像预处理引擎1208的图像数据输入,根据多个微物体特性来注释图像数据中的像素数据,基于所述像素注释为所述像素数据中的每个像素分配概率值,并输出概率图像数据。神经网络1210可以是卷积神经网络,并且可
以具有利用上述架构示例的任何组合的架构(例如,参见图7、图8和图9a至图9d以及相关联的讨论)。如由系统1400的微物体检测与表征单元1404所做的,神经网络1210可以被设计和配置为处理第一图像中的像素数据以识别存在于目标区域中的微物体的相应边界。如上所述,第一图像可以是明场图像。
[0786]
阈值引擎1212可以被设计和配置为从神经网络1210接收输出概率图像数据并且应用给定阈值以确定哪些像素概率至少满足定义的阈值。例如,在各种实施方式中,微物体类型可以是细胞中心、细胞边界或非细胞类型中的一个,并且包括微物体特性,诸如圆形特征、尺寸特征或两者。可以将分配给像素注释的概率与指定阈值进行比较,以便于进一步分析或消除阈值以下的像素。阈值可以是用户定义的,并且如果像素注释的概率低于阈值,则可以将像素注释重新分类为另一类型。被分配的概率通常指示像素注释的置信度。例如,可以如下分配概率:对于边界为0.15,对于细胞中心为0.8,对于非细胞为0.05。当分析像素簇时,每一像素注释可与相邻像素一起使用以确定正确识别的可能性。
[0787]
图11的系统1200的检测引擎1214可以被设计和配置为接收图像输出数据,针对阈值引擎1212中的阈值分析进行校正,应用图像后处理技术并输出微物体计数。如图13的系统1400的检测引擎1414所提供的,检测引擎1214也可以被设计和配置成量化位于检测到的微物体的相应边界内的第二图像中的信号(例如,荧光、化学发光等)的量。信号的量化可以促进和改善将微物体分组到具有相同特性的子群中。
[0788]
其中一些实例提供如下,可预期许多后处理技术。引擎1214可以被配置为将隔离坞(在微流体设备中)的cad模型对准到实际图像输出以精确地找到坞所在的位置。在荧光图像的情况下(取决于被检测的细胞类型),引擎1214可以被配置为通过减法来移除背景,例如,通过减去从模糊(图像)例程获得的对应图像。引擎1214还可以被配置为将图像输出斩波到用于微物体计数的各个坞中。引擎1214还可以应用可以移除目标物体周围(例如,微流体设备或坞壁)的任何结构的像素掩模。最后,引擎1214可以基于在阈值和后处理之后可识别的物体来确定微物体计数。来自引擎1214的计数和输出图像可以被传送到i/o设备1216,其中它可以例如被存储、传输到存储器存储、被进一步分析和/或被传送到客户端1220(参见图11中的示例)。
[0789]
根据各种实施方式,图像获取单元1202和微物体检测单元1204可集成到单个物理单元中。或者,图像获取单元1202和微物体检测单元1204可以可分离地取向,以独立单元提供,使得单元仍然可通信连接并能够交换信息。
[0790]
上文所描述的微物体检测单元1204的每一组件可为硬件或可部分或全部为软件模块。
[0791]
根据各种实施方式,提供了一种用于表征和选择微流体设备中的微物体的计算设备,其中,所述计算设备包括显示屏幕。计算设备可以被配置为在屏幕上显示用于选择(例如,从所提供的参数列表中选择的)第一参数的菜单,用于表征检测到的微物体组。下面讨论可以包括在参数列表中的参数。计算设备还可以被配置为基于选择的第一参数在屏幕上显示检测到的微物体组的图。
[0792]
根据各种实施方式,所提供的参数列表可以是在菜单内提供的参数的有限列表,列表中的每个参数是可选择的,以基于相关联的参数来表征检测到的微物体组。
[0793]
根据各种实施方式,显示屏幕可以基于选择的第一参数的至少一个选择的阈值来
选择检测到的微物体组的子群,并且可以通过将满足至少一个选择的阈值的子群与检测到的微物体组中的其余微物体进行视觉区分来显示检测到的微物体组。
[0794]
如下面进一步详细讨论的,当观察物体的群体时,创建一组滤波器可以具体地能够将物体的群体分离成n个不同的群体。
[0795]
如上面参考图5所述,可以提供计算系统(或设备)1000以包括i/o设备1216。i/o设备1216可以被配置为经由相关联的显示设备1012和/或输入设备1014接收用户输入,其可以是数据(例如,参数、用户需求等)的形式,所述数据可以被传送到先前讨论的各种单元和引擎(参见例如图12)。替换地或组合地,计算机系统1000的输入设备1014还可用于将用户输入、参数等直接传递到先前讨论的各种单元和引擎(参见例如图12)。此外,i/o设备1216可以被配置为在嵌入式显示设备1012上显示从例如检测引擎1214或本文所讨论的其他各种单元或引擎接收的数据或图像。设备1216还可配置为将数据或图像传送到单独的显示器1012以用于数据或图像显示。
[0796]
现在参考图14和15,作为计算设备(例如,计算系统1000)的一部分而提供了用于表征和选择微流体设备中的微物体的显示屏幕1500。显示屏幕1500可以是图形用户界面(gui)。屏幕1500显示菜单1502,该菜单被配置用于选择从所提供的参数列表中选择的第一参数1503,用于表征检测到的微物体组。第一参数可以是例如最大亮度(或“δ最大亮度(delta max brightness)”,其是已经减去背景亮度的亮度的量度),如图14和15所示。仅作为示例,图14和15的显示示出了在跨微流体设备(例如,芯片)的荧光立方体之一(在本示例中,配置为检测dapi荧光团)下具有已知最大亮度分布的物体组的观察。此外,在该示例中,选择阈值1506以进一步深入探讨目标微物体。在这种情况下,选择的物体的亮度高于~16000δ最大亮度(即,最大背景亮度)。
[0797]
所提供的参数列表可以是例如在菜单内提供的参数的有限列表,列表中的每个参数是可选择的,以基于相关联的参数来表征检测到的微物体组。所提供的参数列表可提供选自由以下各项组成的组中的参数:圆形度、以像素计的x质心(centroidxpixels)、以像素计的y质心(centroidypixels)、以微米计的x质心(centroidxmicrons)、以微米计的y质心(centroidymicrons)、以微米计的x质心的坞相对量(centroidxmicronspenrelative)、以微米计的y质心的坞相对量(centroidymicronspenrelative)、以微米计的最近邻(nearestneighbormicrons)、以微米计的直径(diametermicrons)、以毫微微升计的体积(volumefemtoliters)、以微米计的背景区域(backgroundareamicrons)、平均亮度、最小亮度、最大亮度、中值亮度、背景中值亮度、δ中值亮度(deltamedianbrightness)、δ最大亮度(deltamaxbrightness)、平均亮度的对数值(logmeanbrightness)、最大亮度的对数值(logmaxbrightness)、中值亮度的对数值(logmedianbrightness)、δ最大亮度的对数值(logdeltamaxbrightness)、δ中值亮度的对数值cv(logdeltamedianbrightnesscv)、背景cv(backgroundcv)、δ最大亮度对背景比率的对数值(logdeltabrightnessmaxtobackgroundratio)、δ亮度总和的对数值(logdeltabrightnesssum)、流体通道编号、视场、细胞计数、每坞细胞数。
[0798]
圆形度可以指检测到的目标的圆形度,其可以被量化,例如,在高度非圆形目标的圆形度为0和完美圆形目标的圆形度为1之间,可以由公式4*π*区域像素/周长像素2来定义。
[0799]
以像素计的x质心可以指目标沿着x轴的质心,其可以以像素定义。
[0800]
以像素计的y质心可以指目标沿着y轴的质心,其可以以像素定义。在各种实施方式中,图上的y坐标可与相关联的图像上的y坐标相反,因此目标位置可以沿着y轴颠倒。
[0801]
以微米计的x质心可以指目标沿着x轴的质心,其可以以微米定义。
[0802]
以微米计的y质心可以指目标沿着y轴的质心,其可以以微米定义。
[0803]
以微米计的x质心的坞相对量可以指微物体的中心沿着微物体所在的隔离坞的x轴的位置,如相对于隔离坞内(或边缘或角落处)的选定原点以微米为单位进行测量。
[0804]
以微米计的y质心的坞相对量可以指微物体的中心沿着微物体所在的隔离坞的y轴的位置,如相对于隔离坞内(或边缘或角落处)的选定原点以微米为单位进行测量。
[0805]
以微米计的最近邻可以指距检测到的最近目标的微米数。
[0806]
以微米计的直径可以指如从区域计算的以微米计的有效测量的目标直径。
[0807]
以毫微微升计的体积可以指微物体的体积的估计,其可以主要取决于微物体的形状及其直径(或长轴和短轴,如果微物体具有椭球形状的话)。
[0808]
以微米计的背景区域可以指在背景计算中使用的区域,以微米来定义。这可以被称为在选择的目标周围的“甜甜圈”区域,排除坞壁和检测到的附近目标。以像素计的背景区域是相同的参数,除了以像素而不是微米来定义之外。
[0809]
平均亮度可以指检测到的目标边界内的区域的平均亮度。
[0810]
最小亮度可以指检测到的目标边界内的区域的最小亮度。
[0811]
最大亮度可以指检测到的目标边界内的区域的最大亮度。
[0812]
中值亮度可以指检测到的目标边界内的区域的中值亮度。
[0813]
背景中值亮度可以指检测到的目标周围的背景区域的中值亮度。
[0814]
δ中值亮度可以指检测到的目标的中值亮度和周围背景区域的中值亮度之间的差值。
[0815]
δ最大亮度可以指检测到的目标的最大亮度和周围背景区域的中值亮度之间的差值。
[0816]
平均亮度的对数值可以指检测到的目标的平均亮度的对数(以10为底)值。
[0817]
最大亮度的对数值可以指检测到的目标的最大亮度的对数(以10为底)值。
[0818]
中值亮度的对数值可以指检测到的目标的中值亮度的对数(以10为底)值。
[0819]
δ最大亮度的对数值可以指检测到的目标的最大亮度与周围背景区域的中值亮度之间的差值的对数(以10为底)值。
[0820]
δ中值亮度的对数值是指检测到的目标的中值亮度与周围背景区域的中值亮度之间的差值的对数(以10为底)值。
[0821]
cv代表变化系数,其可以表示目标亮度的标准偏差与中值目标亮度的比率。
[0822]
背景cv代表背景区域的变化系数,其可以表示背景亮度的标准偏差与中值背景亮度的比率。
[0823]
δ最大亮度对背景比率的对数值可以是指最大目标和中值背景亮度之间的差值除以中值背景亮度的对数(以10为底)值。
[0824]
δ亮度总和的对数值可以指平均目标和中值背景亮度之间的差值乘以面积(其可以以像素为单位)的对数(以10为底)值。
[0825]
流体通道编号可以是指在其中发现目标的通道的流体通道编号。该数可以是0至4,但是如果在芯片定义文件中没有找到数字,那么该数也可以是不同的值,例如
‑
1。
[0826]
视场可以指可以由成像系统在单个时间点观察到的微流体芯片的部分。这可以主要取决于成像系统相对于微流体芯片的位置和由成像系统使用的物镜的功率。该参数可以允许在每个视场的基础上表征细胞。
[0827]
细胞计数可以指由成像系统检测到的细胞的数量的计数;可以在每个视场的基础上或横跨整个微流体芯片对细胞进行计数。
[0828]
每坞细胞数可以指在每个隔离坞中检测到的细胞数量的计数。
[0829]
屏幕1500还可以显示图1504,该图1504可以基于选择的第一参数来可视地表示检测到的一组微物体。显示屏幕可以基于用于选择的第一参数的至少一个选择的阈值1506来选择检测到的一组微物体的子群,并且可以通过将满足至少一个选择的阈值的子群与检测到的微物体组中的其余微物体进行视觉区分来显示检测到的微物体组。
[0830]
选择可以在如图14中提供的图1504上发生,其中阈值1506在图15中被表示为竖线,区分微物体的第一子群1508与微物体的第二子群1510,它们中的任一个可以被认为是满足设定的阈值的子群。在图15中,第二子群1510是满足阈值的子群(1538个微物体中的233个)。因此,阈值可以包括上阈值。或者,阈值可以包括下阈值、或下阈值和上阈值两者。
[0831]
在图15中,子群1508和1510通过颜色来区分,颜色可以是灰度或来自视觉光谱的任何颜色。视觉区分可以采取许多其它形式,包括例如图上的数据点的尺寸(例如,一个子群的数据点的尺寸大于另一个子群的数据点的尺寸)和数据点的符号(例如,“x”用于一个子群,而“*”用于另一个子群),它们中的任一个可以与颜色组合以增加差异性。
[0832]
根据各种实施方式,显示屏幕可以启用用于阈值选择的可滑动选择器。所述可滑动选择器可以提供为例如如图15所示的竖线。替换地或附加地,显示屏幕可以启用用于阈值选择的点选择器。替换地或附加地,显示屏幕可以启用用于阈值选择的用户录入的值。替换地或附加地,并且如图21(下面详细描述)所示,显示器可以启用区域选择,由此选择图的区域,在该区域内是满足阈值的微物体。这种区域选择特征可以是以圆形、正方形和定义目标区域所需的任何其他可想到的形状的形式。
[0833]
根据各种实施方式,并且如图16和17中所示,在屏幕1600上显示的菜单1602还可以被配置用于选择从提供的参数列表中选择的第二参数1604,用于表征也由第一参数1606表征的检测到的一组微物体。在图16和17中所示的示例的情况下,第二参数是在荧光立方体(在示例中,配置为检测cy5荧光团)下最大亮度的对数(或“δ最大亮度的对数值”,这是一种亮度量度,其中背景亮度已经被减去,并且结果值被转换成对数值,该对数值可以以10、e或任何其他合适的对数基数为底)。第二参数可以作为滤波器添加在第一参数(在本例中,配置为检测dapi荧光团的立方体下的δ最大亮度)下,以在这两个参数下分析微物体。
[0834]
根据各种实施方式,并且如图16所示,在屏幕1600上显示的菜单1602可以与基于选择的第一参数1606和第二参数1604显示微物体的表征的图相关联。例如,可以进一步启用显示屏幕1600以显示满足第一参数1606的至少一个阈值且由第二参数1604表征的检测到的微物体的子群1608的图。
[0835]
根据各种实施方式,并且如图17所示,显示屏幕还可以基于用于选择的第二参数1604的至少一个选择的阈值1612来选择检测到的微物体的子群1608的子集1610。图17将这
样的至少一个阈值示出为具有上阈值和下阈值两者,但是如本文所讨论的,可以单独使用任一个阈值。
[0836]
根据各种实施方式,所述计算设备还被配置为接受用户指令和/或在屏幕上显示指令,以用于重新定位检测到的微物体组、检测到的微物体组的子群或所述子群的子集中的一个。例如,可以如本文其他地方所述的那样进行重新定位。
[0837]
根据各种实施方式,并且如图18和19所示,计算设备1000还可以被配置为在屏幕1800上显示用于选择从所提供的成像参数列表中选择的成像参数1804的成像菜单1802,用于对微流体设备的至少一部分进行成像。计算设备还可以被配置为在屏幕上显示用于选择从所提供的成像参数列表中选择的多个成像参数1804/1806/1808的成像菜单,用于对微流体设备的至少一部分进行成像。虽然图18和19示出了三种不同的成像参数选择,但是成像参数的数量相应地不受限制。在各种实施方式中,成像参数的数量可以在从1到5、1到10等的范围。
[0838]
根据各种实施方式,成像参数可以包括滤波器或“立方体”类型。基于穿过立方体并被检测到的电磁波谱的部分来选择立方体类型。立方体类型可以包括明场(例如,未经滤波的,对整个可见光谱进行采样;在图18中被识别为“oep”),被配置为检测特定荧光团(例如,dapi、德克萨斯红(texas red)、cy5、fitc等)的各种荧光滤波器、红外滤波器、紫外滤波器等。成像参数还可以包括至少一个子参数1814。至少一个子参数1814或多个子参数可以选自由以下各项组成的组:照明百分比、以毫秒计的曝光时间、以微米计的用户偏移(横跨z轴)及其组合。
[0839]
根据各种实施方式,计算设备还可以被配置为在屏幕上显示算法选择器1810,用于从所提供的算法列表中选择用于分析通过每个选择的成像参数(例如,图18和19的1804/1806/1808)获取的图像的算法,以及检测一组微物体。因此,每个成像参数可以被提供有用于选择要针对该特定参数应用的算法的字段。在各种实施方式中,可以在成像参数(例如,明场立方体)中的一个的图像集合上使用一个“主”算法,并且因此可以使用在主图像集合中检测到的微物体的位置来分析其它选择的成像参数(例如,荧光立方体)的图像集合。
[0840]
根据各种实施方式,并且如图19所示,所显示的成像菜单还被配置为提供延时选择器1816。延时选择器使得能够选择用于在选定时间段内对所述微流体设备的至少一部分进行成像的延时值。延时选择器1816还可以包括用于延时值1818的选择器。延时值1818可以从包括时间间隔、时间延迟、循环总数及其组合的组中选择。在许多情况下,延时图像分析可以是有用的。例如,对于跟踪与诸如例如t细胞之类的细胞有关的细胞移动性是有用的。使用延时,可以基于诸如接近度、轨迹和用于表征微物体的任何可选择参数(诸如圆形度、位置、亮度等)的变化来跟踪微物体。此外,可以维持图像序列文件以捕获延时,该文件能够包括时间戳、曝光时间/序列、照明百分比以及理解随时间的变化所需的其他变量。
[0841]
现在参考图20,示出了显示2000。如所图示,计算设备可以被配置为在屏幕2010上显示检测到的每个单独的微物体的至少一个图像2020。可以用彩色符号(覆盖在微物体或细胞上,或围绕微物体或细胞)或使用选择的微物体或细胞的假彩色显示来在图像中识别微流体设备中的微物体(或微流体芯片中的细胞)。在各种实施方式中,针对每个检测到的微物体所显示的图像的数量等于选择的成像参数的数量。例如,参考图17和18,选择三个成像参数(即,oep、dapi和cy5)。这样,在图20中提供的显示示出了,对于在屏幕2010上竖直地
前进的每个微物体,显示三个图像,分别对应于oep、dapi和cy5立方体。因此,每个图像可以与特定参数(在这种情况下,滤波器立方体)相关联。此外,每个立方体可以沿着z轴具有其自己的焦平面,或者可以获取沿着z轴的一系列图像。如果沿着z轴获取多个图像,则相对于图像的z堆栈的z(d/dz)的导数可以用于识别不连续,这通常可以对应于微物体(例如,细胞、细胞器等)的边缘。此外,可以对分析后的图像进行假着色和分层或组合以生成合成图像。这可以在图像预处理和对准之后发生。
[0842]
现在参考图21,示出了显示2100。如所图示,计算设备可以被配置为在屏幕2110上显示用两个不同荧光标记染色的微物体(例如细胞)的图,其中一个在x轴上表示且另一个在y轴上表示。该图还图示了三个不同组/类型的细胞,其中每一个可以一般地通过区域选择或者通过上面讨论的阈值步骤进行选择。在任一种情况下,可以选择图中的一个区域,在该区域内微物体满足阈值或是目标。这种区域选择特征2120可以是以圆形、正方形以及定义目标区域所需的任何其他可想到的形状的形式。在图21中,已经选择具有利用pe2标记的高水平的标记的细胞。
[0843]
微物体的自动检测。提供了用于自动检测图像中的目标微物体的方法。与图像中的一个或多个其他特征相比,目标微物体可以具有相似的混杂形态。例如,在一些情况下,布置在微流体设备内的微物体的检测可能由于具有与目标微物体类似的形态的微流体设备的特征而复杂化。例如,在其中细胞具有10微米的直径的情况下,可能难以将细胞与在两个维度上具有10微米节距的光电晶体管阵列区分(即,每个光电晶体管具有10微米
×
10微米的尺寸)。此外,与微流体设备的各种特征相比,诸如细胞的微物体可以是相对半透明的。因此,在识别目标微物体之前识别和移除微流体设备(例如,微流体设备的光电晶体管阵列、壁或管路元件)的不需要的特征可能是有帮助的。
[0844]
在一些实施方式中,单个像素可对应于微流体设备中的基本上小于目标微物体的横截面积的面积。例如,微物体可具有约80平方微米的横截面积,而像素可对应于约2平方微米的面积。在这样的实施方式中,将需要一个或多个像素簇来覆盖微物体的横截面积(例如,在前述示例中,将占用基本上40个像素来覆盖微物体的横截面积,或24个像素以覆盖微物体的圆周的横截面积)。
[0845]
像素簇的分析还可以包括除了像素簇的区域和圆周之外的多个其他特征。可以根据全局形态(即,一个或多个像素簇的集合的大小和形状)、局部形态(即,个体像素簇的大小和形状)、正和负的光强度值l
i
和基于这些元件的组合的其他特征(例如,作为尺寸的函数的光强度)来分析像素簇。可以使用各种方法来分析包括传统机器学习技术的一组像素簇,其中针对微物体的图像集合计算上述特征并且用于训练分类器以基于相同特征识别新图像中的目标微物体。
[0846]
微物体识别(下文将更详细地讨论)还可以与使用力、诸如oet或dep力对操纵或重新定位微物体结合使用。在一些实施方式中,在特定管路元件(例如通道或隔离坞)或微流体管路的位置中识别的微物体可移动到(即,重新定位在)另一类型的管路元件或微流体管路的位置。例如,微物体可以在微流体管路中的通道中被识别并且被重新定位在微流体管路中的隔离坞中(在本文中被称为“围住”微物体)。相反,在微流体管路中的隔离坞中识别的微物体可以移动到微流体管路中的通道中。可替换地,一个或多个微物体可以在一个隔离坞中被识别并且被重新定位在空的隔离坞中(在本文中被称为“重新围住”微物体)。根据
实施方式,可以使用包括oet和dep力的各种机制来移动微物体。类似地,微物体可以被顺序地(即,一次一个微物体)、并行地或其任何组合地(例如,并行地顺序地重新定位多个细胞的组)重新定位。
[0847]
在微物体从通道重新定位到单独的隔离坞(或从单独的隔离坞重新定位到另一个隔离坞)的情况下,可以使用不同的算法来将微物体分配到空的隔离坞。在一些实施方式中,算法将用于将微物体分配至空的隔离坞,使得微物体与坞之间的距离(即,微物体在重新定位期间必须行进的轨迹或路径)被最小化。在这些实施方式中,使用移动微物体的力(例如oet或dep力)也被最小化,因为微物体仅需要行进最小距离以被重新定位在空的隔离坞中。
[0848]
在这些实施方式中,通道中的局部微物体密度(即,通道的特定空间区域内的微物体的数量)可以用于确定将通道中的特定微物体分配给空的隔离坞的合适的算法。局部微物体密度可以以多种方式来计算。在一些实施方式中,局部微物体密度可以基于固定尺寸区域(例如,200平方微米,或通道100微米长的区域,并且延伸通道的宽度)或使用以各种尺寸区域的方法来计算。在其他实施方式中,可基于所识别微物体的簇或所识别微物体之间的距离来计算局部微物体密度。局部微物体密度也可通过将通道细分为网格或使用“滑动窗口”技术来计算通道的重叠区域的密度来计算。
[0849]
如果局部微物体密度高于阈值t1
密度
,则微物体可以被分配给最近的空的隔离坞,使得微物体和隔离坞之间的距离被最小化。如果局部微物体密度低于特定阈值t1
密度
,则可以将空的隔离坞分配给最接近空的隔离坞的微物体,使得微物体与隔离坞之间的距离被最小化。在一些情况下,可以基于空坞的数目以及在预定邻域区域内的通道内的微物体的密度来计算局部t1
密度
。
[0850]
计算微物体和空的隔离坞之间的距离的不同方法(即,微物体或路径在围住期间需要移动的轨迹)可以用于将特定的微物体分配给空的隔离坞。在一些实施方式中,可以仅基于使用oet和/或dep力的最优轨迹来计算微物体与潜在隔离坞之间的距离。在一些情况下,使用oet或dep力的最优轨迹涉及正交运动路径的组合(例如,仅沿着y轴和x轴的不同移动的组合)以移动微物体。在其他情况下,距离可以基于微物体和隔离坞之间的最短可能路径而没有约束(即,微物体可以沿着任何路径行进以到达隔离坞)。在大多数实施方式中,使用由用于计算距离(轨迹)的算法确定的相同轨迹,微物体将被重新定位(即,被“围住”或“重新围住”)。
[0851]
类似地,在将大量微物体分配给隔离坞的情况下(或反之亦然),可以使用不同的算法来计算微物体对坞的最佳分配(或反之亦然)。这些算法可以使用确定微物体到隔离坞分配的不同计算方法,该方法使需要移动微物体的总距离(即,轨迹的长度)最小化,以便将微物体重新定位到隔离坞中。例如,算法可以使用所有轨迹的长度的总和作为启发式以最小化微物体需要行进的距离。在一些实施方式中,可以将诸如微物体在重新定位期间移动的最大距离之类的约束引入到最优分配的计算中。可以使用各种组合算法来计算微物体和隔离坞之间的最优分配。合适的算法包括:例如贪心算法、非线性优化、基于启发式的算法和受约束的搜索。其他类似的算法在本领域中是已知的。
[0852]
一旦针对微物体计算了最优分配和轨迹,就可以使用诸如oet和/或dep的力来将微物体移动到其分配的坞。微物体可以使用光的图案(例如“光笼”)重新定位,所述光的图
案围绕微物体并使微物体受到oet和/或dep力或者通过使用棒或类似结构来对微物体施加oet和/或dep力。通常,光笼是基本上包围微物体(例如,正方形、圆形或多边形)的结构。然而,在一些情况下,光笼可包含裂口或开口,使得微物体未被完全封闭。
[0853]
如上所述,在大多数实施方式中,微物体将根据用于计算微物体到坞的最佳分配的距离(轨迹)而被移动。根据实施方式,微物体可以顺序地或并行地移动(例如,并行地顺序地移动细胞组)。在微物体被并行移动的实施方式中,用于计算最优分配或轨迹的算法可以比较轨迹并且确保微物体在它们通过修改微物体到坞的轨迹和分配而被并行地移动时不冲突。在特定实施方式中,算法可以在识别潜在碰撞时将微物体分配“交换”到坞。在该实施方式中,当第一微物体的最优轨迹与第二微物体的最优轨迹相交时,第一微物体的最优轨迹被分配给第二微物体,并且第二微物体的最优轨迹被分配给第一微物体。在另一特定实施方式中,该算法延迟第一微物体的重新定位,直到第一微物体和第二微物体可以在不冲突的情况下沿着其相应轨迹移动的时间为止。
[0854]
在一些情况下,微物体密度可能很高,使得微物体在将微物体分配到隔离坞之前需要彼此分离,并重新定位(即,“围住”或“重新围住”)微物体。例如,微观物体密度可能太高,以至于不能使用oet和/或dep力围住微物体,因为用于使用oet和/或dep力重新定位物体的光笼不能在单个微物体上使用而不干扰其他微物体。在对施加到微物体的oet和/或dep力的量最小化是很重要的情况下,这种干扰特别令人担忧。例如,微物体可能受到oet和/或dep力或oet力的副产物(例如与oet和/或dep力相关联的电解)的影响的情况。在这些情况下,在微物体识别(例如,半径、质心、周界和微物体的位置)期间产生的信息可以用于移动微物体,使得微物体可以被围住或重新围住,而不干扰其他细胞(在本文中被称为“分离”微物体)。
[0855]
为了识别在围住之前需要分离微物体的实例,可以基于所定义的空间区域来计算局部微物体密度,并且将其与第二阈值t2
密度
进行比较。或者,可以计算微物体之间的距离(例如,微物体的质心之间的距离、微物体的周界之间的距离),并且用于确定是否需要分离微物体。然而,如可以理解的,在一些情况下,微物体之间的距离可能太小而无法将微物体识别为单独的微物体和微物体。在这些情况下,微物体可以在重新定位(即,“围住”)微物体之后被重新识别,以确保每个隔离坞包含单个微物体。
[0856]
在一些实施方式中,光盒用于在围住(或重新围住)之前或期间分离微物体。当形成光盒(或光笼)时,可使用除法算法来计算顶点组,该组顶点将微流体设备的空间区域中的每个所识别的微物体(例如,通道或隔离坞的部分)与同一空间区域中的其他微物体隔离。然而,如本领域技术人员可以理解的,可以绘制该组顶点,使得只有微流体设备的空间区域中的微物体的子集与其他微物体分离。例如,该组顶点可以仅将空间区域中的微流体的子集分开,这是因为它们与其他微流体非常接近而需要重新定位。
[0857]
在特定实施方式中,使用每个微物体的质心来计算delaunay三角剖分。delaunay三角剖分产生连接微物体的质心的一组三角形。然后基于使用delaunay三角剖分计算的三角形的环圆计算维诺图。维诺图是将空间区域划分为一组子区域的顶点组,使得该组顶点和微物体的质心之间的距离被最大化。计算将每个细胞与空间区域中的其他细胞分区的顶点组的其他方法在本领域中是已知的。
[0858]
一旦已经计算了该组顶点,该组顶点可以与oet和/或dep力结合使用以移动微物
体。图6a至图6f示出了根据本发明的各种实施方式的微物体分离。图6a示出了在指定的空间区域和对应的维诺图中的一组微物体的delaunay三角剖分。图6b示出了没有delaunay三角剖分的相应维诺图。图6c示出了通常用于移动覆盖在维诺图上的微物体的光笼。图6d示出了通过计算图6c的典型的光笼和维诺图之间的相交而生成的改进的光笼。图6e示出了使用改进的光笼彼此紧密接近的微物体的分离。图6f示出了分离的微物体。
[0859]
在一个实施方式中,通过生成链接该组顶点的顶点的子集的多个光条来生成一个或多个光笼,其中顶点的子集包括最接近并围绕要移动的每个微物体的顶点(或由最接近并围绕要移动的每个微物体的顶点组成)。举例来说,图6b中所展示的多边形形状中的任一者可用于界定围绕微物体的光笼。在某些实施方式中,以此方式形成的光笼可以收缩,从而将光笼内的微物体与指定的空间区域中的其他微物体和/或光笼分离。在其他实施方式中,可以通过在多边形形状(参见图6c)上叠加“标准”光笼设计(例如,正方形或圆形)并生成由标准光笼设计和多边形形状的交点产生的光笼来限定光笼,如图6d所示。在该示例中,顶点和光笼的交点被定义为其中光笼不相交或重叠的区域,从而允许将“标准”光笼重新绘制,使得它不干扰其他微物体。无论形成方法如何,一旦形成,则通过将微物体彼此远离地移动,可以使用光笼以通过对微物体重新定位来分离微物体。在一些情况下,可以在微物体被重新定位时重新绘制改进的光笼,使得当微物体处于最终位置时绘制原始的光笼。
[0860]
在各种实施方式中,非标准(或“改进的”)光笼可用于对微物体重新定位。根据实施方式,用于两个邻近微物体的改进的光笼被用于在计算和选择轨迹并为每个微物体分配给隔离坞之前或之后对微物体重新定位。在一些实施方式中,改进的光笼被用于迭代地或顺序地对微物体重新定位。此外,改进的光笼可用于将微物体放置在其分配的隔离坞中。在一些实施方式中,最靠近空间区域的周界或在空间中最靠近在一起的微物体可以在重新定位或围住其他微物体之前被重新定位或围住。
[0861]
图4a、图4b和图4c示出了使用光盒围住微物体。在图4a中,微流体管路的通道内的生物细胞在识别细胞和将细胞分配至坞之后立即显示。围绕细胞的黑色框说明细胞识别算法的输出,即,由围绕细胞的框指示的细胞的识别。围绕黑色框的白色框是用于重新定位细胞的oet力的光笼。最后,将围绕细胞的盒连接到隔离坞的黑线图示了在将细胞分配给隔离坞时计算出的最优轨迹。图4b示出了在稍后时间点的相同细胞,其中光笼已经沿着其选择的轨迹移动。图4c示出了在第三时间点的相同细胞,其中光笼已经几乎完全沿着其选择的轨迹移动以将细胞定位在隔离坞中。
[0862]
在移动微物体时,可以逐渐加速oet和/或dep用于移动细胞的速度,以便“增加”微物体的运动并确保微物体不会从它们的光笼中丢失。例如,在特定实施方式中,微物体的初始速率可以从低初始速率逐渐加速到更高的行进速率。这种逐渐加速可以在微物体被自动重新定位(例如,划线、重新定位和输出)的情况下以及在微物体被手动重新定位的情况下(例如,手动选择和移动细胞)应用。类似地,当微物体到达其轨迹的末端并且处于它们的最终位置时,高行进速度可以“下降”到最终速度为零。
[0863]
本发明的方法可用于自动检测所有类型的微流体设备中的微物体。在某些实施方式中,微流体设备可包括流动区域(或流动通道)和一个或多个腔室(或隔离坞)。可替代地或另外地,微流体设备可为电动设备,例如光学致动的电动设备,或可包含被配置为用于电动力学的区域。如果阵列中的晶体管具有与被检测的微物体的横截面积相似的区域,则电
动设备,特别是具有晶体管阵列(例如,光电晶体管)的电动设备可以提供特别复杂的背景。这里描述的方法在检测设置在这种设备中的微物体时特别有效。
[0864]
在某些实施方式中,本发明还提供了用于存储用于执行本文描述的任何方法的非暂时性机器可读指令的机器可读存储设备。机器可读指令可以控制用于获得图像的成像设备和/或对准图像、生成差分图像和/或分析差分图像的处理器(例如,在计算设备中)。
[0865]
本文中所描述的方法体系取决于应用可通过各种手段来实现。举例来说,可在硬件、固件、软件或其任何组合中实施这些方法。对于硬件实现,处理单元可被实现在一个或多个专用集成电路(asic)、数字信号处理器(dsp)、数字信号处理设备(dspd)内,可编程逻辑器件(pld)、现场可编程门阵列(fpga)、处理器、控制器、微控制器、微处理器、电子设备、被设计为执行本文描述的功能的其他电子单元或其组合。
[0866]
在各种实施方式中,本教导的方法可以实现为固件和/或软件程序以及以诸如c、c++等的常规编程语言编写的应用,如果实现为固件和/或软件,则可以在其中存储用于使计算机执行上述方法的程序的非暂时性计算机可读介质上实现本文所述的实施方式。应当理解,可以在诸如图5的计算机系统1000的计算机系统上提供本文描述的各种引擎,由此处理器1004将执行由这些引擎提供的分析和确定,经受由存储器组件1006/1008/1010中的任一者或其组合提供的指令及经由输入设备1014提供的用户输入。
[0867]
虽然结合各种实施方式描述了本教导,但是并不旨在将本教导限制于这些实施方式。相反,如本领域技术人员所理解的,本教导包括各种替代、修改和等同物。
[0868]
此外,在描述各种实施方式时,说明书可能已经将方法和/或过程呈现为特定步骤顺序。然而,就方法或过程不依赖于本文所述的步骤的特定顺序而言,方法或过程不应限于所描述的特定步骤顺序。如本领域普通技术人员将理解的,也可以是其他步骤顺序。因此,在说明书中阐述的步骤的特定顺序不应当被解释为对权利要求的限制。另外,针对所述方法和/或过程的权利要求不应限于所撰写的顺序中的其步骤的执行,且所属领域的技术人员可容易地了解,所述顺序可变化且仍保持在各种实施方式的主旨和范围内。
[0869]
本文描述的实施方式可以用其他计算机系统配置来实践,包括手持式设备、微处理器系统、基于微处理器的或可编程的消费电子产品、微型计算机、大型计算机等。各实施方式还可在分布式计算环境中实践,其中任务由通过网络链接的远程处理设备来执行。
[0870]
还应当理解,本文描述的实施方式可以采用涉及存储在计算机系统中的数据的各种计算机实现的操作。这些操作是需要对物理量进行物理操纵的那些操作。尽管不是必须的,这些量通常采取以下形式:存储、传送、组合、比较和以其他方式操纵的电或磁信号的形式。此外,所执行的操纵通常参考诸如“产生”、“识别”、“确定”或“比较”的术语。
[0871]
形成本文所描述的实施方式的一部分的任何操作都是有用的机器操作。本文描述的实施方式还涉及用于执行这些操作的设备或设备。本文描述的系统和方法可以是为了所需目的而特别构造的,或者它可以是由存储在计算机中的计算机程序选择性地激活或配置的通用计算机。具体地,各种通用机器可以与根据本文的教导编写的计算机程序一起使用,或者可以更方便地构造更专用的装置来执行所需的操作。
[0872]
某些实施方式还可以体现为计算机可读介质上的计算机可读代码。计算机可读介质是可以存储数据的任何数据存储设备,之后可以由计算机系统读取。计算机可读介质的示例包括硬盘驱动器、网络附加存储(nas)、只读存储器、随机存取存储器、cd
‑
rom、cd
‑
r、
cd
‑
rw、磁带和其他光学、闪存和非光学数据存储设备。计算机可读介质还可以分布在网络耦合的计算机系统上,从而以分布式方式存储和执行计算机可读代码。
[0873]
实施例
[0874]
一般材料和方法
[0875]
系统和微流体设备:optoselect存芯片由berkeley lights,inc.制造并由光流体仪器控制,该仪器也由berkeley lights,inc.制造,用于上述实验。光流体仪器包括:芯片安装台,与温度控制器耦合;泵和流体介质调节组件;以及包括照相机和适于激活芯片内的光电晶体管的结构化光源的光学系统。optoselect
tm
芯片包括配置有optoelectropositioning(oep
tm
)技术的衬底,该技术提供光电晶体管激活的oet力。该芯片还包括多个微流体通道,每个微流体通道具有与其流体连接的多个nanopen
tm
腔室(或隔离坞)。每个隔离坞的体积约为1
×
106立方微米。该微流体设备包括经调节的内表面,如2017年5月26日提交的题为“covalently modified surfaces,kits and methods of preparation and use(共价修饰的表面、套组和制备方法及用途)”的pct申请号pct/us2017/034832所述,其内容在此通过引用整体并入。水(250微升)在使用前以12微升/秒流过微流体设备。
[0876]
培养准备:然后将培养基(如下)以5微升/秒流过微流体设备5分钟。
[0877]
灌注方式:灌注方法是以下两种方法之一:
[0878]
1.以0.01微升/秒的速度灌注2小时;以2微升/秒的速度灌注64秒;并重复。
[0879]
2.每60秒以2微升/秒的速度脉冲4微升;并重复。
[0880]
实施例1.抗原特异性细胞因子释放测定
[0881]
实验设计:在微流体芯片上的干扰素γ(ifnγ)释放测定中,在存在呈递slc45a2肿瘤特异性抗原的肿瘤细胞的情况下测试slc45a2特异性t细胞的激活。用于人ifnγ(目录号740352,biolegend)的捕获珠流入在t细胞培养基(adv.rpmi+10%人ab血清(目录号35
‑
060
‑
ci,corning)+gln+50um 2
‑
巯基乙醇(bme,目录号31350
‑
010,gibco,thermofisher scientific)中的个体微流体芯片(berkeley lights,inc.)。珠在cy5信号通道中可观察到的范围内表现出自发荧光。因此,在图12的过程中在cy5通道中使用了明场图像和检测最大荧光强度的图像,并在附录中进一步描述,以确定每个捕获珠的存在,并最终采用如上所述的软件实现的方法将单个珠引导到微流体芯片的每个隔离坞。装载珠后,针对slc45a2抗原进行扩增的t细胞(如2018年7月20日提交的题为“antigen
‑
presenting surfaces,covalently functionalized surfaces,activated t cells and uses thereof(抗原呈递表面、共价功能化的表面、活化的t细胞及其用途)”的pct申请号pct/us2018/043146中所述,在此全文引入并入本文)流入微流体芯片并单独加载到每个隔离坞中(作为单个t细胞,但该方法不限于此。每个隔离坞中使用多于一个t细胞)。使用光学致动的介电泳(dep)力选择性地移动t细胞,以将一个t细胞放置在靠近每个隔离坞中先前加载的珠的位置,如图22所示。在图22中,暗球(1402)为捕获珠,亮球(1404)为t细胞,证明本文描述的确定微物体身份和选择性结果递送的方法成功地区分了不同类型的微物体并且仅移动了所需的物质。
[0882]
从淋巴母细胞瘤细胞crl
‑
1992
tm
)获得的t2肿瘤细胞系根据标准程序在体外生长,然后在含有3微克/毫升β2
‑
微球蛋白(cat#m4890,sigma
‑
aldrich)和40微克/毫升slc45a2肿瘤特异性抗原肽(biolegend,定制产品,slysyfqkv(seq id no.1))或tcl1肿
瘤特异性抗原肽(biolegend,定制产品,sllpimwql(seq id no.2))的培养基中生产,以允许抗原在肿瘤细胞表面呈递。每个单独的标记肿瘤细胞群都流入在t细胞培养基(adv.rpmi+10%人ab血清+gln+50um 2
‑
巯基乙醇)的微流体设备的不同扇区,其中第一个扇区容纳tcl 1肿瘤细胞,第二个扇区容纳slc45a2肿瘤细胞。分别用tcl1肿瘤特异性抗原或slc45a2肿瘤特异性抗原脉冲的肿瘤细胞组(~2
‑
5)被选择性地加载到隔离坞的经限定且不同的子集中,使用一系列光学诱导的dep力,最大限度地提高t细胞、肿瘤细胞和珠之间的接触。dep力的序列还将珠和细胞组合集中到在隔离坞的隔离区域内的隔离坞的下部。通常,在加载肿瘤细胞和t细胞后,每个隔离坞包含每个t细胞0
‑
5个肿瘤细胞,如在微流体设备加载过程结束时获得的明场图像(bf)所示,微流体设备包含含有用slc45a2特异性t细胞分离的tcl1脉冲的肿瘤细胞的第一扇区(图23a、23b)和含有用slc45a2特异性t细胞分离的slc45a2脉冲的肿瘤细胞的第二扇区(图24a、24b)。如图23a所示,珠、slc45a2特异性t细胞和多个tcl1脉冲肿瘤细胞的组合在所示的所有三个隔离坞中都是可见的。图23b显示了左手隔离坞框内区域的放大图,以清楚地显示珠1402、sc45a2特异性t细胞1404和tcl1脉冲肿瘤细胞1406组。图24a显示了具有珠、slc45a2特异性t细胞和slc45a2脉冲的肿瘤细胞的选定坞。图24b显示了图24a的中央隔离坞的盒内区域的放大图,清楚地显示珠1402、slc45a2特异性t细胞1404和tcl1脉冲肿瘤细胞1408。在用slc45a2肿瘤相关抗原脉冲的t2细胞存在的情况下,预计slc45a2特异性t细胞会分泌ifnγ,而在存在呈递tcl1肿瘤相关抗原的t2细胞的情况下,预计slc45a2特异性t细胞不会分泌ifnγ。因此,后者被用作细胞因子释放的阴性对照。加载后,(adv.rpmi+10%人ab血清+gln+50um bme)补充有50iu/ml的白介素
‑
2(目录号8879
‑
il
‑
050,r&d systems)和10ng/ml的白介素
‑
7(目录号208
‑
il
‑
200,r&d systems)的t细胞培养基通过微流体设备的微流体通道灌注6
‑
16小时。温育后,用藻红蛋白(pe,目录号506507biolegend)标记抗人ifnγ的抗体流入设备,并以0.02微升/秒的速度灌注1小时,以允许荧光抗体在坞内扩散并与涂有分泌的ifnγ的捕获珠结合。灌注后,通过在设备中灌注facs缓冲液30分钟去除未结合的抗体。为具有t细胞和不同肿瘤细胞群的微流体设备获得明场图像,使用cy5荧光立方体观察珠,使用txred荧光立方体检测珠上ifnγ的存在。三个不同的图像经过图12的方法,另外如附录中所述,以分配图像中看到的物体的身份。图25a显示了包含slc45a2特异性t细胞、珠和slc45a2脉冲的肿瘤细胞的微流体设备的第二扇区内的隔离坞的明场图像。图25b显示了同一组隔离坞在德克萨斯红通道中的荧光图像(注意每个坞中的叠加坞编号,相同的数字表示同一坞),清楚地显示了捕获和ifnγ(比较两个图像的隔离坞2687、2688、2690)。相比之下,图26a显示了在含有slc45a2特异性t细胞和tcl1脉冲肿瘤细胞的微流体设备的第一扇区中的一组隔离坞获得的明场图像,以及图26b显示了对同一组隔离坞观察到的荧光。没有观察到荧光。
[0883]
结果:在t细胞、肿瘤细胞和珠的隔离坞中温育并灌注检测pe
‑
ifnγ抗体后,带有slc45a2脉冲的t2细胞和slc45a2特异性t细胞的坞中的珠在txred通道中显示出荧光信号(图25b),但在tcl1脉冲的t2细胞和slc45a2特异性t细胞(图26b)存在下没有信号与珠相关。与对照相比,抗原特异性t细胞激活的量化表明,当与在其表面呈递slc45a2抗原肽的肿瘤细胞接触时,超过50%的t细胞被特异性激活并分泌ifnγ,而在存在tcl1呈递肿瘤细胞的情况下t细胞的激活低于5%(图27)。对分泌目标细胞因子ifnγ的抗原特异性t细胞数量进行量化的能力是应用本文所述的细胞计数方法的结果。
[0884]
实施例2.多重抗原特异性细胞因子释放测定
[0885]
实验设计:如一般材料部分,在微流体设备上,在组合的干扰素γ(ifnγ)和肿瘤坏死因子α(tnfα)释放测定中,在存在呈递slc45a2肿瘤特异性抗原的肿瘤细胞的情况下,测试了slc45a2特异性t细胞的激活。将ifnγ捕获珠、slc45a2
‑
特异性t细胞和slc45a2
‑
或tcl1
‑
呈递肿瘤细胞加载到如上所述的微流体设备(berkeley lights,inc.)上。此外,tnfα捕获珠流入微流体芯片并装入含有ifnγ捕获珠、t细胞和肿瘤细胞的相同隔离坞中。两种类型的捕获珠在cy5信号通道中可观察到的范围内表现出不同水平的自发荧光。因此,在cy5通道中,明场图像和检测最大荧光强度的图像用于使用本文中描述的过程来确定和表征每个物体(对于一些细节,参见图12和附录),并选择性地将抗原特异性t细胞、一个或多个肿瘤细胞(靶向或非靶向)、ifnγ捕获珠和一个tnfα捕获珠移动至每个隔离坞中。最后,采用光学表征方法来确定隔离坞中每个捕获珠的存在。如上所述进行温育。温育后,用藻红蛋白(pe,目录号506507biolegend)荧光标记的抗人ifnγ的抗体和用异硫氰酸荧光素(fitc,目录号502906biolegend)荧光标记的抗人tnfα的抗体流入设备,并以0.02微升/秒的速度灌注1小时,以允许荧光抗体在坞内部扩散并与涂有分泌的ifnγ或分泌的tnfα的捕获珠结合。灌注后,通过在芯片中灌注facs缓冲液30分钟去除未结合的抗体。为具有t细胞和不同肿瘤细胞群的微流体设备获得明场图像,使用cy5荧光立方体观察珠,并分别使用txred或fitc荧光立方体检测珠上ifnγ和tnfα的存在。对四个不同的图像进行图12的方法,另外如附录中所述,用于分配图像中看到的物体的身份。如图28a所示,明场图像显示隔离坞底部的t细胞2004和靶向肿瘤细胞2006。可以清楚地看到两个微物体2002和单个微物体2010。图28b(注意每一个叠加的坞编号,相同的数字表示相同的坞)显示了cy5通道中的荧光图像,如前面的句子所述,可以清楚地将两个微物体2002识别为ifnγ捕获珠以及作为tnfα捕获珠的调光器2010物体。具有相同最后两个数字的参考数字代表与图22
‑
26中相似的物体。仅显示了包含slc45a2特异性t细胞、珠和slc45a2脉冲的肿瘤细胞的微流体设备中的一个隔离坞。图28c显示了在德克萨斯红通道中可视化的相同隔离坞2169,并且仅显示微物体2002的荧光,表明ifnγ捕获到珠。捕获tnfα的捕获珠2010不发荧光。图28d显示了相同的隔离坞2169,珠2010在fitc通道中具有更亮的荧光。虽然捕获珠2002显示一些通过荧光渗入fitc通道,但可以通过调整光学系统的过滤器特性来解决这种渗漏。在任何情况下,fitc通道中用于捕获tnfα的珠的阳性信号都可以清楚地区分,并且实现了对抗原特异性t细胞(在其特定靶向肿瘤细胞存在的情况下)释放的两种细胞因子的多重检测。
[0886]
实施例3.组合的细胞毒性和细胞因子释放测定。
[0887]
在测定ifnγ释放的同时,在微流控芯片上,测试了slc45a2特异性t细胞对呈递slc45a2肿瘤特异性抗原的肿瘤细胞的杀伤活性。在加载之前,t2细胞用5um celltrace羧基荧光素琥珀酰亚胺酯(cfse,thermofisher,目录号c34570)标记,以便基于荧光区分t细胞和t2细胞。然后将人ifnγ捕获珠、单个slc45a2特异性t细胞和脉冲t2细胞流入单独的微流体设备((berkeley lights,inc.),如上所述。预计用slc45a2抗原脉冲的t2细胞会被slc45a2特异性t细胞靶向和杀死,而tcl1脉冲的t2细胞预计不会被slc45a2特异性t细胞靶向或杀死,因此被用作t细胞毒性的阴性对照。加载后,补充有50iu/ml的白介素
‑
2(目录号8879
‑
il
‑
050,r&d systems)、10ng/ml的白介素
‑
7(目录号208
‑
il
‑
200),r&d systems),并补充有5um荧光caspase
‑
3底物(devd)(405,目录号10405,biotium)的t细胞培
养基(adv.rpmi+10%人ab血清+gln+50um bme)灌注通过每个微流体芯片上的微流体通道6
‑
16小时。
[0888]
在培养期间每60分钟拍摄一次坞的图像。图30a和30b显示了同一坞的明场图像,显示了隔离坞底部的一组ifnγ捕获珠1202(暗球)和一组slc45a2脉冲的t2细胞1206(特定靶)和slc45a2特异性t细胞(1204),可见为位于坞内捕获珠正上方的更亮的球体。30a是图30b所示的隔离坞的底部放大图。celltrace cfse标记和裂解的,现在的荧光caspase
‑
3标记使用不同的荧光立方体(分别为fitc、dapi)进行可视化。图30c显示fitc通道中cfse标记的t2肿瘤细胞1206,表明它们的特定位置和这些细胞的完整性质。如图30d显示在3小时时间点dapi通道中的荧光信号,其与靶向t2肿瘤细胞1206之一相关,表明caspase 3活性与隔离坞内抗原特异性t细胞的细胞毒性作用导致的细胞死亡相关(在dapi荧光通道下不可见)。为了将t细胞的细胞毒性与细胞因子分泌联系起来,用藻红蛋白(目录号506507biolegend)荧光标记的抗人ifnγ的抗体然后流入设备并以0.02微升/秒灌注1小时,以允许荧光抗体在坞内扩散并与涂有分泌的ifnγ的捕获珠结合。灌注后,通过在芯片中灌注facs缓冲液30分钟去除未结合的抗体。使用cy5荧光立方体在20小时时间点观察珠,使用txred荧光立方体检测珠上ifnγ的存在(图30e,珠1202)。
[0889]
结果:在隔离坞中温育t细胞、肿瘤细胞和珠并用caspase
‑
3底物灌注后,在具有slc45a2特异性t细胞的坞中的slc45a2脉冲t2细胞显示出比用slc45a2特异性t细胞的tcl1脉冲t2细胞更多的细胞死亡(40%对10%,图31)。两种t2细胞群都显示出类似的非特异性死亡,如通过不含t细胞的坞中的死亡来测量的。细胞毒性分析后对ifnγ分泌的量化允许抗原特异性细胞因子分泌与靶细胞杀伤之间存在相关性。对于含有slc45a2特异性t细胞和sl45a2脉冲t2的坞,30%显示出ifnγ分泌和t细胞介导的杀伤作用(图32)。17%的坞在没有杀伤的情况下表现出ifnγ分泌,11%在没有ifnγ分泌的情况下有杀伤。在含有slc45a2特异性t细胞和tcl1脉冲的t2细胞的对照坞中,4%在没有ifnγ分泌的情况下表现出杀伤,1%在没有杀伤的情况下有ifnγ分泌,而没有坞同时表现出ifnγ分泌和杀伤。
[0890]
实施例4.caspase 8细胞毒性试验。
[0891]
测定概述:caspase
‑
8在细胞凋亡的早期和晚期之间产生并活跃。vybrant
tm fam caspase
‑
8检测试剂盒基于caspase荧光抑制剂(flica
tm
)方法,本质上是一种亲和标记。该试剂将可与半胱氨酸共价反应的氟甲基酮(fmk)部分与半胱天冬酶特异性氨基酸序列相关联。对于caspase
‑
8,该识别序列是亮氨酸
‑
谷氨酸
‑
苏氨酸
‑
天冬氨酸(letd)。荧光素基团作为报告分子连接。flica试剂被认为通过识别序列与激活的半胱天冬酶的酶反应中心相互作用,然后通过fmk部分共价连接。fitc通道中的荧光强度与细胞中caspase
‑
8的水平成正比,是直接报告基因。
[0892]
材料:vybrant
tm fam caspase
‑
8测定试剂盒
‑
v35119(试剂根据制造商的方案制备)。抗fas ab人激活克隆ch11(emd)0.5mg/ml(500ug/ml)。mla培养基(rpmi 1640+10%fbs)。jurkat细胞系。
[0893]
细胞在37c+5%co2下培养至
‑
5e5的密度。在诱导细胞凋亡之前,将细胞沉淀并以1e6的密度重悬于新鲜的mla培养基中;将100ul重悬培养物等分到96孔组织培养板的孔中。通过添加用pbs稀释至50ug/ml的2ul抗fas引发细胞凋亡。细胞凋亡也可以由许多其他物质触发(例如星形孢菌素、3,3'
‑
二吲哚基甲烷、tnf相关凋亡诱导配体(trail)、细胞毒性t细
胞或b细胞分泌的抗体)。通过添加2ul pbs(无抗fas)来测定背景caspase
‑
8活性。细胞在37℃+5%co2下温育90分钟。对于该细胞系,最佳细胞凋亡诱导时间是根据经验确定的,如图33所示。90分钟温育后后,将2μl 50x caspase
‑
8测定试剂加入到每个100μl培养物中并在37℃+5%co2下温育另外60分钟。60分钟后,将细胞用100ul 1x caspase
‑
8洗涤缓冲液洗涤2次并在1x caspase
‑
8洗涤缓冲液中第三次重悬。将细胞导入微流体设备(berkeley lights,inc.),用1x caspase
‑
8洗涤缓冲液预平衡。在明场检测细胞,通过测量细胞的平均fitc荧光强度来确定caspase
‑
8活性。在图34a中,显示了用50pg/ul抗fas处理120分钟与无抗体对照在jurkat细胞中caspase
‑
8表达的分布。插图面板突出了经抗fas处理的样品中caspase
‑
8阳性细胞的增加。箭头对应于图34b中所示的代表性图像的平均荧光强度。在图34b中,代表性的隔离坞的明场和fitc通道中的图像各自显示在低、高和无caspase
‑
8表达水平具有/不具有caspase
‑
8表达的jurkat细胞。结果表明,在微流体环境中可以明确和选择性地检测到具有caspase
‑
8表达的凋亡细胞。
[0894]
虽然上述实验使用了微流体设备之外的jurkat细胞的初始处理,但实验不受此限制。靶细胞(例如jurkats)被导入到微流体设备和被围住,如上所述。细胞凋亡是在微流体环境中通过含有抗fas或任何其他能够扩散到坞内的化合物的培养基灌注或通过共围围住t细胞或b细胞与靶细胞来诱导。在达到所需的凋亡诱导时间后,导入20ul 2x caspase
‑
8补充试剂,37℃培养60分钟。60分钟后,未掺入的caspase
‑
8测定试剂被冲洗掉,用20ul的1x caspase
‑
8洗涤缓冲液以0.5ul/秒的速度冲洗芯片10次,每次洗涤之间暂停30秒。洗涤后,在明场中检测细胞并通过测量细胞的平均fitc荧光强度来确定caspase
‑
8活性。
[0895]
非正式seq id列表
[0896]
seq id no.序列类型1slysyfqkv人工2sllpimwql人工
[0897]
尽管在本说明书中已经描述了本发明的具体实施方式和应用,但是这些实施方式和应用仅是示例性的,并且许多变化是可能的。