1.本发明涉及数据存储系统,更具体地,本发明涉及调整存储系统中的存储块池大小。
背景技术:2.以闪存为例,传统的基于nand闪存的固态驱动器(ssd)的性能特性与传统的硬盘驱动器(hdd)的性能特性有着根本的不同。传统ssd中的数据通常以4、8或16kb大小的页面组织。此外,ssd中的页面读取操作通常比写入操作快一个数量级,并且延迟既不取决于操作的当前位置也不取决于操作的先前位置。
3.然而,在基于闪存的ssd中,存储位置在写入之前以块为单位进行擦除。擦除块单位的大小是从256至512或甚至数千页,并且擦除操作比页编程操作花费的时间大约多一个数量级。由于nand闪存的固有属性,基于闪存的ssd会异地写入数据,映射表将写入数据的逻辑地址映射到物理地址。该映射表通常称为逻辑到物理表(lpt)。
4.由于基于闪存的存储单元由于磨损或其他原因而表现出读取错误和/或故障,因此可以在内存页内以及跨存储芯片(例如,raid-5和raid-6类方案)使用附加冗余。存储器页内的附加冗余可以包括纠错码(ecc),其例如可以包括bch、ldpc或其他码。虽然在页面中添加ecc相对简单,但是将存储块组织成类raid条带更为复杂。例如,个别块会随时间的推移而退役,这需要重新组织条带或减少条带的容量。由于条带的组织与lpt一起定义了数据的放置,ssd通常利用日志结构阵列(lsa)架构,它结合了这两种方法。
5.lsa架构依赖于异地写入。在这种方法中,内存页重写将导致将内存页数据写入内存中的新位置,将内存页数据的旧副本标记为无效,然后更新映射信息。由于当前nand存储器技术的限制,无效的数据位置在其所属的整个块被擦除之前无法重新使用。但是,在擦除之前,块会进行垃圾收集,从而将块中的任何有效数据重新定位到新块。一个块的垃圾收集通常被推迟尽可能长的时间,以最大化块中无效数据的数量,从而减少重新定位的有效页面的数量,因为重新定位数据会导致额外的写入操作,从而增加写入放大。
技术实现要素:6.根据实施例,一种计算机实现的方法用于调整存储系统中的块池大小。该计算机实现的方法包括:确定包括在第一准备使用(rtu)队列中的块的数量是否在第一rtu队列的第一范围内。响应于确定包括在第一rtu队列中的块的数目在第一rtu队列的第一范围中,确定包括在第二rtu队列中的块的数目是否在第二rtu队列的第二范围中。此外,响应于确定包括在第二rtu队列中的块的数量不在第二rtu队列的第二范围中,从与第一rtu队列对应的第一池中的块之一重定位有效数据。第一池中的块被擦除,并且从第一池转移到对应于第二池的第二rtu队列。在第一池中的块以单级单元(slc)模式配置,而第二池中的块以每单元多位模式配置。
7.根据另一实施例,一种计算机程序产品包括计算机可读存储介质,该计算机可读
存储介质具有体现在其中的程序指令。程序指令可由处理器读取和/或执行,以使处理器:执行上述方法。
8.根据又一实施例,一种系统包括:被配置为存储数据的多个非易失性随机存取存储器(nvram)块。该系统还包括处理器和与该处理器集成和/或可由该处理器执行的逻辑。该逻辑被配置成:执行上述方法。
9.通过以下详细描述,本发明的其他方面和实施例将变得显而易见,当结合附图时,所述详细描述以举例方式说明本发明的原理。
附图说明
10.图1是根据一个实施例的非易失性存储卡的图。
11.图2是根据一个实施例的数据存储系统架构的图。
12.图3是根据一个实施例的系统图。
13.图4是根据一个实施例的包括块条和页条的概念图。
14.图5是根据一个实施例的非易失性存储器模块的示意图。
15.图6a是根据一个实施例的方法的流程图。
16.图6b是根据一个实施例的方法的流程图。
17.图6c为根据一个实施例的用于图6a和/或图6b的方法中的操作之一的子过程的流程图。
18.图7是根据一种实施方式的数据和流程框图概况的部分示意图。
19.图8是根据一个实施例的网络架构。
20.图9是根据一个实施例的可以与图8的服务器和/或客户端相关联的代表性硬件环境。
21.图10是根据一个实施例的分层数据存储系统。
具体实施方式
22.以下描述是为了说明本发明的一般原理而进行的,而不是为了限制在此要求保护的发明构思。进一步,本文中所描述的特定特征可以与不同可能的组合和排列中的每一者中的其他描述特征组合使用。
23.除非本文中另外特别限定,否则所有术语将被给予它们的最广泛的可能解释,包括从说明书中暗示的含义以及本领域技术人员所理解的含义和/或如在词典、论文等中限定的含义。
24.还必须注意的是,如在说明书和所附权利要求中使用的,单数形式“一个”、“一种”和“该”包括复数指示物,除非另外说明。还应当理解,当在本说明书中使用术语“包括(comprises)”和/或“包含(comprising)”时,其指定所述特征、整体、步骤、操作、元件和/或部件的存在,但不排除存在或添加一个或多个其他特征、整体、步骤、操作、元件、部件和/或它们的组合。
25.以下描述公开了数据存储系统及其操作和/或组成部分的若干优选实施例。应当理解,本文的不同实施例可以用宽范围的存储介质来实现,包括例如非易失性随机存取存储器(nvram)技术,诸如nand闪存、nor闪存、相变存储器(pcm)、磁阻ram(mram)和电阻ram
(rram)。为了提供上下文并且仅为了帮助读者,可以参考非易失性存储器的类型来描述不同实施例。这仅是通过举例的方式完成的,并且不应当被认为是对在权利要求中定义的本发明的限制。
26.在一个总体实施例中,计算机实施的方法用于调整存储系统中的块池大小。该计算机实现的方法包括:确定包括在第一准备使用(rtu)队列中的块的数量是否在第一rtu队列的第一范围内。响应于确定包括在第一rtu队列中的块的数目在第一rtu队列的第一范围中,确定包括在第二rtu队列中的块的数目是否在第二rtu队列的第二范围中。此外,响应于确定包括在第二rtu队列中的块的数量不在第二rtu队列的第二范围中,从第一池中与第一rtu队列对应的块中的一个块中重定位有效数据。第一池中的块被擦除,并且从第一池转移到对应于第二池的第二rtu队列。第一池中的块以单级单元(slc)模式配置中,而第二池中的块以每单元多位模式配置。
27.在另一总体实施例中,一种计算机程序产品包括计算机可读存储介质,所述计算机可读存储介质具有与其体现的程序指令。程序指令可由处理器读取和/或执行,以使处理器:执行上述方法。
28.在又一总体实施例中,一种系统包括:被配置为存储数据的多个非易失性随机存取存储器(nvram)块。该系统还包括处理器和与该处理器集成和/或可由该处理器执行的逻辑。该逻辑被配置成:执行上述方法。
29.图1示出了根据一个实施方式的存储卡100。应当注意,尽管在本实施例中将存储卡100描述为示范性非易失性数据存储卡,但是根据替代实施例,可以在数据存储系统中使用各种其他类型的非易失性数据存储卡。因此,存储卡100的架构和/或组件绝不旨在限制本发明,而是作为非限制示例来呈现。
30.此外,作为选择,本存储卡100可以结合来自本文列出的任何其他实施例的特征实现,例如参考其他附图描述的那些。然而,这种存储卡100和在此呈现的其他存储卡可以用在各种应用和/或排列中,这些应用和/或排列可能会或可能不会在此处列出的说明性实施例中具体描述。。此外,本文呈现的存储卡100可以在任何期望的环境中使用。
31.继续参考图1,存储卡100包括网关102、连接到gpp存储器114(其可以包括ram、rom、电池支持的dram、相变存储器pc-ram、mram、stt-mram等、或其组合)的通用处理器(gpp)112(诸如,asic、fpga、cpu等)、以及多个存储器控制器108(在本示例中包括闪存控制器)。每个存储器控制器108经由通道106连接到多个nvram存储器模块104(其可以包括nand闪存或其他非易失性存储器类型,诸如以上列出的那些)。
32.根据不同实施例,一个或多个控制器108可以是或包括一个或多个处理器,和/或用于控制存储卡100的任何子系统的任何逻辑。例如,控制器108通常控制nvram存储器模块104的功能,诸如数据写入、数据再循环、数据读取等。在不同实施例中,控制器108可使用本领域已知的逻辑以及本文所公开的任何逻辑来操作,因此可被视为用于本文所包括的非易失性存储器的任何描述的处理器。
33.此外,控制器108可被配置和/或可编程以执行或控制本文所提出的方法中的一些或全部。因此,控制器108可被视为被配置为通过编程到一个或多个芯片、模块和/或块中的逻辑、软件、固件和/或一个或多个处理器可用的其他指令来执行各种操作;等等以及它们的组合。
34.仍然参考图1,每个存储器控制器108还连接到控制器存储器110,控制器存储器110优选地包括复制根据本文描述的各种实施方式的非易失性存储器结构的高速缓存。然而,取决于期望的实施例,控制器存储器110可以是电池供电的的dram、相变存储器pc-ram、mram、stt-mram等,或其组合。
35.如前所述,根据所期望的实施例,存储卡100可以在不同类型的数据存储系统中实现。图2示出了根据示例性实施例的数据存储系统架构200,其绝不旨在限制本发明。此外,应注意,图2的数据存储系统220可以包括在图1的实施方式中发现的各种组件。
36.参见图2,数据存储系统220包括多个接口卡202,配置为通过i/o互连204与一个或多个处理器系统201通信。数据存储系统220还可以包括被配置为控制多个非易失性数据存储卡208中的数据存储的一个或多个raid控制器206。非易失性数据存储卡208可包括nvram、闪存卡、ram、rom和/或一些其他已知类型的非易失性存储器。
37.i/o互连204可包括任何已知的通信协议,诸如光纤信道(fc)、以太网上的fc(fcoe)、无限带宽、互联网小型计算机系统接口(iscsi)、传输控制协议/互联网协议(tcp/ip)、高速外围组件互连(pcie)等和/或其任何组合。
38.数据存储系统220中的raid控制器206可以执行类似于raid-5、raid-10所采用的奇偶方案或一些其他合适的奇偶方案,如本领域技术人员在阅读本说明书时将理解的。
39.每个处理器系统201包括一个或多个处理器210(诸如cpu、微处理器等)、本地数据存储器211(例如,诸如图9的ram914、图9的rom916等)、以及被配置成用于与数据存储系统220通信的i/o调整器218。
40.再次参考图1,存储器控制器108、gpp 112和/或本文描述的其他控制器(例如,图2的raid控制器206)可能能够根据期望的实施方式对存储的数据执行各种功能。具体地,存储器控制器或者gpp 112可以包括被配置为执行以下功能中的任何一个或多个的逻辑,这些功能决不旨在作为排他性列表。换言之,如本领域技术人员在阅读本说明书后所认识到的,根据期望的实施例,存储系统的逻辑可以被配置成用于执行附加或替代功能。
41.垃圾收集
42.在本说明书的ssd存储器控制器的上下文中的垃圾收集可以包括识别待收回以供未来使用的数据块和重定位其中仍然有效的所有页面的过程。此外,取决于操作的特定控制器和/或相应的垃圾收集单元,可以识别逻辑擦除块(leb)以进行收回和/或重新定位。通常,一个leb对应于一个块条带,但是可替换的实现方式也可以考虑固定数量的块条带或者构建leb的单个块。
43.物理“块”表示可以在非易失性存储器(例如,诸如nand闪存)上擦除并由此准备向其写入数据的最小单元。然而,典型垃圾收集操作单元经常是非易失性存储器的物理块的倍数,并且在此也被称为leb。这是由于通常在leb中添加类似raid的奇偶校验信息。因此,在页或块故障的情况下,只有当leb中的所有块仍在保存数据时,才能重建数据。。因而,一旦来自leb中的所有块的所有仍有效数据已经成功地重定位到新位置,则来自垃圾收集单元的各个块只能单独地或在单个单元中被擦除。所以,全部垃圾收集单元被作为单个单元进行垃圾收集。此外,leb的大小直接影响垃圾收集引起的写入放大。leb越大,不相关数据一起存储在leb中的可能性就越大,因此在垃圾收集选择时可能需要重新定位更多的leb数据。
44.通常,来自不同管芯和/或闪存通道的块被分组在一起,使得来自同一组的块可以被并行读取或写入,由此增加总带宽。还有可能组合先前的两种方法,并且使用来自可以并行访问的不同闪存信道的块来组成raid条带。
45.还应当注意,leb可以包括物理存储块的任何倍数,这是一个物理擦除的单位。此外,将存储块组织成leb不仅允许在来自不同存储器芯片、存储器平面和/或通道的存储块之间添加类raid的奇偶校验保护方案,而且还允许通过更高的并行性来显著地增强性能。例如,多个非易失性存储块可以一起组合在一个raid条带中。本领域技术人员在阅读本说明书后将理解,raid方案通常提高可靠性并减少数据丢失的概率。
46.根据绝不旨在限制本发明的示例性实施例,存储器控制器(例如,参见图1的108)和/或gpp112可以在内部执行垃圾收集。如前所述,垃圾收集可以包括选择要重定位的leb,之后可以重新定位(例如,移动)在所选leb上仍然有效的所有数据。在重新定位仍然有效的数据后,leb可以被擦除,然后用于存储新数据。从垃圾收集的leb重定位的数据量确定写入放大。此外,减少写入放大的有效方法包括实现写入热分离。
47.写入热分离
48.在本上下文中,数据的“写入热”是指数据被更新(例如,用新数据重写)的速率(例如,频率)。被视为“热”的存储块往往具有频繁的更新速率,而被视为“冷”的存储块具有比热块更慢的更新速率。
49.跟踪逻辑页的写入热可涉及例如在lpt映射条目中为该页分配特定数量的位,以跟踪在某个时间段或窗口中该页已经看到多少写入操作。通常,主机写入操作增加写入热,而内部重定位写入降低写入热。写入热的实际增量和/或减小可为确定性的或概率性的。
50.类似地,对于每个逻辑页,可利用lpt中的特定数量的附加位来跟踪读取热。为了减少元数据,还可以在物理块级跟踪读取热,其中可以维持用于跨接和非跨接读取的每个块的单独计数器。然而,应注意,对于一些实施例,当确定存储块的写入热时,对存储块的读取请求和/或对存储块执行的读取操作的数目对于写入热分离可能不起作用。例如,如果频繁地从特定存储块读取数据,那么高读取频率不一定意味着存储块也将具有高更新速率。相反,对给定存储块执行的高频读取操作可表示存储在存储块中的数据的重要性、值等。
51.通过对具有相同和/或相似写入热值的存储块进行分组,可以实现写入热分离。具体地,热隔离方法可以将热内存页面一起分组在某些存储块中,而将冷内存页面一起分组在单独的存储块中。因此,热隔离leb往往被热或冷数据占据。
52.写入热分离的优点是双重的。首先,在热存储块上执行垃圾收集处理也将防止触发冷数据的重定位。在没有写入热分离的情况下,频繁执行的热数据更新还会导致与被重定位的热数据并置在同一leb上的所有冷数据发生不希望的重定位。因此,对于实现写入热分离的实施例,通过执行垃圾收集引起的写入放大要低得多。
53.其次,数据的相对热可以用于磨损均衡目的。例如,热数据可以被放置在更健康(例如,更年轻)的存储块中,而冷数据可以被放置在相对于那些更健康的存储块不太健康(例如,更年长)的存储块上。因此,相对较旧的块暴露于磨损的速率被有效地减缓,从而改善实现写入热分离的给定数据存储系统的总体耐久性。
54.写入分配
55.写入分配包括将写入操作的数据放置到开放leb的空闲位置中。一旦leb中的所有
页面被写入,leb就被关闭并被放置在一个包含已占用leb的池中。通常,被占用池中的leb有资格进行垃圾收集。开放的leb的数量通常是有限的,并且任何被关闭的leb可以立即或者在一些延迟之后用一个新的leb替换,该新leb通过将一个或多个擦除块关联到leb来打开。
56.在执行期间,垃圾收集可以与用户写入操作同时发生。例如,当用户(例如,主机)向设备写入数据时,设备控制器可以对无效数据的leb连续执行垃圾收集以为新的传入数据页面腾出空间。如上所述,对其执行垃圾收集的leb通常将具有在垃圾收集操作时仍然有效的一些页面;因此,这些页面优选地被重定位(例如,写入)到新的leb。
57.再次,前述功能绝不旨在限制本文描述和/或建议的任何存储系统的能力。相反,如本领域技术人员在阅读本说明书时将理解的,前述功能通过示例的方式呈现,并且根据期望的实施例,存储系统的逻辑可以被配置为执行附加或替代功能。
58.现在参考图3,示出了根据一个实施例的系统300。作为选择,本系统300可以结合来自本文列出的任何其他实施方式的特征实现,诸如参考其他附图描述的那些。然而,这种系统300和在此呈现的其他系统可以用于不同应用和/或组合,这些应用和/或排列可以或可以不在这里列出的说明性实施例中具体描述。此外,这里呈现的系统300可以用于任何期望的环境,例如,与控制器结合使用。
59.如图所示,系统300包括耦合到若干其他组件(包括垃圾收集器304)的写入高速缓存302。如前所述,垃圾收集器304可以用于通过重定位有效数据和提供要被擦除的非易失性存储块以供以后再使用而释放leb单元。因此,取决于期望的实施例,垃圾收集器304可以回收连续物理空间的块。根据示例性实施例,块擦除单元可以用于跟踪和/或完成由垃圾收集器304移交的非易失性存储块的擦除。
60.写入高速缓存302还耦合到空闲块管理器306,空闲块管理器306可以在空闲非易失性存储块已经被擦除之后跟踪存储块它们。此外,如本领域普通技术人员在阅读本说明书后将理解,空闲块管理器306可以使用被擦除的空闲非易失性存储块来构建来自不同通道的非易失性存储块的空闲条(例如,块条带)。
61.仍参照图3,写入高速缓存302耦接至lpt管理器308和存储器i/o单元310。lpt管理器308维护逻辑地址到存储器中的物理页的逻辑到物理映射。根据绝不旨在限制本发明的示例,lpt管理器308可以维持4kib或16kib逻辑地址的逻辑到物理映射。存储器i/o单元310与存储器芯片通信以便执行低级操作,例如读取一个或多个非易失性存储页面、写入非易失性存储页面、擦除非易失性存储块等。
62.为了更好地理解如本文中使用的块条和页条之间的区别,图4是根据一个实施例的概念图400。leb由块条带构建,并且通常使用单个块条带构建leb。然而,替代实施例可以使用多个块条带来形成leb。作为一种选择,本概念图400可结合来自本文列出的任何其他实施方式的特征来实现,诸如参考其他附图描述的那些。然而,这种概念图400和在此呈现的其他概念图可以用于不同应用和/或在此处列出的说明性实施例中可能具体描述或可能未具体描述的排列中。进一步,本文呈现的控制器概念图400可在任何期望的环境中使用。因此,图4的示例性非易失性存储器控制器概念图400可以在高速缓存架构中实现。然而,根据期望的实施方式,在定义存储在非易失性存储器中的数据的组织时可以实现图4的概念图400。因此,下面依次描述这两个实现方式。
63.非易失性存储器
64.现在参见图4,概念图400包括标记为“平面0”至“平面m”的一组m+1个聚合平面。聚合平面由在不同信道上具有相同平面索引的所有物理平面组成。应当注意,聚合平面在本文中也被简称为平面。
65.当用存储在非易失性存储器中的数据实现时,通道上的每个物理平面可以包括大块集合,例如,通常为1024、2048或更多。此外,一个或多个物理平面还可以包括若干附加块,其可以用作坏块(例如,性能较差的块、具有不期望的特性的块等)的替换块。
66.在非易失性存储器的每个平面中,来自每个通道的单个块可以形成相应的块条带。因此,非易失性存储器的给定实施例所支持的块条的数量可以由每个平面的块数量和平面的数量来确定。
67.在平面0的分解视图中,概念图400进一步示出了平面的其余部分所支持的一组块条带之中的单个块条带(块条0)。平面0的块条0被示出为包括11个块,每个通道的一个块标记为“通道0”至“通道10”。应注意,块与块条带的关联可随时间而改变,因为块条通常在它们垃圾收集之后被溶解。擦除的块可以放置在空闲块池中,由此当写入分配请求新的块条带时,新的块条带从空闲块池中的块组装。例如,查看概念图400,来自信道0的块10和来自信道4的块41当前与示出的平面0的块条0相关联。此外,所示出的块条0保持n+1个页条带,并且每个块因此保持标记为“页0”至“页n”的n+1个页。
68.高速缓存架构
69.仍参照图4,当在高速缓存架构中实施时,在聚合平面0的分解图中示出的页面的每个块可构成一个通道的唯一块。类似地,每个通道贡献一个单独的块,形成块条带。例如,查看概念图400,来自信道0的块10包括其中的所有页(页0到页n),而来自信道4的块41对应于其中的所有页,等等。
70.在内存控制器的上下文中,例如,它可能能够在通道级别实现raid,块条带由多个块组成,这些块相当于一个块条带。仍参见图4,聚合平面0的多个块构成块条0。虽然块条中的所有块通常属于同一的聚合平面,但是在一些实施例中,块条的一个或多个块可以属于不同的物理平面。由此得出,每个聚合平面可以包括一个或多个块条带。因此,根据说明性实施例,来自不同物理平面的块0到块10可以构成块条带。
71.不管图4的概念图400是否利用非易失性存储器和/或高速缓存架构来实现,在不同的实施例中,每个块中的页数和/或每个平面中的通道数可取决于期望的实施例而变化。根据绝不旨在限制本发明的示例性实施例,块可以包括256页,但是在不同实施例中可以包括更多或更少页。类似地,每个平面的通道数量和/或平面数量可以根据所期望的实施例而变化。
72.仍参照图4,具有相同页索引的块条带中的所有页表示页条。例如,页条0包括平面0的块条带0中的每个通道的第一页(页0)。类似地,页条n包括平面0的块条带0中的每个通道的最后一页(页n)。
73.如上所述,非易失性存储器中的存储块的物理配置随时间而改变。例如,在过去,闪存块具有每单元一位的配置,但是在数据存储方面的改进已经引入了实现每单元多位配置的闪存块。虽然具有每单元多位配置的块能够存储比具有每单元一位配置的块更多的信息,但这种存储容量的增加是以性能延迟为代价的。例如,具有每单元一位的配置的存储块
经历写入延迟,其比具有每单元多位配置的存储块经历的写入延迟低大约2.5倍到大约10倍。类似地,与每单元具有多位配置的存储块相比,与每单元具有一位配置的存储块经历较低的读取延迟。
74.存储容量和性能延迟之间的这种折衷允许存储系统在某种程度上定制存储器的性能能力。例如,被预测具有大量i/o流量的存储系统能够选择性地包括比具有每单元多位配置的存储块更多数量的具有每单元一位配置的存储块。相反,被预测用于存储大量冷数据的存储系统能够选择性地包括比具有每单元一位配置的存储块更多数量的具有每单元多位配置的存储块。然而,实时使用通常会与设计这些存储系统时可能已经考虑的预测有所不同。因此,传统存储系统已经不能保持高效性能。
75.与传统系统所经历的前述缺点形成鲜明对比的是,本文所包括的各实施例实现混合控制器,所述混合控制器能够基于当前利用率和工作负荷属性来动态地调整块池大小,例如,如以下将进一步详细描述的。
76.现在参见图5,示出了根据一个实施例的具有混合控制器502的非易失性存储器模块500。作为选择,本存储器模块500可以结合来自本文列出的任何其他实施方式的特征实现,诸如参考其它附图描述的那些。然而,这样的存储器模块500和在此呈现的其他可以用于各种应用和/或在此处列出的说明性实施例中可能具体描述或可能未具体描述的排列中。进一步,本文呈现的存储器模块500可以在任何期望的环境中使用。因此,图5(和其他图)可被认为包括任何可能的置换。
77.如上所述,存储器模块500包括混合控制器502,其能够管理和/或调整以每单元一位模式(在本文中也称为“单层单元模式”或“slc模式”)以及每单元多位模式配置的块。根据一些方法,混合控制器502通过将不同的块配置拆分成两个不同的池504、506来管理这些不同的块配置。这些池504之一被指定为包括在slc模式中配置的那些块,而另一池506包括在每单元多位模式中配置的块。
78.池504、506中的每一个都跨越多个多个数据存储部件(例如,nvram存储器模块,诸如nand闪存器件),它们一起用作存储器阵列508。因此,图5中示出的各种组件用作存储卡,并且可以实现以上关于图1的存储卡100描述的任何方法。
79.仍参考图5,混合控制器502还耦接至缓存存储器510以及从一个或多个主机、存储系统、运行应用等接收数据命令的网关512。网关512又耦合到gpp514和3gpp存储器516。如上所述,gpp514可以是任何期望的类型,例如,asic、fpga、cpu等。类似地,gpp存储器516可为任何期望的类型,例如,ram、rom、电池支持的dram、相变存储器pc-ram、mram、stt-mram等,和/或其组合。
80.因此,混合控制器能够将被频繁访问(例如,读取、重写、附加到等)的数据存储在以slc模式配置并因此包括在第一池504中的块中,而被访问的数据不太频繁地存储在以每单元多位模式配置的块中,因此包括在第二池506中的块中。由于混合控制器可用于首先将用户写入首先配置位slc模式的块,而只有仍然有效的数据稍后在后台被降级到每单元多位的块,,由此显著减少对第二池中的块执行的写入操作的数量,使得整体耐久性增加。这种存储方案实现了存储器的不同存储块及其相应的性能特性的有效使用。然而,随着存储在存储器模块500中的热数据和冷数据的比率随时间波动,相应池504、506中的每一个都可能未被充分利用和/或被过度利用。
81.因此,混合控制器502能够选择性地重新配置第一和/或第二池504、506中的任何块以基于实际使用和/或工作负荷属性来动态地调整。这允许存储器模块500保持高效性能,而不管存储在其中的热数据或冷数据的量。现在参见图6a,示出了根据一个实施例的用于调整存储系统中的块池大小的方法600。在不同实施例中,除其他环境之外,方法600可根据本发明在图1-5中描绘的任何环境中执行。当然,如本领域技术人员在阅读本说明书后将理解的,方法600中可包括比图6a中具体描述的操作更多或更少的操作。例如,方法600中包括的各种过程在以下将在slc模式下配置的存储块转变为在每单元多位模式下配置的上下文中描述。存储块然而,方法600中所包括的不同过程中的任何一个或多个可以在将以每单元多位模式配置的存储块转变到以slc模式配置的上下文中应用(例如,参见下面的图6b)。
82.方法600的每一步骤可由操作环境的任何合适组件执行。例如,在不同实施例中,方法600可以部分地或完全由混合控制器、控制器、处理器、计算机等或其中具有一个或多个处理器的一些其他设备来执行。因此,在一些实施例中,方法600可以是计算机实施的方法。在这样的实施例中,用于实现该方法的计算机可包括存储器模块本身或其一部分,例如混合控制器。此外,术语“计算机”、“处理器”和“控制器”关于本文的任何实施例可以互换使用,这样的组件在本发明的许多不同排列中被认为是等效的。
83.此外,对于具有处理器的那些实施例,处理器(例如,以硬件和/或软件实现的处理电路、芯片和/或模块),并且优选地具有至少一个硬件组件,可以被用在任何设备中来执行方法600的一个或多个步骤。说明性处理器包括但不限于中央处理单元(cpu)、专用集成电路(asic)、现场可编程门阵列(fpga)等、其组合、或本领域已知的任何其他合适的计算设备。
84.如图6a所示,方法600的操作602包括评估第一准备使用(rtu)队列的大小和第二rtu队列的大小。第一和第二rtu队列中的每一个包括分别合并在第一和第二存储块池中的存储块。此外,第一和第二池中的每一个包括以不同模式配置的存储块。如上所述,第一池包括在slc模式中配置的存储块,而第二池包括在每单元多位模式中配置的存储块。因此,第一rtu队列包括以slc模式配置的存储块,而第二rtu队列包括以多位模式配置的存储块。根据该方法,第二池中以每单元多比特模式配置的块可具有多个不同的配置。例如,在一些方法中,第二池中的每单元多位模式配置的块被配置成多级单元(mlc)模式,而在其他方法中,第二池中的被配置成每单元多位模式的块被配置成三级单元(tlc)模式。在又一些方法中,第二池中以每单元多位模式配置的块被以四级单元(qlc)模式配置,并且以qlc模式配置的块中的每一者包括较低页、较高页、额外页和顶页。
85.关于本描述,给定rtu队列的“大小”旨在表示包括在其中的已擦除的存储块的量。最初,当没有数据写入设备时,rtu队列的大小表示总存储容量,因为所有块根据其模式被擦除和放置在rtu队列中。随着时间的推移,当数据被写到非易失性存储器模块时,通过从相应rtu中取出块来打开用于数据放置的新leb,从而减小了它们的大小。在某些时候,leb的打开和关闭导致任何rtu中的低队列级,此时必须执行垃圾收集。rtu的大小可以表示为(例如,量化使用)包括在rtu队列中的块的数量、包括在rtu队列中的块的组合存储容量、包括在总体中的块总数的百分比包含在rtu队列中的系统等。根据一些方法,第一和/或第二rtu队列的大小通过实际检查队列本身、从计数器、查找表中检索信息、查看操作日志等来评估。
86.此外,判定604包括确定包括在第一rtu队列中的块的数目是否在第一rtu队列的第一范围内。因此,在优选方案中,该第一范围专用于第一rtu队列。然而,在一些方法中,第一范围对于第一rtu队列以及第二rtu队列可以相同或相似。第一rtu队列还优选地对应于第一rtu队列的垃圾收集阈值,使得响应于确定包括在第一rtu队列中的块的数量过低而执行垃圾收集操作。垃圾收集处理将重新定位来自第一池中的一个或多个块的有效数据,使得一个或多个块可以被放置在第一rtu队列中,由此增加包括在其中的块的数量,例如,不久将变得明显。然而,应注意,“在第一范围内”绝不旨在限制本发明。不是确定值是否在给定范围内,而是可以做出等效的确定,例如,关于值是否高于预定阈值、值是否在预定范围之外、绝对值是否高于阈值、是否值低于阈值等,取决于所需的方法。
87.如前所述,方法600响应于确定包括在第一rtu队列中的块的数量不在第一rtu队列的第一范围内而前进到操作606。在那里,操作606包括选择第一池中的块之一,而操作608包括从所选的块中重定位所有有效数据。在操作606中选择的块将经历在操作608中启动的垃圾收集处理。由此,在一些方法中,选择第一池中所有块中无效数据最多的块。然而,在选择第一池中的一个块进行垃圾收集过程的过程中可以考虑任何其他期望的因素。例如,在选择第一池中的块时,可以考虑每个块的年龄、每个块中包括的有效数据量等。
88.从所选择的块重定位有效数据可以进一步以任何期望的方式执行。例如,在一些方法中,有效数据在被存储在存储器的不同块中之前可被临时存储在高速缓存中(例如,参见图5中的高速缓存存储器510)。在其他方法中,有效数据可以被直接传输到另一个存储块。响应于从所选块中重定位有效数据,操作610包括擦除所选块。
89.继续到操作612,方法600包括将选择的(现在被擦除的)块放置在对应于第一池的第一rtu队列中。如上所述,第一和第二rtu队列中的每一个都包括分别并入第一和第二存储块池中的存储块。因而,通过对所选择的块执行垃圾收集操作并且将其放置在第一rtu队列中,所选择的块被有效地用于帮助填充第一rtu队列。这通过确保预定数量的可用(例如,空)块被包括在第一rtu队列中来理想地避免延迟问题。
90.还应注意,在一些方法中,当数据存储在页中且块尚未被擦除时,块会经历读取阈值电压偏移值重新校准。因此,在一些方法中,将所选择的(并且现在已擦除的)块放置在第一rtu队列中的过程涉及标记该块用于重新校准读取阈值电压偏移值。在阅读本说明书之后,可以使用本领域技术人员显而易见的任何过程来重新校准读取阈值电压偏移值。例如,校准读取阈值电压偏移值可以在块中的页被实际编程时执行。因此,在已经擦除块之后,实际上可能不直接重新校准读取阈值电压偏移值。相反,已被标记用于读取阈值电压偏移值校准的擦除块将等到该块再次被重新编程以执行校准。
91.仍参考图6a,方法600从操作612返回至操作602,例如,使得可以继续监测第一和/或第二rtu队列的大小。跳回判定604,响应于确定包括在第一rtu队列中的块数量在第一rtu队列的第一范围中,流程图前进到判定614。换言之,响应于确定第一rtu队列在其中包括期望数量的存储块,方法600从判定604前进到判定614。同样,该第一范围对应于第一rtu队列并且可以由用户基于行业标准预先确定、基于系统性能调整等。
92.判定614包括确定第一池的大小是否应减小。换言之,判定614确定包括在第一池中的存储块的数量是不期望地还是至少不必要地高。该确定可通过将第一池的目标大小与第一池的当前(例如,实际)大小进行比较来作出。第一池中的存储块的数目包括处于与第
一池相关联的对应模式中的所有块,而不管该块是在开放式还是封闭式leb中,还是在第一rtu中。第一池的目标大小可由用户预先确定,基于总架构系统的预测工作负载等来指定。
93.响应于确定不应减小第一池的大小,方法600返回到操作602,例如,使得可以继续监测第一和/或第二rtu队列的大小。然而,响应于确定第一池的大小应当被减小,方法600从判定614前进到判定616。在此,判定616包括确定包括在第二rtu队列中的块数量是否在第二rtu队列的第二范围内。因此,该第二范围优选地特定于第二rtu队列。然而,还应当注意,在一些方法中,对于第一rtu队列以及第二rtu队列,第二范围可以相同或相似。第二rtu队列的该第二范围还可以对应于优选方法中的“提升阈值”,从而在确定是否将块从一个池转移到另一个池中时评估目标位置的rtu队列。即使在目标池已达到其容量之前,这也可通过防止池之间的块转换来确保目标位置不会溢出。换言之,即使第一rtu队列和第一池(例如,“源位置”)充分地填充有存储块,第二rtu队列的状态(例如,“目标位置”)也在决定从第一池中卸载存储块之前被考虑在内。此外,可以基于当前工作负荷属性所涉及的块传输的当前量在实时期间动态调整提升阈值。在优选实施例中,提升阈值高于在同一池中停止垃圾收集的阈值。对于一些涉及重新调整块池的大小的方法,目标(例如,“接收”)池的提升阈值可以与预期添加的块的数量成比例地降低。当源池的提升阈值增加时,或者在已从源池中提取块之后,可执行这种减小。
94.评估源位置以及目标位置是特别可取的,因为它避免了不必要的处理开销。具体而言,重新调整块池的大小可影响整个系统的i/o延迟和吞吐量。这至少部分是因为块传输可以耗尽rtu队列之一中的块,由此潜在地导致处理延迟。即使rtu队列未被耗尽,块传输也可以将给定池中的空闲块计数降低至期望水平以下,从而使得更积极地执行垃圾收集操作。额外的垃圾收集操作产生的开销会导致不期望地主机操作的节流。此外,改变给定块的配置或“模式”导致开销。例如,当在块配置模式之间切换时,会更新附加的控制器元数据。此外,从正在重新配置的块中重新定位有效数据和/或重新校准块的阈值电压偏移值的过程引入了额外的处理开销。
95.由此,通过在执行源位置与目标位置之间的存储块传送之前评估源位置以及目标位置,系统能够限制这样的传送,从而合乎需要地避免不必要的处理开销。还应该注意的是,“在第二范围内”绝不旨在限制本发明。如上所述,不是确定值是否在给定范围内,而是可以做出等效确定,例如,关于值是否高于预定阈值(例如,提升阈值),值是否在预定范围之外,绝对值是否高于阈值,值是否低于阈值等,取决于所需的方法。
96.通过将重新调整大小的速度限制到目标池中块被消耗的速度,可以进一步智能地启用池的重新调整大小来。换言之,由于对源和目标位置的评估有助于块的垃圾收集的推迟,即使必须调整池大小,也使总开销进一步最小化,从而最大化被选择用于垃圾的块中的无效数据量在调整大小期间收集,减少要重新定位的有效页面的数量,有效地降低写入放大。
97.仍参考图6a,方法600响应于确定包括在第二rtu队列中的块的数量在第二rtu队列的第二范围内而从判定616返回至操作602。如上所述,这允许方法600继续监测第一和/或第二rtu队列的大小。方法600可替代地响应于确定包括在第二rtu队列中的块数量不在第二rtu队列的第二范围中前进到判定618。
98.继续到判定618,方法600包括确定存储系统经历的当前输入/输出(i/o)工作负载
是否在第三范围内。如上文所暗示的,在池之间转移存储块的过程是工作负荷密集的过程,从而可能对总体系统的性能产生影响。因此,通过在确定是否和/或何时在池之间传输存储块时评估存储系统的当前i/o工作负载,方法600能够将低i/o工作负载作为目标并减少所产生的处理影响。再次,“在第三范围内”绝不旨在限制本发明。如上所述,不是确定值是否在给定范围内,而是可以做出等效确定,例如,关于值是否高于预定阈值、值是否在预定范围之外、绝对值是否高于阈值、值是否低于阈值等,取决于所需的方法。还应注意,决定618的结果可确定性地或概率性地决定。因此,确定值是否在给定范围内还可包括值是否在给定范围内具有一定概率,并且所作出的决定可基于该概率。
99.方法600响应于确定存储系统经历的当前i/o工作负载在第三范围中而返回到操作602。换言之,方法600响应于确定存储系统的当前i/o工作负载不合希望地高而进入操作620。然而,方法600响应于确定存储系统经历的当前i/o工作负载不在第三范围内而前进到操作620。在那里,操作620包括选择第一池中的块之一。在操作620中选择的块将经历垃圾收集处理。由此,在一些方法中,选择第一池中的所有块中具有无效数据最多的块。然而,在选择第一池中的块之一以进行垃圾收集处理的过程中可以考虑任何其他期望的因素。例如,当在第一池中的块上选择时,可以考虑每个块的年龄、包括在每个块中的有效数据的量、给定块是否有资格被传输等。
100.操作622还包括从第一池中的所选块重定位有效数据。取决于所述方法,可以任何所要方式执行来自所选块的有效数据的重定位。例如,在一些方法中,有效数据在被存储在存储器的不同块中之前可被临时存储在高速缓存中(例如,参见图5中的高速缓存存储器510)。在其他方法中,有效数据可以被直接传送到存储器的另一块。响应于从所选择的块中重定位有效数据,操作624包括擦除所选块。
101.此外,操作626包括将块从第一池转移到对应于第二池的第二rtu队列。根据本描述,在rtu队列和/或池之间“转移”的块保持在存储器的相同平面和通道中(例如,参见图4)。换言之,虽然给定块的功能特性可能由于激活和/或去激活其中的每个单元中的某些位的结果而改变,但是块本身不在存储器中物理地移动。相反,在逻辑意义上,在rtu队列和/或池之间“转移”块。在一些方法中,在lpt、块状态表、操作日志等中指示这些转移。
102.再次,第一池(连同第一rtu队列)包括在slc模式中配置的存储块,而第二池(连同第二rtu队列)包括以每单元多位模式配置的存储块。因此,由于第一和第二池中的每一个包括以不同模式配置的存储块,在操作626中实际转移所选择的块的过程包括重新配置块。暂时参考图6c,展示了根据一个实施例的在第一池与第二rtu队列之间转移给定块的示例性子过程,其中的一个或多个可以用于执行以下图6a的操作626和/或图6b的操作656。然而,应注意的是,图6c的子过程根据一个实施例示出,该实施例绝不旨在限制本发明。
103.如图所示,图6c中的流程图包括重新配置所选块。参见子操作670。取决于所选块是从第一池转移到第二rtu队列还是从第二池转移到第一rtu队列,可以不同地执行重新配置存储块的过程。例如,从第一池转移到第二rtu队列的块优选地从slc模式重新配置成每单元多比特模式。然而,从第二池转移到第一rtu队列的块优选地从每单元多位模式重新配置到slc模式。在slc和每单元多位模式之间重新配置给定块的过程可以通过去激活和/或重新激活包括在块中的某些位、逻辑上重新定义给定块等来执行,或者使用在阅读了本描述之后将对本领域技术人员显而易见的任何过程来执行。
104.重新校准块会影响块的性能。例如,与访问第二池中的给定块相关联的读取阈值电压偏移值可能由于块在第一池中被使用而改变。因此,该流程图还包括一旦块被再次编程,则标记该块以重新校准目标模式中的读取阈值电压偏移值。参见子操作672。在阅读本说明书之后,可以使用本领域技术人员显而易见的任何过程来重新校准读取阈值电压偏移值。然而,在一些方法中,可从存储器(例如,查找表)存取读取阈值电压偏移值、预定义读取阈值电压偏移值、在运行中动态调整读取阈值电压偏移值等。此外,子操作672包括在一些方法中为给定块中的每个有效位重新校准一个或多个读取阈值电压偏移值。
105.返回参考图6a,方法600从操作626返回至操作602,例如,使得可以继续监测第一和/或第二rtu队列的大小。因此,方法600能够实时地成功地调整块池大小,同时还保持总体存储系统的高效性能。
106.如前所述,方法600中包括的不同过程中的一个或多个可以在将以每单元多位模式配置的存储块转变到以slc模式配置的上下文中应用。因此,现在参见图6b,示出了根据另一个实施例的用于调整存储系统中的块池大小的方法630。在各种实施方式之中,方法630可根据本发明在图1-6a中描述的任何环境中执行。当然,如本领域技术人员在阅读本说明书后将理解的,方法630中可以包括比图6b中具体描述的操作更多或更少的操作。例如,在以下将在每单元多位模式中配置的存储块转变到在slc模式中配置的上下文中描述方法630中所包括的不同过程。因此,上面参照图6a的方法600描述的方法中的任意一个或多个可以根据需要在方法630中实现。
107.方法630的步骤中的每一者也可由操作环境的任何合适组件执行。例如,在不同实施例中,方法630可以部分地或完全由混合控制器、控制器、处理器、计算机等或其中具有一个或多个处理器的一些其他设备来执行。因此,在一些实施例中,方法630可以是计算机实施的方法。在这样的实施例中,用于实现该方法的计算机可包括存储器模块本身或其一部分,例如混合控制器。此外,术语“计算机”、“处理器”和“控制器”可以关于在此的任何实施例互换地使用,这样的组件在本发明的许多不同排列中被认为是等效的。
108.此外,对于具有处理器的那些实施例,处理器(例如,以硬件和/或软件实现的处理电路、芯片、和/或模块)并且优选地具有至少一个硬件部件可以用于任何设备中以执行方法630的一个或多个步骤。说明性处理器包括但不限于中央处理单元(cpu)、专用集成电路(asic)、现场可编程门阵列(fpga)等、其组合、或本领域已知的任何其他合适的计算设备。
109.如图6b所示,方法630的操作632包括评估第一准备使用(rtu)队列的大小和第二rtu队列的大小。第一和第二rtu队列中的每一个包括分别合并在第一和第二存储块池中的存储块。此外,第一和第二池中的每一个包括以不同模式配置的存储块。如上所述,第一池包括在slc模式中配置的存储块,而第二池包括在每单元多位模式中配置的存储块。因此,第一rtu队列包括以slc模式配置的存储块,而第二rtu队列包括以多位/单元模式配置的存储块。
110.再次,关于本描述,给定rtu队列的“大小”旨在表示包括在其中的擦除的存储块的量。rtu队列的大小由此表示给定rtu队列的总存储容量,并且可以通过rtu队列中所包括的块的数量、rtu队列中所包括的块的组合存储容量、rtu队列中所包括的总系统中所包括的块的总数的百分比等来表示(例如,量化)。根据一些方法,第一和/或第二rtu队列的大小通过实际检查队列本身、从查找表中检索信息、查看操作日志等来评估。
111.此外,决定634包括确定包括在第二rtu队列中的块的数目是否在第二rtu队列的第一范围内。如上所述,在优选方法中该第一范围对应于垃圾收集阈值,使得响应于确定包括在第二rtu队列中的块的数量不期望地低而执行垃圾收集操作。注意,该第一范围与第二rtu相关联并且可以与方法600中引入的与第一rtu相关联的第一范围相同或不同,例如,本领域技术人员在阅读本说明书后将理解。。
112.响应于确定包括在第二rtu队列中的块的数量不在第二rtu队列的第一范围中,方法600进行到操作636。在那里,操作636包括选择第二池中的块之一,而操作638包括从所选的块中重定位所有有效数据。在操作636中选择的块将经历在操作638中启动的垃圾收集过程。由此,在一些方法中,选择第二池中的所有块中具有最多无效数据的块。然而,在选择第二池中的块之一以经历垃圾收集过程的过程中可以考虑任何其他期望的因素。
113.响应于从所选择的块中重定位有效数据,操作640包括擦除所选择的块。继续到操作642,方法630包括将所选择的(并且现在被擦除的)块放置在对应于第二池的第二rtu队列中。还应注意,在一些方法中,当数据存储在页中且块尚未被擦除时,块经历读取阈值电压偏移值重新校准。因此,在一些方法中,将所选择的(并且现在被擦除的)块放置在第二rtu队列中的过程涉及标记该块用于重新校准读取阈值电压偏移值,例如,使用在读取本说明书之后对于本领域技术人员来说显而易见的任何过程。
114.仍参考图6b,方法630从操作642返回至操作632,例如,使得可以继续监测第一和/或第二rtu队列的大小。跳回判定634,响应于确定包括在第二rtu队列中的块数量在第二rtu队列的第一范围中,流程图前进到判定644。在那里,判定644包括确定第二池的大小是否应被减小。换言之,判定644确定包括在第二池中的存储块的数量是否是不合需要的,或者至少是不必要地高。该确定可通过将第二池的目标大小与第二池的当前(例如,实际)大小进行比较来作出。
115.响应于确定第二池的大小不应当减小,方法630返回到操作632,例如,使得可以继续监测第一和/或第二rtu队列的大小。然而,方法630响应于确定第二池的大小应当被减小而从判定644前进到判定646。在此,判定646包括确定包括在第一rtu队列中的块的数目是否在第一rtu队列的第二范围内。第一rtu队列的这个第二范围与第一rtu队列本身相关联并且在优选方式中对应于“提升阈值”,使得在确定是否将块从一个池转移到另一个池中时评估目标位置的rtu队列。换言之,即使第二rtu队列和第二池(例如,“源位置”)存储块被充分地填充,在决定从第二池中卸载存储块之前还考虑第一rtu队列的状态(例如,“目标位置”),出于以上讨论的那些原因,这是特别希望的。注意,该第二范围与第一rtu相关联并且可以与方法600中引入的与第二rtu相关联的第二范围相同或不同,例如,如本领域技术人员在阅读本说明书后将理解的。
116.仍然参考图6b,方法630响应于确定包括在第一rtu队列中的块的数目在第一rtu队列的第二范围中而从判定646返回到操作632。如上所述,这允许方法630继续监控第一和/或第二rtu队列的大小。方法630可替代地响应于确定包括在第一rtu队列中的块数目不在第一rtu队列的第二范围中前进到判定648。在那里,判定648包括确定存储系统经历的当前i/o工作负载是否在第三范围内。如上所述,在池之间转移存储块的过程是工作负荷密集的过程,从而可能对总体系统的性能产生影响。因此,通过评估当前的i/o存储系统在确定是否和/或何时在池之间传输存储块时的工作负载存储块,方法630能够将低i/o工作负载
作为目标并减少所产生的处理影响。
117.响应于确定存储系统经历的当前i/o工作负载在第三范围内,方法630返回到操作632。或者,响应于确定存储系统经历的当前i/o工作负载不在第三范围内,方法630前进到操作650。在那里,操作650包括选择第二池中的块之一。在操作650中选择的块将经历垃圾收集处理。由此,在一些方法中,选择第一池中的所有块中具有无效数据最多的块。然而,在选择第一池中的一个块进行垃圾收集处理的过程中可以考虑任何其他期望的因素。
118.操作652进一步包括从第二池中的选定块重定位有效数据。响应于从所选定块中重定位有效数据,操作654包括擦除选定块。继续到判定656,方法630包括将块从第二池传输到对应于第一池的第一rtu队列。再次,在rtu队列和/或池之间“转移”的块保持在存储器的相同平面和通道中(例如,参见图4)。换言之,虽然给定块的功能特性可能由于激活和/或去激活其中的每个单元中的某些位而改变,但是块本身不在存储器中物理地移动。相反,在逻辑意义上,在rtu队列和/或池之间“转移”块。在一些方法中,在lpt、块状态表、操作日志等中指示这些转移。
119.再次,第二池(连同第二rtu队列)包括以每单元多位模式配置的存储块,而第一池(连同第一rtu队列)包括以slc模式配置的存储块。因此,由于第一和第二池中的每一个包括以不同模式配置的存储块,在操作656中实际传输所选块的过程包括重新配置块。再次暂时参考图6c,所描述的用于在池与rtu队列之间传输给定块的任何子过程和/或特定方法可以用于执行图6b的操作656。
120.返回参考图6b,方法630从操作656返回至操作632,例如,使得可以继续监测第一和/或第二rtu队列的大小。因此,方法630还能够实时地成功地调整块池大小,同时还保持总体存储系统的高效性能。
121.现在参考图7,示出了根据一个实施例的数据和方框流程概述700。作为选择,本发明的数据和方框流程概述700可以结合来自本文列出的任何其他实施方式的特征来实现,诸如参考其他附图描述的那些,诸如图6a-6c。然而,这样的数据和方框流程概述700和本文所呈现的其他数据和方框流程概述700可以在不同应用中使用和/或在可以或可以不在本文列出的说明性实施例中具体描述的置换中使用。进一步,本文呈现的数据和方框流程概述700可以用于任何期望的环境。因此,图7(和其他图)可被认为包括任何可能的排列。
122.如图所示,主机写入由数据放置模块702接收,数据放置模块702包括leb 704和leb706,leb 704由被配置在slc模式中的一个或多个存储块组成,leb 706由被配置在每单元多位模式中一个或多个的存储块组成。在一些方法中,新数据首先被写到slc模式中配置有块的leb,从而允许新数据受益于slc模式中与块相关联的较低延迟和较高吞吐量(例如,与每单元多位模式中配置的块相比)。然而,在涉及高主机和内部写入负载的情况下,新数据可以直接存储在以每单元多位模式配置的块中。slc模式中配置的块被从第一组rtu队列708接收,而每单元多位模式中配置的块被从第二组rtu队列710接收。第一组rtu队列708和第二组rtu队列710中的每一个包括多个存储块712,每个存储块712累积在用于不同平面和通道714的rtu队列中,例如,如本领域技术人员在阅读本说明书之后将理解的。
123.与平面和通道相关联并且被包括在第一组rtu队列708和第二组rtu队列710中的rtu队列714中的每个被描绘为具有多个不同的阈值,该多个不同的阈值对应于包括在相应的rtu队列714中的存储块的数量。这些阈值之一是提升阈值,该提升阈值对应于如上所述
的第二范围中的任一者(例如,参见判定616和646)。因此,在一些方法中使用该“提升”阈值以确定相应的rtu队列和/或特定信道是否具有有不合需要的低数量的存储器块包括在其中。在本实施方式中,还实现“高”、“低”以及“临界”阈值,每个阈值表示第一组rtu队列708和第二组rtu队列710中的相应信道的不同填充水平。
124.响应于在数据放置模块702处用数据填充给定的块或存储器,leb被传送到被占用的块队列中的相应的一个。具体地,在slc模式中配置的leb被传送到slc占用的块队列716,而在每单元多位模式中配置的leb被传送到每单元多位占用的块队列718。队列716、718中的每一个中包括的leb的数量随时间而改变。因此,存储在每个队列716、718中的信息量(例如,其有效大小)也随时间而变化。
125.随着时间的推移,leb最终从队列716、718转移到垃圾收集器和损耗均衡器模块720。在一些方法中,leb根据标准垃圾收集规程前进到垃圾收集器和磨损平整器模块720。例如,由于leb的块中的数据随时间的推移而失效(例如,由于重写操作、删除等),可以指定leb进行垃圾收集。然而,在其他方法中,leb可以由垃圾收集器和磨损水平剂模块720根据以上关于图6a-6c描述的任何过程来选择和处理。在一些实施例中,垃圾收集器或磨损水平器可以基于leb中已经看到的块的保留时间或读取次数、或所测量的rber来进一步选择leb。
126.leb从垃圾收集器和损耗均衡器模块720前进到数据重定位模块722,数据重定位模块722将从leb中的块中提取的任何有效数据发送回数据放置模块702(如虚线箭头线表示的)。因此,数据可以被存储在存储器的另一可用leb中。此后,块擦除模块724擦除leb中的块。擦除操作可以涉及指定块的目标模式。
127.根据指定的目标块模式,擦除的块要么返回到与块配置的当前模式相对应的rtu队列,要么重新配置块。例如,在slc模式中配置的空块或者被返回到第一组rtu队列708中的rtu714,或者在被置于第二组rtu队列710中的rtu714中之前被以多位/单元模式重新配置。类似地,配置在每单元多位模式中的空块或者被返回到第二组rtu队列710中的rtu714,或者在被放置在第一组rtu队列708中的rtu714中之前在slc模式中被重新配置。因此,每个块擦除模块724被描绘为具有从其延伸的两条带箭头的线,这些线中的每条线表示在其中被擦除的块的可能路径。可以基于如上所述的图6a-6c中包括的任何过程做出是否将存储块返回至匹配rtu队列还是在将其添加至不同rtu队列之前重新配置块的确定。进一步,块的重新配置可以包括块状态表的更新。
128.由此可见,本文所包括的各个实施例能够成功地实时地调整块池大小,同时还保持总体存储系统的高效性能。通过确保正被缩小的池不会由于重新调整大小而经历存储块的缺乏、确保正被放大的池不会在rtu中保持太多被擦除的块、确保源池中的写入放大不会显著增加、以及确保正被传送的块有资格进行传送来维持系统的效率。这些池重新调整大小操作进一步在后台执行,由此对主机i/o延迟和吞吐量没有任何影响,如本领域技术人员在阅读本说明书之后将理解的。
129.本文所包括的一些实施例还能够避免当给定池处于针对干净(例如,空)块的压力下时将该池切换为字段数据写入和/或重新定位的情况。通过利用涉及低i/o负载的周期进一步改善性能。因此,当系统未被充分利用时,可在后台执行池之间的块转移而不影响系统的标称性能。更进一步,当确定是否在池之间传送块时,特别期望评估源位置以及目标位置
两者,因为它避免了不必要的处理开销。这还确保在块被转换到另一池之前充分地补充源池。
130.还应注意,尽管本文中已经在两个存储块池的上下文中描述了这些方法中的不同方法,但这些方法中的任一者可扩展到具有两个以上块池的实施例。在这样的实施例中,目标池可以使用优先级、基于用户输入、通过比较每个相应池的rtu块级别并选择具有最低数量的rtu块的池等来确定。
131.本发明可以是任何可能的技术细节集成度的系统、方法和/或计算机程序产品。计算机程序产品可包括其上具有用于使处理器执行本发明的各方面的计算机可读程序指令的计算机可读存储介质(或介质)。
132.计算机可读存储介质可为可保留和存储供指令执行装置使用的指令的有形装置。计算机可读存储介质可以是,例如但不限于,电子存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备、或者上述的任意合适的组合。计算机可读存储介质的更具体示例的非穷尽列表包括以下各项:便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、静态随机存取存储器(sram)、便携式紧凑盘只读存储器(cd-rom)、数字通用盘(dvd)、记忆棒、软盘、诸如穿孔卡之类的机械编码设备或具有记录在其上的指令的槽中的凸出结构、以及上述各项的任何合适的组合。如本文所使用的计算机可读存储介质不应被解释为暂时性信号本身,例如无线电波或其他自由传播的电磁波、通过波导或其他传输媒体传播的电磁波(例如,穿过光纤电缆的光脉冲)或通过电线发射的电信号。
133.本文中所描述的计算机可读程序指令可以经由网络(例如,互联网、局域网、广域网和/或无线网络)从计算机可读存储介质下载到相应的计算/处理设备,或者下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光传输纤维、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配器卡或网络接口接收来自网络的计算机可读程序指令,并转发计算机可读程序指令以存储在相应计算/处理设备内的计算机可读存储介质中。
134.用于执行本发明的操作的计算机可读程序指令可以是汇编指令、指令集架构(isa)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、集成电路的配置数据、或以一种或多种程序设计语言的任何组合编写的源代码或目标代码,这些程序设计语言包括面向对象的程序设计语言(诸如smalltalk、c++等)和过程程序设计语言(诸如“c”程序设计语言或类似程序设计语言)。计算机可读程序指令可以完全地在用户计算机上执行、部分在用户计算机上执行、作为独立软件包执行、部分在用户计算机上部分在远程计算机上执行或者完全在远程计算机或服务器上执行。在后一种情况下,远程计算机可通过任何类型的网络(包括局域网(lan)或广域网(wan))连接至用户计算机,或者可连接至外部计算机(例如,使用互联网服务提供商通过互联网)。在一些实施例中,包括例如可编程逻辑电路、现场可编程门阵列(fpga)或可编程逻辑阵列(pla)的电子电路可以通过利用计算机可读程序指令的状态信息来使电子电路个性化来执行计算机可读程序指令,以便执行本发明的各方面。
135.下面将参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述本发明。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各
方框的组合,都可以由计算机可读程序指令实现。
136.这些计算机可读程序指令可被提供给计算机或其他可编程数据处理装置的处理器以产生机器,使得经由计算机或其他可编程数据处理装置的处理器执行的指令创建用于实现在流程图和/或框图的或多个框中指定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置、和/或其他设备以特定方式工作,从而,其中存储有指令的计算机可读存储介质包括包含实现流程图和/或框图中的或多个方框中规定的功能/动作的方面的指令的制造品。
137.也可以把计算机可读程序指令加载到计算机、其他可编程数据处理装置、或其他设备上,使得在计算机、其他可编程装置或其他设备上执行一系列操作步骤,以产生计算机实现的处理,使得在计算机、其他可编程装置或其他设备上执行的指令实现流程图和/或框图中的或多个方框中规定的功能/动作。
138.附图中的流程图和框图示出了根据本发明的不同实施例的系统、方法和计算机程序产品的可能实现方式的架构、功能和操作。对此,流程图或框图中的每个框可表示指令的模块、段或部分,其包括用于实现指定的逻辑功能的一个或多个可执行指令。在一些备选实现中,框中标注的功能可以不按照图中标注的顺序发生。例如,连续示出的两个方框实际上可以作为一个步骤完成,同时、基本上同时、以部分或完全时间上重叠的方式执行,或者方框有时可以以相反的顺序执行,这取决于所涉及的功能。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作或执行专用硬件与计算机指令的组合的专用的基于硬件的系统来实现。
139.此外,根据不同实施例的系统可包括处理器和与处理器集成和/或可由处理器执行的逻辑,逻辑被配置成执行本文所述的处理步骤中的一个或多个。通过与其集成,意味着处理器具有嵌入在其中的作为硬件逻辑的逻辑,诸如专用集成电路(asic)、现场可编程门阵列(fpga)等。处理器可执行的意思是逻辑是硬件逻辑;软件逻辑,诸如固件、操作系统的一部分、应用程序的一部分;等等,或硬件和软件逻辑的一些组合,所述硬件和软件逻辑可由处理器访问并且被配置为使处理器在由处理器执行时执行一些功能。软件逻辑可以存储在任何存储器类型的本地和/或远程存储器上,如本领域中已知的。可以使用本领域已知的任何处理器,诸如软件处理器模块和/或硬件处理器,诸如asic、fpga、中央处理单元(cpu)、集成电路(ic)、图形处理单元(gpu)等。
140.图8示出了根据一个实施方式的网络架构800。如图8所示,提供包括第一远程网络804和第二远程网络806的多个远程网络802。网关801可耦合在远程网络802与接近网络808之间。在本网络体系结构800的上下文中,网络804、806可各自采取任何形式,包括但不限于lan、wan(诸如互联网)、公共交换电话网(pstn)、内部电话网等。
141.在使用中,网关801充当从远程网络802到邻近网络808的入口点。这样,网关801可以充当路由器和交换机,路由器能够定向到达网关801的给定数据分组,交换机为给定分组提供进出网关801的实际路径。
142.还包括至少一个数据服务器814,其耦合到邻近网络808,并且可经由网关801从远程网络802访问。应当注意,(一个或多个)数据服务器814可包括任何类型的计算设备/群件。耦合到每个数据服务器814的是多个用户设备816。此类用户装置816可包括台式计算机、膝上型计算机、手持式计算机、打印机和/或任何其他类型的包含逻辑的装置。应注意,
在一些实施例中,用户装置811也可直接耦接至任何网络。
143.外围设备820或一系列外围设备820(例如,传真机、打印机、扫描仪、硬盘驱动器、联网的和/或本地数据存储单元或系统等)可以耦合到网络804、806、808中的一个或多个。应注意,数据库和/或附加组件可与耦合到网络804、806、808的任何类型的网络元件一起使用或集成到耦合到网络804、806、808的任何类型的网络元件中。在本说明书的上下文中,网络元件可以指网络的任何部件。
144.根据一些实施例,本文描述的方法和系统可以利用和/或在虚拟系统和/或模拟一个或多个其他系统的系统上实现,例如虚拟托管microsoft windows环境的unix系统等。在一些实施例中,可以通过使用vmware软件来增强这种虚拟化和/或仿真。
145.在其他实施例中,一个或多个网络804、806、808可表示通常称为“云”的系统集群。在云计算中,共享资源(诸如处理能力、外围设备、软件、数据、服务器等)以按需关系被提供给云中的任何系统,从而允许跨许多计算系统访问和分布服务。云计算通常涉及在云中操作的系统之间的互联网连接,但是也可以使用连接系统的其他技术,如本领域中已知的。
146.图9示出了根据一个实施例的与图8的用户装置816和/或服务器814相关联的代表性硬件环境。图9示出根据一个实施例的具有中央处理单元910(诸如微处理器)和经由系统总线912互连的多个其他单元的处理器系统900的典型硬件配置。在一些实施方式中,中央处理单元910可以包括以上参照图2的一个或多个处理器210描述的任何方法。
147.图9所示的处理器系统900包括随机存取存储器(ram)914、只读存储器(rom)916和i/o适配器918。根据决不旨在限制本发明的一些实施例,i/o适配器918可以包括以上参考图2的i/o适配器218描述的任何方法。仍参考图9的处理器系统900,前述组件914、916、918可用于将外围设备(诸如存储子系统920)连接到总线912。在一些实施例中,存储子系统920可以包括与图2的数据存储系统220类似和/或相同的配置。根据决不旨在限制本发明,存储子系统920可以包括非易失性数据存储卡,例如,除了图2中所示的raid控制器之外,具有nvram存储卡、ram、rom、和/或一些其他已知类型的非易失性存储器。
148.继续参考图9,用户接口适配器922用于将键盘924、鼠标926、扬声器928、麦克风932和/或诸如触摸屏、数码相机(未示出)等的其他用户接口设备连接至总线912。
149.处理器系统900进一步包含将处理器系统900连接到通信网络935(例如,数据处理网络)的通信适配器934和将总线912连接到显示装置938的显示适配器936。
150.处理器系统900可以具有驻留在其上的操作系统,诸如microsoft windows操作系统(os)、macos、unixos等。应当理解,优选实施例也可以在除所提及的那些之外的平台和操作系统上实现。优选实施例可以使用java、xml、c和/或c++语言或其他编程语言以及面向对象的编程方法来编写。可以使用越来越多地用于开发复杂应用程序的面向对象编程(oop)。
151.此外,图10示出了根据一个实施方式结合低级(例如,磁带)存储层实现高级(例如,ssd)存储层的存储系统1000。要注意的是,根据各种实施方式,图10中所示的一些元件可实施为硬件和/或软件。存储系统1000可以包括用于与至少一个较高存储层1002和至少一个较低存储层1006上的多个介质通信的存储系统管理器1012。然而,在其他方法中,存储系统管理器1012可与至少一个较高存储层1002上的多个介质通信,但不能与较低存储层通信。较高存储层1002优选地可以包括一个或多个随机存取和/或直接存取介质1004,如硬盘、非易失性存储器(nvm)、nvram、ssd中的固态存储器、闪存、ssd阵列、闪存阵列等,和/或
本文指出的或本领域已知的其他。图3-4示出了ssd系统的示例性架构,其可以根据期望的实施例用作更高的存储层1002。
152.仍参考图10,较低存储层1006优选地包括一个或多个较低性能存储介质1008,包括顺序访问介质(诸如,磁带驱动器中的磁带和/或光学介质)、较慢访问的hdd、较慢访问的ssd等、和/或本文中指出或本领域已知的其他存储介质。一个或多个额外存储层1016可包含系统1000的设计者所期望的存储存储媒体的任何组合。因此,在一些方法中,一个或多个附加存储层1016可包括与图1至图2中示出的那些类似或相同的ssd系统架构。而且,较高存储层1002和/或较低存储层1006中的任一者可包含存储装置和/或存储介质的任何组合。
153.存储系统管理器1012可通过网络1010(诸如图10所示的存储区域网络(san)或一些其他合适的网络类型)与较高存储层1002和较低存储层1006上的存储介质1004、1008通信。存储系统管理器1012也可以通过主机接口1014与一个或多个主机系统(未示出)通信,该主机接口1014可以是或可以不是存储系统管理器1012的一部分。存储系统管理器1012和/或存储系统1000的任何其他组件可在硬件和/或软件中实现,并且可利用用于执行本领域中已知类型的命令的处理器(未示出),诸如中央处理单元(cpu)、现场可编程门阵列(fpga)、专用集成电路(asic)等。当然,可以使用存储系统的任何布置,如本领域技术人员在阅读本说明书时将显而易见的。
154.在更多实施例中,存储系统1000可以包括任意数量的数据存储层,并且可以在每个存储层内包括相同或不同的存储存储器介质。例如,每个数据存储层可以包括相同类型的存储存储器介质,诸如hdd、ssd、顺序访问介质(磁带驱动器中的磁带、光盘驱动器中的光盘等)、直接访问介质(cd-rom、dvd-rom等)或任何媒体存储类型的组合。在一个这样的配置中,较高存储层1002可以包括用于在较高性能存储环境中存储数据的大部分ssd存储介质,并且包括较低存储层1006和附加存储层1016的剩余存储层可以包括用于在较低性能存储环境中存储数据的ssd、hdd、磁带驱动器等的任何组合。以此方式,可将更频繁存取的数据、具有较高优先级的数据、需要更快速存取的数据等存储到较高存储层1002,而可将不具有这些属性中的之一的数据存储到额外存储层1016(包含较低存储层1006)。当然,本领域技术人员在阅读本描述后,根据本文提出的实施例,可以设计存储介质类型的许多其他组合以实现成不同的存储方案。
155.根据一些实施例,存储系统(例如1000)可以包括配置成接收打开数据集的请求的逻辑,配置成确定所请求的数据集是否在多个相关联部分中存储到分层数据存储系统1000的较低存储层1006的逻辑,被配置为将所请求的数据集合的每个关联部分移动到分层数据存储系统1000的较高存储层1002的逻辑,以及被配置为在分层数据存储系统1000的较高存储层1002上从关联部分组装所请求的数据集合的逻辑。
156.当然,根据不同实施例,该逻辑可以被实现为任何设备和/或系统上的方法或计算机程序产品。
157.很明显,前述系统和/或方法的不同特征可以以任何方式进行组合,从而从以上呈现的描述中创建多个组合。
158.本发明的各种实施例的描述是出于说明的目的而呈现的,但并非旨在穷举或限于所公开的实施例。在不脱离所描述的实施例的范围的情况下,许多修改和变化对于本领域普通技术人员来说是显而易见的。这里使用的术语被选择来最好地解释实施例的原理、实
际应用或对在市场中发现的技术的技术改进,或者使得本领域普通技术人员能够理解这里公开的实施例。