Результат интеллектуальной деятельности: СПОСОБ ИЗВЛЕЧЕНИЯ ДАННЫХ ИЗ НАБОРА ДАННЫХ МЕДИЦИНСКИХ ИЗОБРАЖЕНИЙ

Область техники, к которой относится изобретение

Настоящее изобретение относится к способу извлечения данных из набора данных медицинских изображений, полученного с помощью методики формирования медицинских изображений. Изобретение также относится к соответствующей системе для осуществления способа и соответствующему компьютерному программному продукту для такого осуществления.

Уровень техники

Данные трехмерных медицинских изображений часто получают в форме набора слоев данных. Набор слоев определяет данные объемного, т.е. трехмерного изображения. Этот набор может упоминаться как набор данных изображения или просто как данные изображения. Наиболее часто применимый способ рассмотрения большого набора трехмерных медицинских данных, например, со сканера CT или подобного устройства, заключается в загрузке набора данных с носителя данных и отображении слоев в поперечном сечении этого объема. Интересующие местоположения в этом объеме находят путем просмотра прокруткой слоев (часто большого количества). Обычно, это набор оригинальных слоев, полученных от устройства получения. Это весьма трудоемкая задача, которая включает перемещение в интересующие области и визуальный осмотр слоев. Осматривая данные таким образом, не существует средств облегчающих или ускоряющих нахождение целевых местоположений.

Таким образом, текущая процедура заключается в извлечении полного набора данных, перемещении через полученные слои для определения местонахождения интересующей области или объекта, осмотре этой интересующей области и перемещении от одной интересующей области к следующей, просматривая прокруткой данные, если нужно просмотреть более одного объекта.

В альтернативном варианте, когда пользователь знает, в какой части набора данных может быть интересующий объект, часть набора данных может быть извлечена. Однако это требует, чтобы пользователь просмотрел некоторое количество миниатюрных представлений слоев в равных интервалах в наборе данных, и решил, какой интервал(ы) извлечь.

Если нужно просмотреть несколько объектов, пользователь должен извлечь весь набор данных или его часть, переместиться к первой интересующей области, и в местном масштабе просмотреть прокруткой слои, которые содержат части этого первого объекта. После этого пользователь переместится к следующей интересующей области, чтобы просмотреть следующий объект, и т.д., пока все объекты не будут просмотрены. Поскольку нет доступной информации о местоположениях и размерах и т.д. объектов относительно набора данных, должен быть извлечен весь набор данных. В альтернативном варианте, пользователь может потратить время на выбор части набора данных, которая в любом случае занимает больший объем, чем интересующий объект(ы).

Все приложения, которые требуют извлечения данных из больших наборов данных, для просмотра объектов, которые представлены частями этих наборов данных, занимают много времени. Количество слоев, которые содержат поперечные сечения с интересующим объектом, могут быть намного меньше, чем общее количество слоев в наборе данных. Загрузка больших наборов данных занимает еще больше времени, что создает неудобства для пользователя. Если требуется только относительно небольшая часть набора данных, так как интересующая область намного меньше, чем полный объем, то время и компьютерные ресурсы тратятся впустую.

Проблема (практически) бесполезного извлечения данных становится более неотложной из-за увеличивающегося пространственного разрешения текущих методов формирования медицинских изображений. Таким образом, раньше приблизительно 100-200 слоев могли быть получены из сеанса формирования изображения, теперь количество слоев может составлять более 1000, при котором анализ вручную такого количества слоев является весьма трудоемким.

Текущие методы представления большого количества данных и предоставления пользователю улучшенного краткого обзора набора данных медицинских изображений могут быть найдены, например, в US 2006/0085407, где электронный список или миниатюрные представления используются, чтобы дать краткий обзор большого набора данных. Однако миниатюрные картинки выбираются на основе нумерации слоев или картинок, что не очень эффективно для выбора соответствующих анатомических частей в интересующей области.

Следовательно, улучшенный способ извлечения данных из набора данных медицинских изображений был бы выгоден, и в особенности был бы выгоден более эффективный и/или надежный способ.

Сущность изобретения

Из-за увеличивающегося использования анализа медицинских изображений, недавно произошел рост в системах, которые могут обеспечить автоматические способы (грубой) сегментации объектов в этом наборе медицинских данных, так, чтобы приближенная граница и занимаемый объем был известен для нескольких объектов. Эта информация может использоваться для 'ознакомительного просмотра содержания'. В случае с набором медицинских данных, объектами могут быть различные органы, которые присутствуют в объеме, охватываемом набором данных, и которые обнаружены, идентифицированы и грубо сегментированы, такие как легкие, сердце, печень, селезенка, почки. Автоматические способы сегментации и распознавания различных объектов, которые присутствуют в наборе данных, уже доступны, и хотя они не всегда работают без сбоев, они быстро развиваются и появляются в данной области. Результаты такого способа могут быть доступны и храниться с набором данных и включать в себя информацию, относящуюся к объекту, такую как название, сегментированный объем, свойства внешнего вида, отклонения в форме или местоположении, и т.д. Информация содержания может быть извлечена автоматически во время обнаружения или при первом доступе к данным.

Таким образом, автоматическая сегментация и контент-анализ могут быть найдены, например, в US 2005/0276455. Для общего обзора сегментации в формировании медицинских изображений, читатель может обратиться к C.Xu, D. Pham и J.L.Prince “Medical Image Segmentation Using Deformable Models” ("Сегментация медицинских изображений с использованием деформируемых моделей") Руководство по формированию медицинских изображений, Том 2: Обработка и анализ медицинских изображений, стр. 129-174, под редакцией J.M.Fitzpatrick и M. Sonka, Пресса SPIE, май 2000 г.

Соответственно, предпочтительно изобретение стремится смягчить, облегчить или устранить один или больше вышеупомянутых недостатков отдельно или в любой их комбинации. В частности, задачей настоящего изобретения следует рассматривать обеспечение способа более легкого и/или более быстрого поиска репрезентативных данных в наборе данных медицинских изображений.

Эта и некоторые другие задачи достигаются в первом аспекте изобретения при обеспечении способа извлечения множества слоев данных из набора данных медицинских изображений, при этом способ включает в себя этапы, на которых:

a) отображают индикатор, связанный с множеством слоев данных;

б) выбирают индикатор на основе ввода пользователя; и

в) извлекают множество слоев данных, связанных с индикатором, когда упомянутый индикатор выбран;

при этом связь между индикатором и множеством слоев основана на сегментации набора данных медицинских изображений, причем индикатор представляет объект, полученный при сегментации набора данных медицинских изображений, и множество слоев данных включают в себя данные объекта.

Особенно, но не исключительно, преимущество изобретения состоит в получении способа, в котором пользователь получает улучшенный краткий обзор относительно большого набора данных медицинских изображений. Так же способ позволит пользователю сохранить время, ему не придется ждать, пока будет извлечен большой набор данных, так как репрезентативный индикатор представляет обычно только частичный размер набора данных. Кроме того, пользователю не придется просматривать прокруткой вперед и назад полученных слоев, чтобы определить местонахождение слоев, связанных с интересующей областью или участком (ROI).

В предпочтительном варианте осуществления способ может дополнительно включать в себя этапы, на которых: выполняют сегментацию данных медицинских изображений для получения, таким образом, данных объекта;

идентифицируют слои, включающие данные объекта для создания, таким образом, множества слоев данных;

определяют индикатор для связи с множеством слоев данных; и

связывают индикатор с множеством слоев данных.

В одном варианте осуществления индикатор может быть репрезентативной картинкой объекта на основе слоя из множества слоев. Предпочтительно, картинка может быть миниатюрной картинкой или другой мелкомасштабной картинкой, так, чтобы на дисплее могли быть отображены и просмотрены пользователем множество картинок. Дополнительно, или в качестве альтернативы, первый и второй индикатор могут быть репрезентативным текстом, описывающим множество слоев. Текст наиболее удобен на общепринятом языке в области применения, например, на латыни или на языке, который используется в географическом регионе/области применения.

Сегментация может быть основана на множестве слоев из набора данных медицинских изображений, хотя другой способ сегментации, такой как сегментация, основанная на обнаружении контура в изображении, вычисленном из одного слоя данных, может также быть осуществлен в способе согласно настоящему изобретению. Кроме того, индикатор может быть основан на репрезентативных слоях из множества слоев данных. Репрезентативные слои могут быть предпочтительно показаны в уменьшенном размере, например, в виде миниатюр. В возможных вариантах настоящего изобретения индикатор может быть основан на любом поднаборе данных, например, кубическом или круглом поднаборе данных изучаемого набора данных медицинских изображений. Индикатор может быть основан на слое, выбранном приблизительно из середины множества слоев данных.

В одном варианте осуществления объектом является определенная анатомическая область, то есть отличная из остального объема во множестве слоев. Дополнительно, или в качестве альтернативы, объект может быть найден при помощи основанного на содержании анализа, включающего способ анатомического распознавания.

В одном варианте осуществления индикатор может быть выбран из вида поперечного сечения, включающего один или более основных осей объекта, например, момента тензора инерции объекта. Таким образом, на выбор индикатора могут влиять различные соображения.

В другом варианте осуществления индикатор, связанный с множеством слоев, может быть выбран из таблицы с заранее определенным индикатором. Таблица может содержать заранее определенный список символов, причем каждый символ имеет заданное значение, предпочтительно общепринятое значение в области медицины. В альтернативном варианте, таблица может содержать настройки для создания индикатора. Например, когда обнаружено сердце, представление индикатора может быть установлено так, чтобы показать четыре полости.

Во втором аспекте настоящее изобретение относится к системе извлечения множества слоев данных из набора данных медицинских изображений, при этом система включает в себя:

a) блок индикатора для отображения индикатора, связанного с множеством слоев данных;

б) блок выбора для выбора индикатора на основе ввода пользователя; и

в) блок извлечения для извлечения множества слоев данных, связанных с индикатором, когда упомянутый индикатор выбран;

при этом связь между индикатором и множеством слоев основана на сегментации набора данных медицинских изображений, причем индикатор представляет объект, полученный при сегментации набора данных медицинских изображений, и множество слоев данных включает в себя данные объекта.

Предпочтительно, система может дополнительно включать в себя: блок сегментации для сегментации данных медицинских изображений для получения, таким образом, данных объекта;

блок идентификации для идентификации слоев, включающих данные объекта для создания, таким образом, множества слоев данных;

блок определения для определения индикатора для связи с множеством слоев данных; и

блок связи для связывания индикатора с множеством слоев данных.

В четвертом аспекте изобретение относится к аппарату получения изображения, включающему систему согласно третьему аспекту.

В пятом аспекте изобретение относится к компьютерному программному продукту, который позволяет компьютерной системе, включающей в себя, по меньшей мере, один компьютер, имеющий средство хранения данных, подключенное к нему, управлять компьютерной системой согласно первому аспекту изобретения.

Этот аспект изобретения особенно, но не исключительно, выгоден в том, что настоящее изобретение может быть выполнено компьютерным программным продуктом, позволяющим компьютерной системе выполнить операции первого аспекта изобретения, когда компьютерный программный продукт загружен или перекачан в компьютерную систему. Такой компьютерный программный продукт может быть обеспечен на машиночитаемом носителе любого вида или через сеть.

Отдельные аспекты настоящего изобретения могут быть объединены с любым из других аспектов. Эти и другие аспекты изобретения будут очевидны из следующего описания в отношении упомянутых вариантов осуществления.

Краткое описание чертежей

Теперь изобретение будет описано более подробно с указанием сопровождающих фигур. Фигуры показывают один способ осуществления настоящего изобретения и не ограничивают другие возможные варианты осуществления, подпадающие под объем приложенной формулы изобретения.

Фиг. 1 изображает схематическое представление различных органов, найденных при основанном на содержании анализе грудной клетки и верхней части живота,

Фиг. 2 изображает схематическое представление, подобное изображенному на фиг. 1, показывающее, как набор данных медицинских изображений разделен на слои,

Фиг. 3 изображает схематическое представление варианта осуществления системы согласно изобретению,

Фиг. 4 схематично иллюстрирует связь между индикаторами и соответствующими множествами слоев данных,

Фиг. 5 изображает схематическое представление различных видов репрезентативных индикаторов,

Фиг. 6 иллюстрирует часть интерфейса пользователя согласно настоящему изобретению,

Фиг. 7 изображает схематическую блок-схему последовательности этапов способа извлечения множества слоев данных из набора данных медицинских изображений.

Подробное описание варианта осуществления

Фиг. 1 изображает схематическое представление различных органов, найденных при основанном на содержании анализе верхней части живота и грудной клетки человека (homo sapiens). В доступных в настоящее время системах для выполнения основанного на содержании анализа с полуавтоматизированным/автоматизированным способом анатомического распознавания возможно проанализировать и распознать органы, такие как легкие (левое и правое), сердце и печень (все три органа показаны на фиг. 1), но и селезенку, спинной мозг, мозг, мочевой пузырь, толстую кишку, структуру сосудов в целом и почки можно теперь обнаружить из набора 5 данных медицинских изображений. Для общей ссылки на сегментацию при формировании медицинских изображений читатель может обратиться к документу C.Xu, D. Pham и J.L.Prince “Medical Image Segmentation Using Deformable Models” ("Сегментация медицинских изображений с использованием деформируемых моделей," Руководство по формированию медицинских изображений, Том 2: Обработка и анализ медицинских изображений, стр. 129-174, под редакцией J.M.Fitzpatrick и M. Sonka, Пресса SPIE, май 2000 г., который полностью включен в настоящее описание посредством ссылки.

Фиг. 2 изображает схематическое представление, подобное изображенному на фиг. 1, показывающее, как набор данных медицинских изображений разделен на слои как обозначено равноудаленными горизонтальными линиями в пределах прямоугольника, иллюстрирующего набор 5 данных медицинских изображений. Справа от набора 5 данных показан результат ознакомительного анализа содержания и распознавания этой анатомической части пациента, данный названиями найденных органов. Таким образом, легкие (правое и левое), сердце, селезенка, почки и печень показаны смежными с линией с двойной стрелкой, указывающей протяженность различных органов с точки зрения слоя. Необходимо отметить, что один слой может содержать более одного органа. Также один орган может быть разделен на дополнительные части, например, при анализе и распознавании сердца могут быть идентифицированы четыре полости и идентифицирована каждая полость как правое или левое предсердие или правый или левый желудочек.

Фиг. 3 изображает схематическое представление варианта осуществления системы извлечения согласно изобретению. Система 100 извлечения включает в себя аппарат получения изображения MIM. Система 100 извлечения выполнена с возможностью извлечения слоев данных из набора 5 данных медицинских изображений, полученного аппаратом получения изображения MIM, используя, например, компьютерную томографию (CT), магнитно-резонансную визуализацию (MRI), позитронную электронную томографию (PET), однофотонную эмиссионную компьютерную томографию (SPECT), ультразвуковую эхографию и вращательную ангиографию, или любой другой метод формирования медицинских изображений. Передача от метода MIM к блоку 12 может быть осуществлена через специализированные средства 11 соединения (по короткому или длинному диапазону, возможно через Интернет) или с помощью беспроводной передачи.

Система 100 включает в себя средства 13 сегментации для сегментации набора 5 данных медицинских изображений. Система 100 также включает в себя средства 14 обработки для связи индикатора с множеством слоев, причем индикатор является представителем объекта, полученного в результате сегментации. Например, объект может быть найден при основанном на содержании анализе с помощью полуавтоматизированного (то есть с вводом пользователя) или полностью автоматизированного способа анатомического распознавания в сегментированном наборе 5 данных медицинских изображений. Таким образом, например, первый объект 1 может быть сердцем, а второй объект 2 может быть легкими, сравните с фиг. 4. Необходимо отметить, что любое множество органов может использоваться в контексте настоящего изобретения, понятия "первый" и "второй" введены только для удобства. Дополнительно, средства 15 извлечения обеспечены для извлечения множества слоев данных, связанных с индикатором, когда упомянутый индикатор выбран. Необходимо отметить, что множество извлеченных слоев данных обычно меньше по сравнению с полным набором данных медицинских изображений, таким образом, вызывая необходимость в уменьшении передачи данных. Средства 15 извлечения могут быть частично или полностью расположены возле интерфейса 17 пользователя (UI). Ввод пользователя для выбора индикатора может в типичном варианте исходить из интерфейса 17 пользователя (UI). Индикаторы могут быть переданы для отображения с помощью специализированных средств 16 соединения (в коротком или длинном диапазоне, возможно через Интернет), или беспроводной передачей на интерфейс 17 пользователя (UI), при этом рентгенолог или другой обученный персонал может использовать преимущество, состоящее в усовершенствованных возможностях извлечения, обеспеченных настоящим изобретением.

Фиг. 4 схематично изображает связь между индикаторами и соответствующими множествами слоев данных включающих в себя, например, данные, определенные объектом или определенной анатомической областью. Фиг. 4 схематично показывает сегментированный набор 5 данных медицинских изображений, включающий слои S1, S2, S3, S4, S5 и S6. Сегментация набора 5 данных медицинских изображений выявляет два объекта: сердце 1 и легкое 2. В этом иллюстративном примере данные объекта 1, то есть данные сердца, содержатся в пределах слоев S1, S2 и S3, тогда как данные другого объекта 2, то есть данные легкого, содержатся в пределах слоев S2, S3, S4 и S5. Когда осуществляется связывание индикатора с слоями, включающими данные объекта, основанные на сегментации, включающей основанный на содержании анализ с полуавтоматизированным/ автоматизированным способом анатомического распознавания в сегментированных наборах 5 данных медицинских изображений, такое связывание имеет следствием связывание индикаторов 10 "СЕРДЦЕ" и 20 "ЛЕГКИЕ" с данными сердца 1 и данными легких 2, соответственно. При извлечении слоев данных, связанных с сердцем 1, нет необходимости в передаче всех слоев S1-S6, требуется передача только слоев S1-S3 (число слоев указано только в иллюстративных целях; на практике общее количество слоев обычно значительно выше, и число извлеченных слоев будет небольшой долей от общего количества). В иллюстративном варианте осуществления, изображенном на фиг. 4, индикаторы 10 и 20 являются текстовыми индикаторами. Другие индикаторы также возможны, как будет объяснено ниже.

Фиг. 5 изображает схематическое представление различных видов индикаторов 10 и 20. Как и на фиг. 4, индикатор может быть текстом, предпочтительно названием органа на удобном языке, то есть, СЕРДЦЕ и ЛЕГКОЕ, как показано в колонке A на фиг. 5. В другом варианте осуществления первый и второй индикатор 10 и 20 могут быть картинками первого 1 и второго 2 объектов, соответственно, как показано в колонке B и С. Колонка B представляет вид сбоку слоев, тогда как колонка C представляет поперечное сечение, то есть мультипланарное переформатированное отображение оригинальных слоев или оригинального слоя полученных данных изображения. Картинки представляют собой предпочтительно миниатюрные картинки или подобные небольшие картинки для удобного просмотра пользователем. Дополнительно, подходящий символ может использоваться как индикатор 10 или 20.

Фиг. 6 иллюстрирует часть интерфейса пользователя UI согласно настоящему изобретению с индикаторами 10 и 20, представляющими легкие и сердце, соответственно. Каждый индикатор включает текстовый знак и изображение репрезентативного слоя.

Фиг. 7 показывает схематическую блок-схему последовательности этапов способа извлечения множества слоев данных из набора 5 данных медицинских изображений, при этом способ включает в себя этапы, на которых:

a) отображают индикатор 10 и 20, связанный с множеством слоев данных;

б) выбирают индикатор 10 и 20 на основе ввода 17 пользователя; и

в) извлекают множество слоев данных, связанных с индикатором, когда упомянутый индикатор выбран;

при этом связь между индикатором и множеством слоев основана на сегментации набора данных медицинских изображений, причем индикатор представляет объект, полученный при сегментации набора данных медицинских изображений, и множество слоев данных включают в себя данные объекта.

Изобретение может быть осуществлено с помощью аппаратных средств, программного обеспечения, программно-аппаратных средств или любой их комбинации. Изобретение или некоторые из его признаков могут быть также осуществлены как программное обеспечение, работающее на одном или более процессорах и/или цифровых сигнальных процессорах.

Отдельные элементы варианта осуществления изобретения могут быть физически, функционально и логически осуществлены любым подходящим способом, в одном блоке, во множестве блоков или как часть отдельных функциональных блоков. Изобретение может быть осуществлено в одном блоке или может быть физически и функционально распределено между различными блоками и процессорами.

Хотя настоящее изобретение было описано в связи с конкретными вариантами осуществления, оно не должно рассматриваться как ограниченное представленными примерами. Объем настоящего изобретения должен интерпретироваться в свете сопровождающей формулы изобретения. В контексте формулы изобретения глагол "включать в себя" и его спряжения не исключает другие возможные элементы или этапы. Кроме того, использование единственного числа не должно рассматриваться как исключающее множественное число. Использование ссылочных знаков в формуле изобретения относительно элементов, обозначенных на фигурах, не должно также рассматриваться как ограничение объема изобретения. Кроме того, отдельные признаки, упомянутые в различных пунктах формулы изобретения, могут быть выгодным образом объединены, и упоминание этих признаков в различных пунктах формулы изобретения не исключает того, что комбинация признаков возможна и выгодна.