(EN) Provided are a device for detecting a front end of a treatment tool in an endoscopic image, a method for detecting a front end of a treatment tool in an endoscopic image, and a program for detecting a front end of a treatment tool in an endoscopic image which rapidly and suitably detect the position of a front end point of a treatment tool even in a complex environment. Provided is a device for detecting a front end of a treatment tool in an endoscopic image, the device comprising: an image acquisition unit which acquires an operation image; an image recognition unit which performs image recognition on the operation image by using a trained deep learning model; a treatment tool extraction unit which generates, on the operation image, a segmentation mask and a bounding box for the treatment tool in the operation image; and a front end detection unit which detects a front end of the treatment tool. The front end detection unit comprises: a root unit specification unit which specifies a root unit of the treatment tool; an end part detection unit which detects an end part of the treatment tool; an angle detection unit which detects an angle of the treatment tool; and a front end point detection unit which detects a front end point of the treatment tool.
(FR) La présente invention concerne un dispositif de détection d’une extrémité avant d’un outil de traitement dans une image endoscopique, un procédé de détection d’une extrémité avant d’un outil de traitement dans une image endoscopique, et un programme de détection d’une extrémité avant d’un outil de traitement dans une image endoscopique qui détecte rapidement et de manière appropriée la position d’un point d’extrémité avant d’un outil de traitement même dans un environnement complexe. L’invention concerne un dispositif de détection d’une extrémité avant d’un outil de traitement dans une image endoscopique, le dispositif comprenant : une unité d’acquisition d’image qui acquiert une image d’opération ; une unité de reconnaissance d’image qui effectue une reconnaissance d’image sur l’image d’opération en utilisant un modèle d’apprentissage profond entraîné ; une unité d’extraction d’outil de traitement qui génère, sur l’image d’opération, un masque de segmentation et une boîte de liaison pour l’outil de traitement dans l’image d’opération ; et une unité de détection d’extrémité avant qui détecte une extrémité avant de l’outil de traitement. L’unité de détection d’extrémité avant comprend : une unité de spécification d’unité racine qui spécifie une unité racine de l’outil de traitement ; une unité de détection de partie d’extrémité qui détecte une partie d’extrémité de l’outil de traitement ; une unité de détection d’angle qui détecte un angle de l’outil de traitement ; et une unité de détection de point d’extrémité avant qui détecte un point d’extrémité avant de l’outil de traitement.
(JA) 複雑な環境下においても迅速、適切に処置具の先端点の位置を検出する内視鏡画像の処置具の先端検出装置、先端検出方法、及び先端検出プログラムを提供する。内視鏡画像の処置具の先端検出装置であって、手術画像を取得する画像取得部と、予め学習された深層学習モデルを用いて、手術画像の画像認識を行う画像認識部と、手術画像内において当該手術画像内の処置具のセグメンテーションマスクとバウンディングボックスとを生成する処置具抽出部と、処置具の先端を検出する先端検出部とを備え、先端検出部は、処置具の根部を特定する根部特定部と、処置具の端部位を検出する端部位検出部と、処置具の角度を検出する角度検出部と、処置具の先端点を検出する先端点検出部とを備える。
