本發(fā)明涉及信息處理方法等。
背景技術(shù)：
1、與各種運(yùn)動(dòng)相關(guān)，存在使用多個(gè)照相機(jī)來拍攝人物的圖像并進(jìn)行3d骨骼識(shí)別的現(xiàn)有技術(shù)。
2、圖33是用于對(duì)與3d骨骼識(shí)別相關(guān)的現(xiàn)有技術(shù)進(jìn)行說明的圖。在圖33所示的例子中，照相機(jī)30a、30b拍攝人物u1的圖像。將照相機(jī)30a、30b拍攝的圖像分別設(shè)為圖像31a、31b。
3、圖像31a、31b分別被輸入到學(xué)習(xí)模型32a、32b，學(xué)習(xí)模型32a、32b分別輸出2d關(guān)鍵點(diǎn)33a、33b。學(xué)習(xí)模型32a、32b是訓(xùn)練完畢的深度學(xué)習(xí)模型等。2d關(guān)鍵點(diǎn)33a、33b是二維的骨骼信息等。
4、在現(xiàn)有技術(shù)中，通過整合2d關(guān)鍵點(diǎn)33a、33b來生成3d關(guān)鍵點(diǎn)34。3d關(guān)鍵點(diǎn)34是三維的骨骼信息等。例如，在3d關(guān)鍵點(diǎn)34中設(shè)定人體模型的各關(guān)節(jié)的三維的坐標(biāo)。
5、在現(xiàn)有技術(shù)中，通過對(duì)由照相機(jī)30a、30b拍攝的時(shí)間序列的圖像反復(fù)執(zhí)行上述處理，來生成時(shí)間序列的3d關(guān)鍵點(diǎn)。時(shí)間序列的3d關(guān)鍵點(diǎn)成為3d骨骼識(shí)別的結(jié)果。在圖33中，使用照相機(jī)30a、30b進(jìn)行了說明，但也可以還使用其它照相機(jī)來生成時(shí)間序列的3d關(guān)鍵點(diǎn)。
6、此處，在以進(jìn)行體操的表演的人物為對(duì)象來執(zhí)行3d骨骼識(shí)別的情況下，作為對(duì)象的人物以外的輔助者有時(shí)會(huì)侵入照相機(jī)的前方，導(dǎo)致3d關(guān)鍵點(diǎn)的錯(cuò)亂。
7、圖34是表示觀測不良時(shí)的例子的圖。圖34的圖像35a、35b、35c、35d為由拍攝位置不同的各照相機(jī)分別拍攝到的圖像。在圖像35a～35d中，將作為3d骨骼識(shí)別的對(duì)象的人物設(shè)為人物u2。例如，在圖像35b中，包含人物u2以外的人物u3。在這樣的狀況下，若基于圖像35a～35d以及接下來的各圖像，生成3d關(guān)鍵點(diǎn)序列，則生成3d關(guān)鍵點(diǎn)序列10。在3d關(guān)鍵點(diǎn)序列10中，3d關(guān)鍵點(diǎn)10-1、10-2、10-3、10-4、10-5中的、3d關(guān)鍵點(diǎn)10-2、10-3、10-4產(chǎn)生錯(cuò)亂。
8、為了保證3d骨骼識(shí)別的精度，將3d關(guān)鍵點(diǎn)錯(cuò)亂的區(qū)間確定為修正區(qū)間，基于修正區(qū)間的前后的3d關(guān)鍵點(diǎn)的動(dòng)作，對(duì)修正區(qū)間的3d關(guān)鍵點(diǎn)進(jìn)行修正。
9、圖35是用于對(duì)現(xiàn)有技術(shù)的修正方法進(jìn)行說明的圖。在圖35所示的例子中，使用3d關(guān)鍵點(diǎn)序列10進(jìn)行說明。在3d關(guān)鍵點(diǎn)序列10中包含3d關(guān)鍵點(diǎn)10-1～10-5。在現(xiàn)有技術(shù)中，通過對(duì)3d關(guān)鍵點(diǎn)序列10進(jìn)行異常檢測，來檢測錯(cuò)亂的3d關(guān)鍵點(diǎn)10-2、10-3、10-4。將錯(cuò)亂的3d關(guān)鍵點(diǎn)10-2、10-3、10-4的區(qū)間設(shè)為修正區(qū)間10a。在現(xiàn)有技術(shù)中，使用修正區(qū)間10a的前后的3d關(guān)鍵點(diǎn)10-1、10-5來修正3d關(guān)鍵點(diǎn)10-2～10-4。
10、此處，作為基于修正區(qū)間的前后的3d關(guān)鍵點(diǎn)對(duì)修正區(qū)間的3d關(guān)鍵點(diǎn)進(jìn)行修正的現(xiàn)有技術(shù)，存在spherical?liner?interpolation(slerp)、liner?interpolation(lerp)。圖36是用于對(duì)slerp以及l(fā)erp進(jìn)行說明的圖。slerp是球面線性插值，lerp是線性插值。球面線性插值是針對(duì)分離的場所的2點(diǎn)的關(guān)節(jié)，假定各關(guān)節(jié)之間為球(旋轉(zhuǎn))來進(jìn)行修正的方法。線性插值是針對(duì)分離的場所的2點(diǎn)的關(guān)節(jié)，假定各關(guān)節(jié)之間為直線來進(jìn)行修正的方法。例如，在圖35中說明的例子中，基于修正區(qū)間10a的前后的3d關(guān)鍵點(diǎn)10-1、10-5的各關(guān)節(jié)的位置、slerp、lerp，來確定最佳的各關(guān)節(jié)的位置，修正3d關(guān)鍵點(diǎn)10-2～10-4。
11、專利文獻(xiàn)1：日本特開2021-135877號(hào)公報(bào)
12、然而，在上述的現(xiàn)有技術(shù)中，存在無法適當(dāng)?shù)卦O(shè)定修正區(qū)間、無法提高人物的骨骼的識(shí)別精度這樣的問題。
13、例如，若未適當(dāng)?shù)卦O(shè)定修正區(qū)間，則存在修正區(qū)間的前后的3d關(guān)鍵點(diǎn)的各關(guān)節(jié)的坐標(biāo)不適當(dāng)?shù)那闆r，無法執(zhí)行適當(dāng)?shù)男拚?/p>
技術(shù)實(shí)現(xiàn)思路
1、在一個(gè)技術(shù)方案中，本發(fā)明的目的在于，提供能夠適當(dāng)?shù)卦O(shè)定修正區(qū)間，并提高人物的骨骼的識(shí)別精度的信息處理方法、信息處理程序以及信息處理裝置。
2、在第一技術(shù)方案中，使計(jì)算機(jī)執(zhí)行以下處理。計(jì)算機(jī)基于分別設(shè)定了人體所包含的多個(gè)關(guān)節(jié)和關(guān)于多個(gè)關(guān)節(jié)的坐標(biāo)的多個(gè)骨骼信息，計(jì)算異常特征。計(jì)算機(jī)基于多個(gè)骨骼信息中的、與異常特征相關(guān)的正常骨骼信息的第一分布以及與異常特征相關(guān)的異常骨骼信息的第二分布，計(jì)算第一分布與第二分布的分離度最大的邊界值作為第一閾值。計(jì)算機(jī)基于第一閾值來設(shè)定時(shí)間序列的骨骼信息的修正范圍。
3、能夠適當(dāng)?shù)卦O(shè)定修正區(qū)間，提高人物的骨骼的識(shí)別精度。
1.一種信息處理方法，其特征在于，
2.根據(jù)權(quán)利要求1所述的信息處理方法，其特征在于，
3.根據(jù)權(quán)利要求1所述的信息處理方法，其特征在于，
4.根據(jù)權(quán)利要求2所述的信息處理方法，其特征在于，
5.一種信息處理方法，其特征在于，
6.一種信息處理程序，其特征在于，
7.根據(jù)權(quán)利要求6所述的信息處理程序，其特征在于，
8.根據(jù)權(quán)利要求6所述的信息處理程序，其特征在于，
9.根據(jù)權(quán)利要求7所述的信息處理程序，其特征在于，
10.一種信息處理程序，其特征在于，
11.一種信息處理裝置，其特征在于，
12.根據(jù)權(quán)利要求11所述的信息處理裝置，其特征在于，
13.根據(jù)權(quán)利要求11所述的信息處理裝置，其特征在于，
14.根據(jù)權(quán)利要求12所述的信息處理裝置，其特征在于，
15.一種信息處理裝置，其特征在于，