Initial snapshot: hand motion pipeline (Dyn-HaMR + dex-retargeting + SPIDER)
Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>
This commit is contained in:
@@ -0,0 +1,857 @@
|
||||
{
|
||||
"info": {
|
||||
"description": "RHD",
|
||||
"version": "1.1",
|
||||
"year": "2021",
|
||||
"date_created": "2021/03/13"
|
||||
},
|
||||
"licenses": "",
|
||||
"images": [
|
||||
{
|
||||
"file_name": "00111.png",
|
||||
"height": 320,
|
||||
"width": 320,
|
||||
"id": 111,
|
||||
"cam_param": {
|
||||
"focal": [
|
||||
299.0,
|
||||
299.0
|
||||
],
|
||||
"princpt": [
|
||||
160.0,
|
||||
160.0
|
||||
]
|
||||
}
|
||||
},
|
||||
{
|
||||
"file_name": "01111.png",
|
||||
"height": 320,
|
||||
"width": 320,
|
||||
"id": 1111,
|
||||
"cam_param": {
|
||||
"focal": [
|
||||
305.8999938964844,
|
||||
305.8999938964844
|
||||
],
|
||||
"princpt": [
|
||||
160.0,
|
||||
160.0
|
||||
]
|
||||
}
|
||||
},
|
||||
{
|
||||
"file_name": "11111.png",
|
||||
"height": 320,
|
||||
"width": 320,
|
||||
"id": 11111,
|
||||
"cam_param": {
|
||||
"focal": [
|
||||
263.20001220703125,
|
||||
263.20001220703125
|
||||
],
|
||||
"princpt": [
|
||||
160.0,
|
||||
160.0
|
||||
]
|
||||
}
|
||||
}
|
||||
],
|
||||
"annotations": [
|
||||
{
|
||||
"id": 111,
|
||||
"image_id": 111,
|
||||
"category_id": 1,
|
||||
"iscrowd": 0,
|
||||
"bbox": [
|
||||
162.5699920654297,
|
||||
63.858001708984375,
|
||||
93.96000671386719,
|
||||
121.4639892578125
|
||||
],
|
||||
"area": 11412.757246157154,
|
||||
"keypoints": [
|
||||
[
|
||||
245.8000030517578,
|
||||
73.9800033569336,
|
||||
1
|
||||
],
|
||||
[
|
||||
170.39999389648438,
|
||||
115.0,
|
||||
1
|
||||
],
|
||||
[
|
||||
180.39999389648438,
|
||||
103.69999694824219,
|
||||
1
|
||||
],
|
||||
[
|
||||
194.10000610351562,
|
||||
89.16999816894531,
|
||||
1
|
||||
],
|
||||
[
|
||||
220.0,
|
||||
82.51000213623047,
|
||||
1
|
||||
],
|
||||
[
|
||||
193.0,
|
||||
163.60000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
194.5,
|
||||
154.1999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
196.6999969482422,
|
||||
144.39999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
202.39999389648438,
|
||||
123.69999694824219,
|
||||
1
|
||||
],
|
||||
[
|
||||
208.39999389648438,
|
||||
175.1999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
210.6999969482422,
|
||||
164.3000030517578,
|
||||
1
|
||||
],
|
||||
[
|
||||
211.60000610351562,
|
||||
152.10000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
215.60000610351562,
|
||||
131.5,
|
||||
1
|
||||
],
|
||||
[
|
||||
228.10000610351562,
|
||||
167.1999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
228.6999969482422,
|
||||
159.0,
|
||||
1
|
||||
],
|
||||
[
|
||||
228.1999969482422,
|
||||
151.10000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
228.6999969482422,
|
||||
132.1999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
248.6999969482422,
|
||||
143.6999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
247.6999969482422,
|
||||
148.3000030517578,
|
||||
1
|
||||
],
|
||||
[
|
||||
246.39999389648438,
|
||||
148.10000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
244.39999389648438,
|
||||
129.1999969482422,
|
||||
1
|
||||
]
|
||||
],
|
||||
"joint_cam": [
|
||||
[
|
||||
117.9000015258789,
|
||||
-118.19999694824219,
|
||||
411.0
|
||||
],
|
||||
[
|
||||
17.09000015258789,
|
||||
-73.70999908447266,
|
||||
489.5
|
||||
],
|
||||
[
|
||||
32.540000915527344,
|
||||
-89.88999938964844,
|
||||
477.20001220703125
|
||||
],
|
||||
[
|
||||
52.959999084472656,
|
||||
-110.0,
|
||||
464.3999938964844
|
||||
],
|
||||
[
|
||||
87.95999908447266,
|
||||
-113.70000457763672,
|
||||
438.6999816894531
|
||||
],
|
||||
[
|
||||
56.71000289916992,
|
||||
6.140999794006348,
|
||||
514.1000366210938
|
||||
],
|
||||
[
|
||||
56.7599983215332,
|
||||
-9.583000183105469,
|
||||
492.1000061035156
|
||||
],
|
||||
[
|
||||
57.97999954223633,
|
||||
-24.700000762939453,
|
||||
472.79998779296875
|
||||
],
|
||||
[
|
||||
64.52000427246094,
|
||||
-55.34000015258789,
|
||||
455.5
|
||||
],
|
||||
[
|
||||
81.20000457763672,
|
||||
25.459999084472656,
|
||||
501.6999816894531
|
||||
],
|
||||
[
|
||||
81.8800048828125,
|
||||
6.9070000648498535,
|
||||
483.3999938964844
|
||||
],
|
||||
[
|
||||
80.05999755859375,
|
||||
-12.220000267028809,
|
||||
464.1000061035156
|
||||
],
|
||||
[
|
||||
83.37000274658203,
|
||||
-42.70000076293945,
|
||||
448.0
|
||||
],
|
||||
[
|
||||
113.20000457763672,
|
||||
11.960000038146973,
|
||||
496.6999816894531
|
||||
],
|
||||
[
|
||||
109.0999984741211,
|
||||
-1.5170000791549683,
|
||||
475.20001220703125
|
||||
],
|
||||
[
|
||||
103.20000457763672,
|
||||
-13.480000495910645,
|
||||
452.6999816894531
|
||||
],
|
||||
[
|
||||
102.0,
|
||||
-41.32999801635742,
|
||||
443.79998779296875
|
||||
],
|
||||
[
|
||||
143.09999084472656,
|
||||
-26.25,
|
||||
482.3000183105469
|
||||
],
|
||||
[
|
||||
137.0,
|
||||
-18.23000144958496,
|
||||
467.29998779296875
|
||||
],
|
||||
[
|
||||
130.60000610351562,
|
||||
-18.049999237060547,
|
||||
452.0
|
||||
],
|
||||
[
|
||||
124.9000015258789,
|
||||
-45.51000213623047,
|
||||
442.0999755859375
|
||||
]
|
||||
],
|
||||
"hand_type": "left"
|
||||
},
|
||||
{
|
||||
"id": 1111,
|
||||
"image_id": 1111,
|
||||
"category_id": 1,
|
||||
"iscrowd": 0,
|
||||
"bbox": [
|
||||
163.91000366210938,
|
||||
92.3900146484375,
|
||||
59.88001251220703,
|
||||
118.91999053955078
|
||||
],
|
||||
"area": 7120.930521459843,
|
||||
"keypoints": [
|
||||
[
|
||||
218.8000030517578,
|
||||
201.39999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
168.89999389648438,
|
||||
147.89999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
171.5,
|
||||
161.6999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
182.3000030517578,
|
||||
178.0,
|
||||
1
|
||||
],
|
||||
[
|
||||
202.60000610351562,
|
||||
191.10000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
184.6999969482422,
|
||||
174.1999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
175.6999969482422,
|
||||
162.39999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
180.60000610351562,
|
||||
148.10000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
200.5,
|
||||
153.3000030517578,
|
||||
1
|
||||
],
|
||||
[
|
||||
181.5,
|
||||
173.89999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
180.0,
|
||||
156.5,
|
||||
1
|
||||
],
|
||||
[
|
||||
185.10000610351562,
|
||||
140.89999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
205.6999969482422,
|
||||
146.6999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
175.39999389648438,
|
||||
160.3000030517578,
|
||||
1
|
||||
],
|
||||
[
|
||||
183.60000610351562,
|
||||
145.3000030517578,
|
||||
1
|
||||
],
|
||||
[
|
||||
194.89999389648438,
|
||||
132.6999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
208.8000030517578,
|
||||
145.6999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
199.39999389648438,
|
||||
102.30000305175781,
|
||||
1
|
||||
],
|
||||
[
|
||||
201.89999389648438,
|
||||
116.19999694824219,
|
||||
1
|
||||
],
|
||||
[
|
||||
208.10000610351562,
|
||||
127.4000015258789,
|
||||
1
|
||||
],
|
||||
[
|
||||
210.60000610351562,
|
||||
148.5,
|
||||
1
|
||||
]
|
||||
],
|
||||
"joint_cam": [
|
||||
[
|
||||
96.12000274658203,
|
||||
67.63999938964844,
|
||||
499.70001220703125
|
||||
],
|
||||
[
|
||||
15.380000114440918,
|
||||
-20.969999313354492,
|
||||
528.0
|
||||
],
|
||||
[
|
||||
20.209999084472656,
|
||||
3.059999942779541,
|
||||
536.0999755859375
|
||||
],
|
||||
[
|
||||
38.869998931884766,
|
||||
31.470001220703125,
|
||||
533.2999877929688
|
||||
],
|
||||
[
|
||||
73.62000274658203,
|
||||
53.81999969482422,
|
||||
529.2000122070312
|
||||
],
|
||||
[
|
||||
42.380001068115234,
|
||||
24.42999839782715,
|
||||
524.7999877929688
|
||||
],
|
||||
[
|
||||
27.260000228881836,
|
||||
4.211999893188477,
|
||||
529.7999877929688
|
||||
],
|
||||
[
|
||||
36.38999938964844,
|
||||
-21.010000228881836,
|
||||
540.0999755859375
|
||||
],
|
||||
[
|
||||
71.79000091552734,
|
||||
-11.949999809265137,
|
||||
542.7000122070312
|
||||
],
|
||||
[
|
||||
35.5,
|
||||
22.989999771118164,
|
||||
505.5999755859375
|
||||
],
|
||||
[
|
||||
33.540000915527344,
|
||||
-5.878000259399414,
|
||||
512.9000244140625
|
||||
],
|
||||
[
|
||||
42.69000244140625,
|
||||
-32.55999755859375,
|
||||
521.0999755859375
|
||||
],
|
||||
[
|
||||
78.16999816894531,
|
||||
-22.75,
|
||||
522.8999633789062
|
||||
],
|
||||
[
|
||||
24.560001373291016,
|
||||
0.47450000047683716,
|
||||
487.79998779296875
|
||||
],
|
||||
[
|
||||
38.18000030517578,
|
||||
-23.760000228881836,
|
||||
494.1000061035156
|
||||
],
|
||||
[
|
||||
57.27000045776367,
|
||||
-44.72999954223633,
|
||||
501.3999938964844
|
||||
],
|
||||
[
|
||||
80.33000183105469,
|
||||
-23.520000457763672,
|
||||
503.8999938964844
|
||||
],
|
||||
[
|
||||
58.06999969482422,
|
||||
-85.06999969482422,
|
||||
450.8999938964844
|
||||
],
|
||||
[
|
||||
62.619998931884766,
|
||||
-65.56999969482422,
|
||||
457.5
|
||||
],
|
||||
[
|
||||
73.29999542236328,
|
||||
-49.72999954223633,
|
||||
466.3999938964844
|
||||
],
|
||||
[
|
||||
79.80000305175781,
|
||||
-18.200000762939453,
|
||||
482.3000183105469
|
||||
]
|
||||
],
|
||||
"hand_type": "left"
|
||||
},
|
||||
{
|
||||
"id": 11111,
|
||||
"image_id": 11111,
|
||||
"category_id": 1,
|
||||
"iscrowd": 0,
|
||||
"bbox": [
|
||||
162.8300018310547,
|
||||
135.88999938964844,
|
||||
59.63999557495117,
|
||||
48.1200065612793
|
||||
],
|
||||
"area": 2869.8769783813186,
|
||||
"keypoints": [
|
||||
[
|
||||
167.8000030517578,
|
||||
154.10000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
217.5,
|
||||
146.60000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
207.8000030517578,
|
||||
146.39999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
197.10000610351562,
|
||||
144.8000030517578,
|
||||
1
|
||||
],
|
||||
[
|
||||
181.5,
|
||||
148.0,
|
||||
1
|
||||
],
|
||||
[
|
||||
206.8000030517578,
|
||||
167.1999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
206.5,
|
||||
160.1999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
202.10000610351562,
|
||||
150.89999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
191.39999389648438,
|
||||
139.89999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
200.0,
|
||||
170.0,
|
||||
1
|
||||
],
|
||||
[
|
||||
200.39999389648438,
|
||||
163.6999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
198.0,
|
||||
155.6999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
186.39999389648438,
|
||||
145.10000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
194.6999969482422,
|
||||
172.39999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
195.1999969482422,
|
||||
168.10000610351562,
|
||||
1
|
||||
],
|
||||
[
|
||||
191.8000030517578,
|
||||
160.89999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
182.0,
|
||||
151.6999969482422,
|
||||
1
|
||||
],
|
||||
[
|
||||
198.1999969482422,
|
||||
180.0,
|
||||
1
|
||||
],
|
||||
[
|
||||
195.0,
|
||||
176.3000030517578,
|
||||
1
|
||||
],
|
||||
[
|
||||
189.10000610351562,
|
||||
170.39999389648438,
|
||||
1
|
||||
],
|
||||
[
|
||||
177.3000030517578,
|
||||
160.1999969482422,
|
||||
1
|
||||
]
|
||||
],
|
||||
"joint_cam": [
|
||||
[
|
||||
20.479999542236328,
|
||||
-15.470000267028809,
|
||||
693.2999877929688
|
||||
],
|
||||
[
|
||||
138.40000915527344,
|
||||
-32.17000198364258,
|
||||
633.2000122070312
|
||||
],
|
||||
[
|
||||
118.0,
|
||||
-33.62999725341797,
|
||||
649.2000122070312
|
||||
],
|
||||
[
|
||||
94.87999725341797,
|
||||
-38.78999710083008,
|
||||
673.699951171875
|
||||
],
|
||||
[
|
||||
56.01000213623047,
|
||||
-31.309999465942383,
|
||||
686.2999877929688
|
||||
],
|
||||
[
|
||||
116.80000305175781,
|
||||
18.049999237060547,
|
||||
656.7999877929688
|
||||
],
|
||||
[
|
||||
112.80000305175781,
|
||||
0.48660001158714294,
|
||||
638.2999877929688
|
||||
],
|
||||
[
|
||||
99.94000244140625,
|
||||
-21.559999465942383,
|
||||
625.199951171875
|
||||
],
|
||||
[
|
||||
74.3699951171875,
|
||||
-47.75,
|
||||
623.7999877929688
|
||||
],
|
||||
[
|
||||
99.95999908447266,
|
||||
24.979999542236328,
|
||||
658.5
|
||||
],
|
||||
[
|
||||
97.34000396728516,
|
||||
9.000999450683594,
|
||||
633.4000244140625
|
||||
],
|
||||
[
|
||||
88.5199966430664,
|
||||
-9.983000755310059,
|
||||
612.7999877929688
|
||||
],
|
||||
[
|
||||
61.19000244140625,
|
||||
-34.4900016784668,
|
||||
609.6000366210938
|
||||
],
|
||||
[
|
||||
86.45000457763672,
|
||||
31.0,
|
||||
655.6000366210938
|
||||
],
|
||||
[
|
||||
84.11000061035156,
|
||||
19.43000030517578,
|
||||
629.7000122070312
|
||||
],
|
||||
[
|
||||
73.44000244140625,
|
||||
2.186999797821045,
|
||||
608.6000366210938
|
||||
],
|
||||
[
|
||||
50.53000259399414,
|
||||
-19.139999389648438,
|
||||
605.7000122070312
|
||||
],
|
||||
[
|
||||
91.06999969482422,
|
||||
47.60000228881836,
|
||||
626.6000366210938
|
||||
],
|
||||
[
|
||||
81.22000122070312,
|
||||
37.78000259399414,
|
||||
610.800048828125
|
||||
],
|
||||
[
|
||||
66.75,
|
||||
23.989999771118164,
|
||||
604.0999755859375
|
||||
],
|
||||
[
|
||||
39.94999694824219,
|
||||
0.4115999937057495,
|
||||
607.7999877929688
|
||||
]
|
||||
],
|
||||
"hand_type": "right"
|
||||
}
|
||||
],
|
||||
"categories": [
|
||||
{
|
||||
"id": 1,
|
||||
"name": "hand",
|
||||
"supercategory": "hand",
|
||||
"keypoints": [
|
||||
"wrist",
|
||||
"thumb1",
|
||||
"thumb2",
|
||||
"thumb3",
|
||||
"thumb4",
|
||||
"forefinger1",
|
||||
"forefinger2",
|
||||
"forefinger3",
|
||||
"forefinger4",
|
||||
"middle_finger1",
|
||||
"middle_finger2",
|
||||
"middle_finger3",
|
||||
"middle_finger4",
|
||||
"ring_finger1",
|
||||
"ring_finger2",
|
||||
"ring_finger3",
|
||||
"ring_finger4",
|
||||
"pinky_finger1",
|
||||
"pinky_finger2",
|
||||
"pinky_finger3",
|
||||
"pinky_finger4"
|
||||
],
|
||||
"skeleton": [
|
||||
[
|
||||
1,
|
||||
2
|
||||
],
|
||||
[
|
||||
2,
|
||||
3
|
||||
],
|
||||
[
|
||||
3,
|
||||
4
|
||||
],
|
||||
[
|
||||
4,
|
||||
5
|
||||
],
|
||||
[
|
||||
1,
|
||||
6
|
||||
],
|
||||
[
|
||||
6,
|
||||
7
|
||||
],
|
||||
[
|
||||
7,
|
||||
8
|
||||
],
|
||||
[
|
||||
8,
|
||||
9
|
||||
],
|
||||
[
|
||||
1,
|
||||
10
|
||||
],
|
||||
[
|
||||
10,
|
||||
11
|
||||
],
|
||||
[
|
||||
11,
|
||||
12
|
||||
],
|
||||
[
|
||||
12,
|
||||
13
|
||||
],
|
||||
[
|
||||
1,
|
||||
14
|
||||
],
|
||||
[
|
||||
14,
|
||||
15
|
||||
],
|
||||
[
|
||||
15,
|
||||
16
|
||||
],
|
||||
[
|
||||
16,
|
||||
17
|
||||
],
|
||||
[
|
||||
1,
|
||||
18
|
||||
],
|
||||
[
|
||||
18,
|
||||
19
|
||||
],
|
||||
[
|
||||
19,
|
||||
20
|
||||
],
|
||||
[
|
||||
20,
|
||||
21
|
||||
]
|
||||
]
|
||||
}
|
||||
]
|
||||
}
|
||||
Reference in New Issue
Block a user