{"blocks":[{"type":"paragraph","data":{"text":"Всем привет, сегодня я покажу как написать систему распознавания ладони на Python + OpenCV (26 строчек кода). Этот урок требует минимальных знаний OpenCV."}},{"type":"header2","data":{"level":2,"text":"Что мы получим на выходе"}},{"type":"paragraph","data":{"text":"Примерно это:"}},{"type":"image","data":{"file":{"id":198082,"url":"https://media.tproger.ru/uploads/2022/04/Screenshot_2.png"},"alt":"","title":"","caption":"","stretched":false,"withBackground":false,"withBorder":false,"width":640,"height":480,"optimizedFile":{"original":"https://media.tproger.ru/uploads/2022/04/Screenshot_2.png","alt":"Пишем систему распознавания ладони на Python OpenCV 1","dimensions":{"width":640,"height":480},"additionalSizes":{"srcSet":[{"url":"https://tproger.ru/signed_image/4_vTMduJWeyG2jVawYgskr1V6ML7iv3WVgSb9lJw1hc/rs:fill:640:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9TY3JlZW5zaG90XzIucG5n","dpr":1,"width":640},{"url":"https://tproger.ru/signed_image/fzrefTATCrDYR8NvvyZ6pY737fzWXX-YdTn96RfkxU4/rs:fill:1280:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9TY3JlZW5zaG90XzIucG5n","dpr":1,"width":1280},{"url":"https://tproger.ru/signed_image/4_vTMduJWeyG2jVawYgskr1V6ML7iv3WVgSb9lJw1hc/rs:fill:640:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9TY3JlZW5zaG90XzIucG5n","dpr":1,"width":640},{"url":"https://tproger.ru/signed_image/fzrefTATCrDYR8NvvyZ6pY737fzWXX-YdTn96RfkxU4/rs:fill:1280:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9TY3JlZW5zaG90XzIucG5n","dpr":1,"width":1280},{"url":"https://tproger.ru/signed_image/-iaoqs4IuRyyKPl__IURPWi3vrCLDSv7IJ0RM4-M9w8/rs:fill:636:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9TY3JlZW5zaG90XzIucG5n","dpr":1,"width":636},{"url":"https://tproger.ru/signed_image/lmsC3OK5D1hH1YmyduBu_p3-jQiHesuN1HzVE4UnmzA/rs:fill:1272:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9TY3JlZW5zaG90XzIucG5n","dpr":1,"width":1272},{"url":"https://tproger.ru/signed_image/g1PEVwqlbBwlkJmXx0nYomsOBARAJFqHofuF7LHqooo/rs:fill:466:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9TY3JlZW5zaG90XzIucG5n","dpr":1,"width":466},{"url":"https://tproger.ru/signed_image/7GYN9M5F8ukZfuVvFOb-OxmtShiincMEXQ6HuCpZrTo/rs:fill:932:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9TY3JlZW5zaG90XzIucG5n","dpr":1,"width":932}],"sizes":[{"media":"(min-width: 1441px)","size":"640px"},{"media":"(min-width: 1281px)","size":"640px"},{"media":"(min-width: 1281px)","size":"640px"},{"media":"(min-width: 961px)","size":"640px"},{"media":"(min-width: 671px)","size":"636px"},{"media":"(min-width: 500px)","size":"466px"}]}}}},{"type":"header2","data":{"level":2,"text":"Полезные ссылки"}},{"type":"paragraph","data":{"text":"Сайт OpenCV
Документация mediapipe
Код на GitHub (Без комментариев)"}},{"type":"header2","data":{"level":2,"text":"Перед работой"}},{"type":"paragraph","data":{"text":"Вам потребуется:"}},{"type":"list","data":{"items":["Python 3;","OpenCV;","mediapipe."],"style":"ordered"}},{"type":"paragraph","data":{"text":"Установка происходит через пакетный менеджер:"}},{"type":"code","data":{"code":"pip install opencv-python","language":"clike lazy-code"}},{"type":"code","data":{"code":"pip install mediapipe","language":"clike lazy-code"}},{"type":"header2","data":{"level":2,"text":"Кодим"}},{"type":"paragraph","data":{"text":"Я решил использовать mediapipe, потому что в нём есть уже обученная ИИ для распознания ладони."}},{"type":"paragraph","data":{"text":"Для начало вам нужно понять, что ладонь состоит из суставов, которые можно выразить точками:"}},{"type":"image","data":{"file":{"id":198074,"url":"https://media.tproger.ru/uploads/2022/04/hand_landmarks.png"},"alt":"","title":"","caption":"","stretched":false,"withBackground":false,"withBorder":false,"width":1543,"height":538,"optimizedFile":{"original":"https://media.tproger.ru/uploads/2022/04/hand_landmarks.png","alt":"Пишем систему распознавания ладони на Python OpenCV 2","dimensions":{"width":1543,"height":538},"additionalSizes":{"srcSet":[{"url":"https://tproger.ru/signed_image/3Jw2dtSriVpj_OQv9MVWHIQ9X8KwqJeY4qhki_XHYp4/rs:fill:766:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9oYW5kX2xhbmRtYXJrcy5wbmc","dpr":1,"width":766},{"url":"https://tproger.ru/signed_image/2CxsaXx42MiyjFtWuoVM0IwzGkyVTa03R6rVQQYW1SY/rs:fill:1532:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9oYW5kX2xhbmRtYXJrcy5wbmc","dpr":1,"width":1532},{"url":"https://tproger.ru/signed_image/a7P0_VfCx-ItCBq3P7ST9UuHMaEt8SHNipoo3Qxs7kc/rs:fill:686:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9oYW5kX2xhbmRtYXJrcy5wbmc","dpr":1,"width":686},{"url":"https://tproger.ru/signed_image/gGh1M1kTTgCVyG_fM6NJ-hFqdOBfxGclFYbP5HZS5Dg/rs:fill:1372:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9oYW5kX2xhbmRtYXJrcy5wbmc","dpr":1,"width":1372},{"url":"https://tproger.ru/signed_image/-2RfjTTem7j3LqmygHAwfQcOTqq4qxc57a9H2a0bc1k/rs:fill:636:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9oYW5kX2xhbmRtYXJrcy5wbmc","dpr":1,"width":636},{"url":"https://tproger.ru/signed_image/EncvDAJj6sLn7UwHsOY8hqXVXMQokooD56ognOSweMU/rs:fill:1272:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9oYW5kX2xhbmRtYXJrcy5wbmc","dpr":1,"width":1272},{"url":"https://tproger.ru/signed_image/Z_9zkEqMPk8iubAR3wjbGeNuvvnRorxDMIrkcpLgn6E/rs:fill:466:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9oYW5kX2xhbmRtYXJrcy5wbmc","dpr":1,"width":466},{"url":"https://tproger.ru/signed_image/7e60uMecUXtUYe9CB13Sed9zWAtkSwoVcHuZHVOMwvc/rs:fill:932:0:true/cb:vimg_2/f:webp/aHR0cHM6Ly9tZWRpYS50cHJvZ2VyLnJ1L3VwbG9hZHMvMjAyMi8wNC9oYW5kX2xhbmRtYXJrcy5wbmc","dpr":1,"width":932}],"sizes":[{"media":"(min-width: 1441px)","size":"766px"},{"media":"(min-width: 1281px)","size":"686px"},{"media":"(min-width: 1281px)","size":"766px"},{"media":"(min-width: 961px)","size":"766px"},{"media":"(min-width: 671px)","size":"636px"},{"media":"(min-width: 500px)","size":"466px"}]}}}},{"type":"paragraph","data":{"text":"Далее пишем сам код:"}},{"type":"code","data":{"code":"import cv2\r\nimport mediapipe as mp\r\n\r\ncap = cv2.VideoCapture(0) #Камера\r\nhands = mp.solutions.hands.Hands(max_num_hands=1) #Объект ИИ для определения ладони\r\ndraw = mp.solutions.drawing_utils #Для рисование ладони\r\n\r\nwhile True:\r\n #Закрытие окна\r\n if cv2.waitKey(1) & 0xFF == 27:\r\n break\r\n\r\n success, image = cap.read() #Считываем изображение с камеры\r\n image = cv2.flip(image, -1) #Отражаем изображение для корекктной картинки\r\n imageRGB = cv2.cvtColor(image, cv2.COLOR_BGR2RGB) #Конвертируем в rgb\r\n results = hands.process(imageRGB) #Работа mediapipe\r\n\r\n if results.multi_hand_landmarks:\r\n for handLms in results.multi_hand_landmarks:\r\n for id, lm in enumerate(handLms.landmark):\r\n h, w, c = image.shape\r\n cx, cy = int(lm.x * w), int(lm.y * h)\r\n\r\n draw.draw_landmarks(image, handLms, mp.solutions.hands.HAND_CONNECTIONS) #Рисуем ладонь\r\n\r\n cv2.imshow(\"Hand\", image) #Отображаем картинку","language":"python lazy-code"}},{"type":"paragraph","data":{"text":"Решение ошибки: ImportError: DLL load failed можно найти здесь."}},{"type":"paragraph","data":{"text":"В коде есть комментарии, но предлагаю разобрать подробно:"}},{"type":"paragraph","data":{"text":"Импорты OpenCV и mediapipe."}},{"type":"code","data":{"code":"import cv2\r\nimport mediapipe as mp","language":"python lazy-code"}},{"type":"paragraph","data":{"text":"Необходимые объекты: камера (cap), нейронка для определения ладоней (hands) с аргументов max_num_hands — максимальное количество ладоней, — и наша «рисовалка» (draw)."}},{"type":"code","data":{"code":"cap = cv2.VideoCapture(0)\r\nhands = mp.solutions.hands.Hands(max_num_hands=1)\r\ndraw = mp.solutions.drawing_utils","language":"python lazy-code"}},{"type":"paragraph","data":{"text":"Бесконечный цикл."}},{"type":"code","data":{"code":"while True:","language":"python lazy-code"}},{"type":"paragraph","data":{"text":"Выходим из цикла если нажата клавиша с номером 27 (Esc)."}},{"type":"code","data":{"code":"if cv2.waitKey(1) & 0xFF == 27:\r\n break","language":"clike lazy-code"}},{"type":"paragraph","data":{"text":"Считываем изображение с камеры, отражаем изображение по вертикали и горизонтали, конвертируем в RGB. И, самое интересное, отдаём нашу картинку на определение ладоней."}},{"type":"code","data":{"code":"success, image = cap.read()\r\nimage = cv2.flip(image, -1)\r\nimageRGB = cv2.cvtColor(image, cv2.COLOR_BGR2RGB)\r\nresults = hands.process(imageRGB)","language":"python lazy-code"}},{"type":"paragraph","data":{"text":"Первый if-блок проверяет были ли вообще найдены ладони (любой не пустой объект является истинным). Далее циклом for мы «перебираем» объект с набором этих точек. Второй for — перебираем сами точки из набора"}},{"type":"paragraph","data":{"text":"draw.draw_landmarks — удобная утилита, которая рисует ладонь на изображении, в аргументах: изображение, набор точек, и что рисуем (в нашем случае руку)."}},{"type":"code","data":{"code":"if results.multi_hand_landmarks:\r\n for handLms in results.multi_hand_landmarks:\r\n for id, lm in enumerate(handLms.landmark):\r\n h, w, c = image.shape\r\n cx, cy = int(lm.x * w), int(lm.y * h)\r\n\r\n draw.draw_landmarks(image, handLms, mp.solutions.hands.HAND_CONNECTIONS)","language":"python lazy-code"}},{"type":"paragraph","data":{"text":"Отображаем картинку."}},{"type":"code","data":{"code":"cv2.imshow(\"Hand\", image)","language":"clike lazy-code"}},{"type":"header2","data":{"level":2,"text":"Итог"}},{"type":"paragraph","data":{"text":"Мы написали распознавание ладони на Python в 26 строк кода, круто, не так ли? Оцените этот пост ведь это важно для меня."}}]}

Ошибка в настройках сайта