poseHook

این یک برنامه است که به طور مداوم اعضای بدن یک فرد را در فریم هایی که توسط دوربین دستگاه شما مشاهده می شود ، تشخیص می دهد. موقعیت های شناسایی شده را به صورت پیام های OSC به یک میزبان منتقل می کند. OSC یک پروتکل مبتنی بر UDP است که توسط بسیاری از نرم افزارهای موسیقی یا هنرهای تجسمی قابل درک است ، به عنوان مثال TouchDesigner ، Max for Live ، Resolume Arena و غیره

می توانید مجموعه های Ableton Live را که نشان دهنده تبدیل OSC به MIDI است ، و موارد دیگر را بارگیری کنید:

https://bitbucket.org/constanze/posehook/

33 نقطه بدن شناسایی شده است: بینی ، دهان چشم چپ گوشه راست ، گوش ها ، و غیره. می توانید نام آدرس های OSC و IP / پورت گیرنده را پیکربندی کنید. از شناسایی چند نفر پشتیبانی نمی کند. poseHook نقاط شناسایی شده را در بالای تصویر دوربین نمایش می دهد و آنها را رسم می کند.

با فشار دادن دکمه پخش روی طرح ، می توانید آخرین 30 پیام OSC ارسال شده را بصورت حلقه ای پخش کنید.

poseHook از MediaPipe BlazeNet برای تشخیص استفاده می کند. پیام های OSC به همان سرعتی که شناسایی می شوند ارسال می شوند. نرخ تشخیص> 10 فریم در ثانیه با یک تلفن S10 مانند امکان پذیر است.

در سمت میزبان ، می توانید پیام های OSC را با انواع نرم افزارهای رمزگذاری موسیقی یا خلاقیت دریافت کنید. توجه داشته باشید که داده ها کاملاً پر سر و صدا هستند ، بنابراین هنگام ایجاد جلوه باید این موارد را در نظر بگیرید.

سوالاتی در مورد نحوه استفاده از poseHook وجود دارد؟ یا می خواهید ایده خود را برای بهبود به اشتراک بگذارید؟ با ما در توییتر تماس بگیرید:holllyhook (L سه گانه).

تشخیص تا 100٪ آفلاین کار می کند ، علاوه بر استفاده مورد نظر از OSC ، داده ها نه ذخیره می شوند و نه به اشتراک گذاشته می شوند.

poseHook منبع باز است ، کد در https://bitbucket.org/constanze/posehook/ در دسترس است. برای مدت زمان محدودی می توانید موقعیت های شناسایی شده توسط poseHook v2 را بصورت آنلاین مشاهده کنید. داده های OSC را به 18.192.229.240 ارسال کنید و http://ec2-18-192-229-240.eu-central-1.compute.amazonaws.com:8081 را در مرورگر باز کنید. کد منبع برای نسخه آزمایشی موجود است ، آماده استفاده به عنوان نقاط شروع p5.js: https://bitbucket.org/constanze/posehook-demo/