AHALab · Múa rối bóng ngón taySân khấu bóng ngón tay
Đầu tiên hãy tạo một con rối bóng có khớp nối và trang bị đạo cụ cho nó. Sau khi máy ảnh nhận dạng được các ngón tay, bạn có thể sử dụng cả năm ngón tay để điều khiển đầu và tay chân của con rối, sau đó tạo cảnh hoặc trò chơi với bạn diễn.

Tổ chức một trò chơi bóng mà các bạn cùng lớp cũng có thể tham gia
Làm thế nào bạn có thể làm cho con rối bóng theo chuyển động của tay và cho các bạn cùng lớp chơi với nó ngay lập tức?
Trước tiên hãy thiết kế nhân vật của riêng bạn
Đặt tên cho nó, nghĩ xem nó nên làm gì, sau đó vẽ đầu, thân, tay chân và các đạo cụ. Bạn có thể cắt từ giấy hoặc vẽ trên bảng vẽ kỹ thuật số; sau khi hoàn thành, lên sân khấu để thử các thao tác và thực hiện thay đổi nếu có vấn đề phát sinh.
Giữ lại thẻ nhân vật, rối bóng chung, bản nháp trước và sau khi sửa đổi, quy tắc điều khiển và hồ sơ thử nghiệm, cuối cùng là biểu diễn một vở kịch ngắn dài hai phút.
Mỗi nhóm từ 3 đến 4 người, thay phiên nhau điều khiển rối, viết chương trình, thử nghiệm và dàn dựng biểu diễn. Mỗi người phải giải thích một lựa chọn mà họ đã thực hiện và những gì họ đã thay đổi sau đó.
Cách thực hiện tại lớp
Đầu tiên thực hiện một hành động, viết ra các quy tắc điều khiển, sau đó để nhân vật thực hiện theo. Mời bạn cùng chơi thử, ghi lại chỗ không thành công, tìm lý do và sau đó sửa đổi.
Từ 7 đến 9 tuổi lần đầu tiên thực hành nhập vai và thể hiện hành động; sau đó những học sinh lớn hơn sẽ học phân loại đặc điểm, đào tạo mô hình bàn tay và theo dõi nhiều người.
Một tay điều khiển một nhân vật.
| Chuyển động của tay | Phản hồi của nhân vật | Những gì có thể học được |
|---|---|---|
| Chuyển động của lòng bàn tay | Đạt đến vị trí giai đoạn sau khi hiệu chỉnh | Tọa độ, phản chiếu, ánh xạ và lỗi. |
| Kéo dài và uốn cong từng ngón tay riêng biệt | Quay đầu bằng ngón giữa, di chuyển cả hai tay bằng ngón trỏ và ngón đeo nhẫn, di chuyển cả hai chân bằng ngón cái và ngón út | Các khớp, góc và hoạt ảnh xếp lớp |
| Chụm ngón cái và ngón trỏ vào nhau | Trăng sáng, bắt mục tiêu | Tỷ lệ, ngưỡng và độ trễ |
| Cử chỉ chữ V / giơ ngón cái lên / mở lòng bàn tay sau khi nắm tay | Nhảy / Xoay / Sử dụng vật phẩm (có thể bật tắt) | Trình tự hành động, thời gian xác nhận và thời gian hồi chiêu |
| Chụm các ngón tay lại/mở lòng bàn tay sau khi đến gần đạo cụ | Nhấc và di chuyển/đặt đạo cụ xuống; giữ nửa tay khi cầm. | Trạng thái hành động, độ trễ và quyền sở hữu vật phẩm |
| Xoay lòng bàn tay sang phía bên kia | Lật nhân vật, dây rối và đạo cụ cá nhân lại với nhau | Định hướng 3D và xác nhận liên tục |
| Tay quay trở lại sau khi thoát | Giữ vai trò ban đầu, khôi phục sau khi xác nhận; liên kết thủ công nếu không chắc chắn | Theo dõi, đối sánh lại và xử lý ngoại lệ |
Điều khiển một con rối bóng trước
Di chuyển đến vị trí được chỉ định sau khi hiệu chỉnh, sau đó dừng lại
Mỗi tay điều khiển một nhân vật
Quan sát xem mọi người có bị đổi chỗ sau khi băng qua hoặc chặn không
Thử nghiệm hợp tác bốn tay
Ghi lại đồng bộ hóa và số sê-ri ký tự
Kiểm tra hiệu suất mười tay
Xác định số lượng người tham gia tối đa sau khi thử nghiệm
Những con rối bóng tùy chọn: Tôn Ngộ Không, Nezha, Zhu Bajie, Erlang Shen, Hua Mulan, Jade Rabbit, Chang'e. Các dây con rối được hiển thị theo mặc định và có thể được chuyển sang cần điều khiển hoặc ẩn các kết nối.
Sân khấu có thể được thay đổi thành Phong cảnh ánh trăng, Núi hoa quả, Ao sen hoặc Chợ đèn lồng. Đèn lồng, đào cổ tích, bóng hoa và bướm có thể di chuyển được; bàn có thể đựng đồ, trống và chong chóng sẽ phản hồi. Bạn có thể chọn phông nền theo tổ hợp nhân vật hoặc tự sắp xếp.
Chương trình hiện tại có mười vị trí ký tự và số lượng bàn tay được nhận dạng cũng có thể được đặt thành mười. Việc mười bàn tay thật có thể được kiểm soát ổn định hay không vẫn chưa được xác minh. Bản trình diễn gồm mười ký tự sử dụng đầu vào mô phỏng, sẽ được đánh dấu rõ ràng trên trang.
Chọn bộ bài học phù hợp với học viên
Đầu tiên hãy chọn kế hoạch giảng dạy theo độ tuổi, sau đó điều chỉnh độ khó dựa trên khả năng đọc, thao tác và kinh nghiệm thực nghiệm của học sinh.
| Tuổi và giờ học | Những gì được nói và làm trong lớp | Mở bài học |
|---|---|---|
| 7 đến 9 tuổi 4 lần × 60 phút | 'Di chuyển ngón giữa của bạn và xem những gì di chuyển.' Mỗi lần một bước, có thể vẽ, chỉ hoặc mô tả bằng miệng. | Bốn bài học ngắn ↗ |
| 10 đến 12 tuổi 8 lần × 90 phút | "Chỉ cần thay đổi một cài đặt, sau đó thử lại mục tiêu tương tự." Viết quy tắc, ghi lại số lượng và để đối tác mới thử. | Ghi chú giảng dạy cho cả tám bài học ↗ |
| 13 đến 15 tuổi 8 lần × 90 phút | “Hồ sơ nào hỗ trợ cho phán đoán của bạn?” Đọc một đoạn mã nhỏ, thiết kế so sánh, giải thích phạm vi áp dụng của kết quả. | Ghi chú giảng dạy cho cả tám bài học ↗ |
Mỗi lớp học bao gồm các câu hỏi trong lớp, những điểm mà học sinh có thể gặp khó khăn và cách giáo viên có thể trợ giúp, cùng với một nhiệm vụ nhỏ trước khi kết thúc. Kế hoạch chi tiết của giáo viên và dự đoán dài năm trang của học sinh có thể được chuyển đổi và có thể in các tờ ghi chép. Các lớp nghiên cứu dành cho lứa tuổi từ 15 trở lên được sắp xếp riêng.
Độ tuổi tham khảo soạn giáo án; việc lựa chọn khóa học cũng phụ thuộc vào kinh nghiệm đọc, vận hành và thử nghiệm hiện có của sinh viên. Dưới đây là tổng hợp 8 bài học dành cho trẻ từ 10 đến 12 tuổi.
L01Làm con rối biết di chuyển90 phút
Không nói tên, làm sao bạn có thể cho đối tác hiểu mình đang làm gì?
Vẽ đầu, thân, tay chân và các đạo cụ rồi đánh dấu các điểm kết nối. Hãy để đối tác đoán một hành động và sửa đổi một phần theo phản hồi của họ.
- Kiến thức sẽ được sử dụng
- Đường viền, độ mờ, kết nối rỗng, khớp nối, nhân vật và đạo cụ
- Cách sắp xếp
- 10 phút nhìn dàn ý và đoán nhân vật → 10 phút viết thẻ nhân vật → 15 phút thử một câu → 30 phút sáng tạo phân đoạn → 20 phút diễn không nêu tên → 5 phút dọn dẹp hai bản nháp
- Để lại thứ gì đó
- Thẻ nhân vật, sơ đồ phân đoạn đánh dấu các khớp, đồng nghiệp đoán từ gốc của hành động, bản nháp trước và sau khi sửa đổi.
Giáo án dành cho giáo viên từ 10 đến 12 tuổi ↗ · Giáo án dành cho giáo viên từ 13 đến 15 tuổi ↗
L02Tại sao nó bị xác định nhầm trong ảnh90 phút
Nếu tay bị chặn nhẹ thì điểm trên màn hình sẽ như thế nào?
Xác định các điểm chính của bàn tay, phân biệt giữa cảnh, bộ xương và hành động của nhân vật. Chỉ thay đổi một yếu tố về độ che khuất hoặc ánh sáng và ghi lại cả hai điều kiện.
- Kiến thức sẽ được sử dụng
- Điểm ảnh, khả năng phát hiện, 21 điểm chính bằng tay, đầu ra mô hình và quy tắc
- Cách sắp xếp
- 10 phút chơi trước rồi quan sát → 20 phút rút bài nhận biết → 25 phút che lại và thử lại → 20 phút trao đổi hồ sơ → 15 phút giải thích bằng chứng
- Để lại thứ gì đó
- Một sơ đồ khung được gắn nhãn, hai bộ so sánh tình trạng và một lỗi chưa xác định được nguyên nhân.
Giáo án dành cho giáo viên từ 10 đến 12 tuổi ↗ · Giáo án dành cho giáo viên từ 13 đến 15 tuổi ↗
L03Làm cho con rối bóng dừng ở nơi bạn muốn.90 phút
Tay của bạn có thể với tới cả hai bên sân khấu mà không duỗi quá xa không?
Hiệu chuẩn hoàn chỉnh bằng cách sử dụng hai góc thoải mái và chạm đến tâm và các góc. So sánh hai mức độ làm mịn trên cùng một mục tiêu và giải thích sự lựa chọn của bạn.
- Kiến thức sẽ được sử dụng
- Tọa độ chuẩn hóa, phản chiếu, ánh xạ phạm vi, làm mịn và độ trễ
- Cách sắp xếp
- 10 phút định vị điểm trên giấy → 15 phút dự đoán ánh xạ → 20 phút hiệu chỉnh và xoay → 30 phút đặt hai mức để so sánh → 15 phút chọn và giải thích
- Để lại thứ gì đó
- Ghi lại hai cài đặt tham số theo cùng một mục tiêu, so sánh trước và sau khi hiệu chuẩn và giải thích lý do lựa chọn tham số.
Giáo án dành cho giáo viên từ 10 đến 12 tuổi ↗ · Giáo án dành cho giáo viên từ 13 đến 15 tuổi ↗
L04Mỗi ngón tay trong số năm ngón tay điều khiển một phần90 phút
Làm thế nào bạn có thể khiến nhân vật chỉ hành động khi bạn muốn?
Nối chính xác năm ngón tay với đầu và các chi, đồng thời thử cử động hai ngón tay cái. Viết quy tắc 'Khi...thì...' và kiểm tra xem nó có thành công hay không.
- Kiến thức sẽ được sử dụng
- Phán đoán có điều kiện, tỷ lệ, ngưỡng, độ trễ, thời lượng, sự kiện
- Cách sắp xếp
- 10 phút để đoán đầu tiên dòng nào sẽ di chuyển → 15 phút để tìm biên độ thích hợp cho ngón tay cái → 20 phút để viết quy tắc hành động → 30 phút để thử hai hạng mục → 15 phút để nhặt và đặt đạo cụ và đọc thuộc lòng.
- Để lại thứ gì đó
- Thẻ kết nối năm ngón, một quy tắc có điều kiện, ghi riêng biệt 10 hành động có chủ ý và 10 động tác thông thường.
Giáo án dành cho giáo viên từ 10 đến 12 tuổi ↗ · Giáo án dành cho giáo viên từ 13 đến 15 tuổi ↗
L05Mời bạn đồng hành chơi trò chơi của bạn90 phút
Nếu không đứng bên cạnh giải thích thì các bạn trong lớp có biết phải làm gì không?
Thiết kế một nhiệm vụ nhỏ với các điều kiện hoàn thành bằng cách sử dụng cảnh và đạo cụ hiện có. Quan sát hai người chơi mới và sửa đổi các quy tắc dựa trên nơi họ gặp khó khăn.
- Kiến thức sẽ được sử dụng
- Các biến, tính điểm, va chạm, trạng thái, phản hồi trò chơi
- Cách sắp xếp
- 10 phút để trải nghiệm một nhiệm vụ → 15 phút viết quy tắc ra giấy → 30 phút thiết kế bộ bài và tự kiểm tra → 25 phút để mời hai người chơi mới → dành 10 phút cho một lần sửa đổi
- Để lại thứ gì đó
- Một thẻ quy tắc, một nhiệm vụ thực thi, hồ sơ về ít nhất hai lần thử đầu tiên của người chơi mới và một sửa đổi.
Giáo án dành cho giáo viên từ 10 đến 12 tuổi ↗ · Giáo án dành cho giáo viên từ 13 đến 15 tuổi ↗
L06Hai tay đừng chuyển nhầm ký tự90 phút
Bạn và đối tác của mình đã đổi chỗ cho nhau; vai diễn vẫn theo tay ban đầu phải không?
Sử dụng số để phân biệt 'ai' và 'ở đâu'. Kiểm tra các bước đổi tay, che và thoát với quy trình tương tự, ghi lại xem có xảy ra lỗi hay không.
- Kiến thức sẽ được sử dụng
- Phát hiện và theo dõi, ID duy nhất, liên kết dữ liệu, tắc nghẽn, suy thoái
- Cách sắp xếp
- 10 phút để chơi lần đầu với thẻ đánh số → 15 phút để viết thỏa thuận ràng buộc → 30 phút để thử ba lần mỗi kịch bản trong ba kịch bản → 20 phút để lấy lại những người chơi đã rời đi → 15 phút để giải thích cho nhóm tiếp theo
- Để lại thứ gì đó
- Bản ghi nhận dạng cho ba kịch bản, mỗi kịch bản ba lần, một bước thất bại có thể tái tạo và một câu mô tả khả năng có điều kiện.
Giáo án dành cho giáo viên từ 10 đến 12 tuổi ↗ · Giáo án dành cho giáo viên từ 13 đến 15 tuổi ↗
L07Đổi người thì nó còn nhận ra chứ?90 phút
Nó nhận ra bàn tay của tôi; nó có thể nhận ra bàn tay của bạn không?
Máy lấy mẫu và máy kiểm tra riêng biệt, ghi lại số lượng phân đoạn được lấy mẫu cho mỗi loại. Sử dụng các nỗ lực từ những người lấy mẫu không tham gia để chỉ ra những hành động nào có thể bị xác định sai.
- Kiến thức sẽ được sử dụng
- Tính năng, nhãn, tập huấn luyện, tập kiểm tra, bộ phân loại, ma trận nhầm lẫn
- Cách sắp xếp
- . 10 minutes to guess the change result → 20 minutes to collect in segments → 20 minutes to review outputs and try use → 25 minutes for B to test independently → 15 minutes to review predictions
- Để lại thứ gì đó
- Thẻ dữ liệu được ghi lại theo người và phân khúc, kết quả phân loại của những người không tham gia, các trường hợp lỗi hoặc bị từ chối và hướng dẫn phạm vi áp dụng.
Giáo án dành cho giáo viên từ 10 đến 12 tuổi ↗ · Giáo án dành cho giáo viên từ 13 đến 15 tuổi ↗
L08Dàn dựng một cảnh và mời các bạn cùng lớp xem90 phút
Khán giả có thể hiểu chuyện gì đang xảy ra và học cách chơi không?
Trình diễn một câu chuyện dài hai phút có mở đầu và kết thúc bằng cách sử dụng các nhân vật, cảnh và đạo cụ. Mỗi người sử dụng quan sát một lần để giải thích sự sửa đổi của họ.
- Kiến thức sẽ được sử dụng
- Tường thuật, khả năng sử dụng, đo lường, chữ ký, phản ánh
- Cách sắp xếp
- 15 phút sắp xếp thứ tự câu chuyện → 20 phút diễn tập theo nhóm → 25 phút biểu diễn và mời người khác trải nghiệm → 20 phút nghe phản hồi và thảo luận sửa đổi → 10 phút sắp xếp công việc
- Để lại thứ gì đó
- Một đoạn dài hai phút, mỗi người đưa ra một lời giải thích chi tiết, một biểu mẫu phản hồi của khán giả và một thay đổi cho phiên bản tiếp theo.
Giáo án dành cho giáo viên từ 10 đến 12 tuổi ↗ · Giáo án dành cho giáo viên từ 13 đến 15 tuổi ↗
Bộ bài học này vẫn là bản nháp để chuẩn bị bài và chưa được dạy thử. Trong Bài học thứ bảy, bạn có thể học các chuyển động cá nhân bằng cách sử dụng kNN trên thiết bị này; Việc đào tạo mạng lưới thần kinh về tư thế bàn tay vẫn được lên kế hoạch cho bài học mở rộng.
Xem lý do tại sao nó gây ra lỗi nhận dạng
Sử dụng MediaPipe trong lớp; trong các buổi nghiên cứu, hãy nhìn vào YOLO
Trong lớp, trước tiên hãy sử dụng MediaPipe để xác định các điểm chính bằng tay. Trọng lượng tư thế phổ quát YOLO26 nhận dạng bộ xương người; Để điều khiển các ngón tay, cần phải đào tạo hoặc lấy một mẫu bàn tay riêng biệt dành cho học sinh lớn tuổi nghiên cứu.
Theo:Hướng dẫn chính thức của MediaPipe · Tài liệu tư thế siêu phân tích
Kiểm tra độ chính xác của nó
Sử dụng định vị năm điểm để kiểm tra lỗi vị trí; cũng ghi lại tình trạng run khi tay dừng lại, độ trễ từ chuyển động của tay đến phản hồi trên màn hình, vô tình kích hoạt cử chỉ và hoán đổi ký tự sai. Giới hạn tham số, tốc độ khung hình hợp lý và số lượng có thể phát thực tế cũng phải được xác minh riêng.
Tính năng nhận dạng chạy cục bộ trên thiết bị này và không tự động quay video. Hiện tại, có thể thực hành bằng bàn phím và chuột hoặc bật camera, chơi trò chơi ‘Catch the Moon’ và cũng có thể đặt những con rối bóng trong cửa sổ màn hình trong suốt; Ngoài ra còn có chức năng phân loại cử chỉ cá nhân. Đào tạo về mô hình điểm nhấn bằng tay, trình chỉnh sửa khối và đa màn hình vẫn chưa được triển khai.
Hành động trước, sau đó viết về điều gì đó
Chuyển mười bài tập như "Tôi viết truyện cổ tích", "Chuyển thể câu chuyện mới" và "Biến thái" sang sân khấu múa rối bóng. Đầu tiên, hãy soạn một phân đoạn, thực hiện phân đoạn đó cho đối tác, ghi lại các hành động và đoạn hội thoại, sau đó viết bài viết của riêng bạn. Mỗi bài tập bao gồm sự chuẩn bị của giáo viên, câu chuyện ba khung, hồ sơ quan sát và câu hỏi ôn tập.
Chơi bóng ngón tay mở · Viết tiếng Trung ↗ · Xem giáo án cho mười nhiệm vụ ↗
Bạn có thể chọn vai trò và cảnh, lời thoại của bạn sẽ xuất hiện trên máy nhắc chữ trên sân khấu. Các tác phẩm được lưu trong trình duyệt hiện tại, hỗ trợ in, xuất và sao lưu. Những nhiệm vụ này tương ứng với các đơn vị cấu thành từ lớp 3 đến lớp 6 ở các trường tiểu học Trung Quốc. Vui lòng sử dụng sách giáo khoa của lớp bạn khi áp dụng chúng.
Một dòng, một hành động
Diễn một vở kịch ngắn bằng tiếng Anh với những con rối bóng. Đầu tiên nghe giáo viên đọc to, tự khoanh tròn các từ cần trợ giúp, sau đó luân phiên vai trò người kể chuyện, người đối thoại và người múa rối. Ba kế hoạch bài học dành riêng cho lứa tuổi bao gồm sáu vở kịch ngắn. Trên sân khấu, bạn có thể nghe thuyết minh, mở micro để theo dõi, sau đó kết hợp lời thoại và động tác để biểu diễn.
Mở chương trình học kịch tiếng Anh ↗
Sử dụng câu chuyện này thay cho câu chuyện trong J04 hoặc L08 mà không cần thêm giờ học. Ghi lại và phát lại từng dòng. Dòng trước và dòng tiếp theo có màu xám; dòng hiện tại có màu đen. Những từ đã đọc và đạt ngưỡng luyện tập sẽ chuyển sang màu xanh; những cái khác không thay đổi. Giáo viên có thể điều chỉnh ngưỡng đó cho phù hợp với lứa tuổi. Tham chiếu phát âm chưa được hiệu chỉnh theo lời nói của trẻ và cần giáo viên xem xét.
Tài liệu và mã khóa học
Dự án này vẫn đang trong giai đoạn phát triển khóa học và chưa được phát hành công khai. Bước tiếp theo là kiểm tra khả năng định vị, chạm sai và phân công vai trò trong quá trình chơi chéo bằng các bài kiểm tra người thật một tay và hai tay, sau đó quyết định cách triển khai phiên bản bốn tay và mười tay dựa trên kết quả.