Ujian penggunaan kamera AI Task Cam untuk pengecekan urutan penyambungan dan pengukuran langkah-langkah untuk pengeluar peralatan kenderaan di Thailand

Latar belakang masalah

Cabaran kes ini ialah mengetahui sama ada pekerja memasang komponen dengan melengkapkan setiap langkah mengikut urutan, dan berapa saat yang digunakan bagi setiap langkah. Pelanggan ialah pengeluar komponen automotif di Thailand. Kerja pemasangan di stesen mempunyai beberapa langkah; pelanggan memerlukan graf masa bagi setiap langkah dan klip video untuk disemak semula.

Pada tahun 2026, kami memasang Task Cam mod Sequential bersama sebuah lagi kamera Task Cam dalam mod Skeleton pada barisan pemasangan sebenar pengeluar komponen automotif ini.

Keperluan dan kekangan

Sistem perlu memeriksa urutan kerja berdasarkan tangan pekerja dalam keadaan sebenar di tapak. Keperluan dan kekangan utama adalah seperti berikut.

• Pekerja memakai sarung tangan kain putih; model pengesanan tangan sedia ada tidak mengesan tangan yang memakai sarung tangan jenis ini dengan tepat.
• Pekerja bekerja dengan pantas; kamera perlu mengesan tangan tepat pada masanya bagi setiap langkah.
• Klip video dan fail data bagi setiap langkah perlu disimpan ke NAS (peranti storan data pada rangkaian).
• Pelanggan mahu menggunakan satu tablet di tapak. Paparan imej daripada kedua-dua kamera secara bersebelahan pada tablet ini masih dalam percubaan dalam pusingan POC.

Bagaimana Task Cam memeriksa sama ada pekerja melengkapkan langkah mengikut urutan?

Task Cam memeriksa urutan berdasarkan tangan pekerja yang memasuki bingkai pengesanan (kawasan dalam imej yang ditetapkan untuk dipantau oleh kamera) bagi setiap langkah. Bingkai ini dilukis pada titik yang perlu dimasuki tangan untuk mengambil atau memasang, disusun mengikut urutan kerja sebenar. Kamera kemudian membandingkan perkara yang dilakukan pekerja dengan urutan tersebut pada setiap kitaran kerja.

Kami memilih pemeriksaan berdasarkan tangan kerana cabarannya ialah urutan mengambil dan mengendalikan komponen, dan menggunakan sebuah lagi kamera dalam mod Skeleton kerana pelanggan juga memerlukan masa setiap kitaran kerja. Halaman web Duo view memaparkan imej daripada kedua-dua kamera secara bersebelahan melalui pelayar web.

1. 1

   Menetapkan langkah pada skrin

   Melukis bingkai pengesanan satu demi satu bagi setiap langkah melalui pelayar web, disusun mengikut urutan kerja pemasangan sebenar.

2. 2

   Menunjukkan langkah seterusnya dengan warna bingkai

   Bingkai kuning menunjukkan langkah yang perlu dilakukan seterusnya. Bingkai hijau bermaksud tangan telah memasuki bingkai yang betul. Bingkai merah ialah langkah yang belum tiba gilirannya.

3. 3

   Mengira bahan kerja apabila urutan lengkap

   Sistem menambah kiraan bahan kerja hanya apabila pekerja melengkapkan semua langkah mengikut urutan.

4. 4

   Mengukur masa dengan mod Skeleton

   Sebuah lagi kamera Task Cam dalam mod Skeleton membaca rangka badan dan mengukur masa setiap kitaran kerja.

5. 5

   Menyimpan klip dan fail untuk semakan semula

   Sistem merakam klip video dan fail CSV (fail jadual data yang boleh dibuka dengan Excel) secara berasingan mengikut langkah, kemudian menyimpannya di NAS.

Untuk menyelesaikan isu sarung tangan, kami menggunakan sarung tangan kain sebenar dari tapak untuk melatih semula model pengesanan tangan, kemudian menggunakan model ini pada kamera di barisan pengeluaran.

Perkara yang diserahkan dalam pusingan POC

Dalam pusingan POC, kami menyerahkan sistem pemeriksaan urutan kerja di stesen kerja sebenar, bersama sistem penyimpanan data dan manual penggunaan. Senarainya adalah seperti berikut.

• Task Cam mod Sequential yang memeriksa urutan berdasarkan tangan dan mengira bahan kerja
• Sebuah lagi kamera Task Cam dalam mod Skeleton yang mengukur masa setiap kitaran kerja
• Model pengesanan tangan yang dilatih untuk sarung tangan kain putih
• Penyimpanan klip video dan fail CSV bagi setiap langkah ke NAS
• Halaman web Duo view yang memaparkan imej daripada kedua-dua kamera secara bersebelahan melalui pelayar web (paparan bersebelahan pada satu tablet masih dalam percubaan)
• Manual penggunaan untuk pasukan di tapak

Di peringkat manakah kerja ini, dan apakah langkah seterusnya?

Kerja ini sedang dalam percubaan pada barisan pengeluaran sebenar dalam pusingan POC. Langkah seterusnya ialah perisian versi penggunaan sebenar bersama kamera berspesifikasi pemprosesan lebih tinggi. Urutan kerja pada tahun 2026 adalah seperti berikut.

1. Mesyuarat dengan pelanggan untuk menentukan hala tuju. Kesimpulannya termasuk naik taraf perkakasan dan melatih semula model untuk sarung tangan kain putih.
2. Memulakan projek, menerima pesanan belian (PO) dan memasang sistem di stesen kerja.
3. Menyerahkan manual penggunaan kepada pasukan di tapak.
4. Percubaan pada barisan pengeluaran dan melaporkan kemajuan kepada pelanggan secara berkala.
5. Langkah seterusnya: perisian versi penggunaan sebenar bersama kamera berspesifikasi pemprosesan lebih tinggi, dan pengubahsuaian kod supaya kamera dapat mencari NAS sendiri.

Hasil yang dapat disahkan semasa percubaan

Setakat ini, hasil yang dapat disahkan ialah sistem telah dipasang dan sedang diuji pada barisan pengeluaran sebenar, dan kami telah menyerahkan manual penggunaan kepada pasukan di tapak. Kerja ini belum mempunyai angka pengukuran hasil kerana masih dalam pusingan POC, jadi kami hanya melaporkan perkara yang disokong oleh dokumen.

Masalah yang ditemui semasa percubaan telah direkodkan dalam dokumen. Tangan pekerja bergerak lebih pantas daripada keupayaan pengesanan kamera model yang digunakan dalam pusingan POC, dan inilah sebab penggunaan kamera berspesifikasi lebih tinggi dalam versi penggunaan sebenar. Bagi masalah di tapak, kami membuat pembetulan sementara dengan menukar kamera yang bermasalah dan menetapkan supaya NAS dihidupkan dan sedia sebelum kamera.

Apakah yang kita pelajari

Prinsip utama daripada kerja ini ialah menguji model dengan sarung tangan sebenar, menentukan spesifikasi kamera berdasarkan kelajuan tangan sebenar, dan menetapkan urutan menghidupkan NAS dari awal. Butiran setiap perkara adalah seperti berikut.

• Uji model dengan perkara yang benar-benar dipakai pekerja. Sarung tangan kain putih menyebabkan model pengesanan tangan sedia ada tidak mengesan dengan tepat, jadi kami mengumpul imej sarung tangan dari tapak untuk melatih semula model sebelum digunakan.
• Tentukan spesifikasi pemprosesan kamera berdasarkan kelajuan tangan sebenar di tapak. Pusingan POC ialah tempoh untuk mengukur sama ada kamera dapat mengesan mengikut rentak kerja, sebelum memilih perkakasan untuk penggunaan sebenar.
• Sistem yang merakam ke storan pada rangkaian perlu menetapkan urutan menghidupkan peranti dari awal. Jika kamera mula beroperasi sebelum NAS sedia, rakaman akan bermasalah.

Cara menggunakan pendekatan ini pada barisan pemasangan anda

Jika barisan pemasangan anda mempunyai urutan langkah yang tetap dan melangkau langkah menyebabkan kecacatan, anda boleh menggunakan pendekatan yang sama seperti kes ini, iaitu melukis bingkai pengesanan mengikut urutan kerja, memeriksa berdasarkan tangan, dan menyimpan klip serta masa bagi setiap langkah. Perkara yang perlu disesuaikan ialah model pengesanan tangan, spesifikasi kamera dan kedudukan pemasangan, mengikut keadaan stesen anda.

• Data daripada mod Skeleton wajar digunakan untuk menambah baik stesen kerja dan urutan kerja, bukan untuk menilai pekerja secara individu, dan pekerja mesti dimaklumkan sebelum kamera dipasang.
• Bingkai pengesanan dalam imej yang sama tidak seharusnya bertindih.
• Mulakan dengan stesen yang mempunyai masalah urutan kerja paling jelas, kumpulkan pemerhatian tentang kelajuan tangan, pencahayaan dan sarung tangan, kemudian barulah tentukan spesifikasi untuk stesen lain.