๐WireFishing-M ๋ฆฌ๋ทฐ
Paper Link (Data in Brief 63 (2025) 112136) โ CC BY ์คํ์ก์ธ์ค ๋ฐ์ดํฐ ๋ ผ๋ฌธ์ด๋ค. ์ด ๋ฆฌ๋ทฐ์ ์ ๋ณธ์ ๋ก์ปฌ PDF(์ ์ ์ต์ข ๋ณธ, Elsevier ์กฐํ, 9์ชฝ, 2025-10-09 ์จ๋ผ์ธ ๊ณต๊ฐ)์ด๊ณ , ScienceDirect ์นํ์ด์ง๋ ๋์กฐ์ฉ์ผ๋ก๋ง ์ผ๋ค. arXiv ๋ฏธ๋ฌ๋ ์๋ค(DiB ์ ์ฉ ๊ฒ์ฌ).
Dataset โ WireFishing-M-1 (Harvard Dataverse, doi:10.7910/DVN/MUOJXI)
Dataset โ WireFishing-M-2 (Harvard Dataverse, doi:10.7910/DVN/XOPUXY)
Code: ์๋ค. ๋ ผ๋ฌธ ์ด๋์๋ ์ ์ฅ์ ๋งํฌ๊ฐ ์๊ณ (์ ์ ํ์ธ), ์์ง ํ์ดํ๋ผ์ธ์ โcustom Python scriptsโ๋ผ๊ณ ๋ง ์์ ๋๋ค. ๊ณต๊ฐ๋ ๊ฒ์ ๋ฐ์ดํฐ๋ฟ์ด๋ค.
์ ์: Tianyu Zhou, Hengxu You, Fang Xu, Jing Du
์์: Informatics, Cobots and Intelligent Construction (ICIC) Lab, University of Florida
Data in Brief 63, 112136 (2025) โ Data Article
- ๐ก ์ ์ ์ ์ข๊ณ ๊บพ์ธ ๊ด์ ๋ฐ์ด ๋ฃ๋ wire fishing(์ ๊ธฐยท๊ฑด์ค ํ์ฅ์ ์ค์ ์์ )์ ๋ก๋ด์ผ๋ก ๋ฐ๋ณต์ํค๋ฉด์, ์ด๊ฐยท๋ค์์ RGBยท๊ณ ์ ์์ฉยทํ์ ๋๊ธฐํํด ํต์งธ๋ก ๊ณต๊ฐํ ๋ฐ์ดํฐ์ ๋ ผ๋ฌธ์ด๋ค.
- โ๏ธ Franka Panda + Allegro Hand + DIGIT ์ด๊ฐ ์ผ์๊ฐ 7์ข ์ผ์ด๋ธ์ ํฌ๋ช L์ PVC ๊ด์ ์ฝ์ ํ๊ณ , 3๋์ RGB ์นด๋ฉ๋ผ(์ ๋ฉดยทํ๋ถยท๊ด ๋ด๋ถ)์ ๋ก๋ด ์ํ๋ฅผ 5 fps ROS ํ์์คํฌํ๋ก ์ ๋ ฌํด ๊ธฐ๋กํ๋ค. ์ฑ๊ณต/์คํจ ๋ผ๋ฒจ์ ๊ด ์ถ๊ตฌ ์นด๋ฉ๋ผ์ ์ด๋์ด ํฝ์ ์๋ฅผ ์๊ณ๊ฐ์ผ๋ก ์ธ์ด ์๋ ๋ถ์ฌํ๋ค.
- ๐ฏ ๋๋ค ์กฐ์ ์ฝ 3,907,477 ํ๋ ์ + ์ฌ๋ ์์ฐ 44,288 ํ๋ ์, ์ผ์ด๋ธ 7์ข , Harvard Dataverse์ CC0๋ก ์ฝ 1.54 TB(1: 1,127.6 GB / 2: 412.1 GB, 2026-09-22 API ํ์ธ). ๋จ ๋ฒ ์ด์ค๋ผ์ธยท๋ฒค์น๋งํฌ ๊ฒฐ๊ณผ๋ ํ๋๋ ์๋ค โ ๋ฐ์ดํฐ๋ง ์๋ ๋ ผ๋ฌธ์ด๋ค.
๐ Ping Review
๐ Ping โ A light tap on the surface. Get the gist in seconds.
์ผ์ด๋ธ ๊ฐ์ ๋ณํ ์ ํ์ฒด(deformable linear object, DLO)๋ ๋ก๋ด ์กฐ์์์ ๊ฐ์ฅ ์ค๋๋ ๋์ ์ค ํ๋๋ค. ์์ ๋๊ฐ ์ฌ์ค์ ๋ฌดํ์ด๊ณ , ์ ์ดํ๋ ์๊ฐ ๋ชจ์์ด ๋ฐ๋๋ฉฐ, ๊ทธ๋์ โ์ง๊ธ ๋ฌผ์ฒด๊ฐ ์ด๋ค ์ํ์ธ๊ฐโ๋ฅผ ์๊ฐ๋ง์ผ๋ก ์์๋ด๊ธฐ๊ฐ ์ด๋ ต๋ค. ์ด ๋ ผ๋ฌธ์ด ๊ณ ๋ฅธ ์๋๋ฆฌ์ค๋ ๊ทธ ๋์ ์ ์ฐ์ ๋ฒ์ ์ธ wire fishing โ ๋ฒฝ ์ ์ ์ ๊ด(conduit)์ ์ ์ ์ ๋ฐ์ด ๋ฃ๋ ์์ ์ด๋ค. ๊ด์ด ๊บพ์ฌ ์์ผ๋ฉด ์ผ์ด๋ธ ๋์ด ๋ฒฝ์ ๊ฑธ๋ฆฌ๊ณ ์ข๊ตดํ๋๋ฐ, ๊ทธ ์๊ฐ์ ์ ๋ณด๋ ์๋ ์ด๊ฐ๊ณผ ํ์๋ง ๋จ๋๋ค.
๋ ผ๋ฌธ์ ๊ธฐ์ฌ๋ ์๊ณ ๋ฆฌ์ฆ์ด ์๋๋ผ ๊ธฐ๋ก์ด๋ค. ๋ก๋ด์ด ๊ฐ์ ์ฝ์ ์ ์์ญ๋ง ๋ฒ ๋ฐ๋ณตํ๋ ๋์ ์ด๊ฐ ์ด๋ฏธ์งยท์ธ ์์ RGBยท๊ด์ ๊ฐยท์๋์ดํํฐ ํฌ์ฆยท์ถ์ ํ/ํ ํฌ๋ฅผ ํ ํ์๋ผ์ธ์ ์ ๋ ฌํด ์ ์ฅํ๊ณ , ๊ทธ๊ฒ์ ํต์งธ๋ก ๊ณต๊ฐํ๋ค. ์ ์๋ค์ด ๋ด์ธ์ฐ๋ ์ฉ์ฒ๋ ์ ์ด ๊ฐ์ง, ํ ์ถ์ , ์ผ์ ์ตํฉ(early/late fusion) ๋ฒค์น๋งํน, ์ฑ๊ณต ๊ฒ์ถ๊ธฐ ํ์ต, ๊ทธ๋ฆฌ๊ณ ์ผ์ด๋ธ 7์ข ์ ๊ฑธ์น ์ผ๋ฐํ ์ฐ๊ตฌ๋ค.

๋ฉํฐ๋ชจ๋ฌ ์ ์ ๊ณผ ์ฝ์ ์ค ์๊ฐ ํผ๋๋ฐฑ(Fig. 2). (a) ์ด๊ธฐ ์์ธ, (b) ์ข ๋ฃ ์์ธ. ๊ฐ์ด๋ฐ๊ฐ ์ ์ฒด ์ ์ (Franka Panda + Allegro Hand + ํฌ๋ช L์ PVC ๊ด), ์ข์๋จ์ด DIGIT ์ด๊ฐ ์ด๋ฏธ์ง, ์ขํ๋จยทํ๋จ์ด ์ ๋ฉด/ํ๋ถ ์นด๋ฉ๋ผ, ์ฐํ๋จ์ด ๊ด ์นด๋ฉ๋ผ์ ์ฑ๊ณต ํ์ ์ ์ฐ์ด๋ ์ด์งํ ์์์ด๋ค.
ํต์ฌ ๊ตฌ์ฑ:
๋ฐ์ดํฐ๋ ํ์ต ์๊ณ ๋ฆฌ์ฆ์ด ์๋๋ผ ์์ง ์ ์ฐจ๊ฐ ํต์ฌ์ด๋ค. ํ ์คํ ๋ง๋ค ์๋์ดํํฐ๋ฅผ
\Delta x \sim \mathcal{U}(0,\ 2\,\text{cm}),\qquad \Delta y,\ \Delta z \sim \mathcal{U}(-1,\ 1\,\text{cm}),\qquad \Delta\theta_{\text{pitch}},\ \Delta\theta_{\text{yaw}} \sim \mathcal{U}(-15^\circ,\ 15^\circ)
๋งํผ ์์ง์ด๊ณ , ๋์ ์ ์ง๋์ด ๋ฏธ๋ฆฌ ์ ํ ์ฝ์ ๊น์ด๋ฅผ ๋์ผ๋ฉด ์ ๋๋ค ์์ ์์ธ๋ก ๋ฆฌ์ ํ๋ค. ํ๋ฃจํ ์ ์ฑ ์ด ์๋๋ผ ์ด๋ฆฐ ๋ฃจํ ๋์ ํ์์ด๋ค โ ์๋์ ์ผ๋ก ์ฑ๊ณตยท๋ถ๋ถ ์ฝ์ ยท์ค์ ๋ ฌยท์ถฉ๋์ ๊ณจ๊ณ ๋ฃจ ๋ง๋ค์ด๋ด๊ธฐ ์ํ ์ค๊ณ๋ค. ๋ชจ๋ ๋์์ Franka ๋ค์ดํฐ๋ธ ์ํผ๋์ค ์ ์ด๋ก ์คํ๋ผ ์ ์ด์ด ์ปดํ๋ผ์ด์ธํธํ๊ฒ ํก์๋๋ค.
๋ผ๋ฒจ์ ๊ด ์ ์นด๋ฉ๋ผ ์์์ ๊ทธ๋ ์ด์ค์ผ์ผ๋ก ๋ฐ๊พผ ๋ค, ๊ด ์ถ๊ตฌ ๊ทผ์ฒ ์ง์ ์์ญ์์ ๋ฐ๊ธฐ I < 50์ธ ํฝ์ ์ N์ ์ธ์ด
y=\begin{cases}1 & N > 40\\ 0 & \text{otherwise}\end{cases}
๋ก ์๋ ๋ถ์ฌํ๋ค. ์ฌ๋์ด ์๋ง ๋ฒ์ ๋ณด์ง ์์๋ ๋๊ฒ ๋ง๋ ๊ฒ์ด ์ด ๋ฐ์ดํฐ๊ฐ ๋ฐฑ๋ง ๋จ์๋ก ์ปค์ง ์ ์์๋ ์ด์ ๋ค.
์ ์ฅ ๊ตฌ์กฐ: ์ต์์๊ฐ Cable_{n}_Random/ ๋๋ Cable_{n}_Human/, ๊ทธ ์๋ ์์ง ๋ ์ง, ๊ทธ ์๋ trial ํด๋๋ค. ๊ฐ trial ํด๋์๋ global_view/(ํ๋ถ RGB), inner_view/(๊ด ์ถ๊ตฌ RGB), local_view/(์ ๋ฉด RGB), tactile_view/(DIGIT), robot_data/(NumPy .npy)๊ฐ ๋ค์ด๊ฐ๋ค. ๋ก๋ด ์ํ ๋ฒกํฐ๋ 20์ฐจ์์ด๋ค.
| ์ธ๋ฑ์ค | ๋ด์ฉ |
|---|---|
| 0โ2 | ์๋์ดํํฐ ํ (F_x, F_y, F_z) |
| 3โ5 | ์๋์ดํํฐ ํ ํฌ (T_x, T_y, T_z) |
| 6โ11 | ์๋์ดํํฐ ํฌ์ฆ (์์น x,y,z + ์ฟผํฐ๋์ธ x,y,z,w) |
| 12โ18 | Franka Panda 7๊ด์ ๊ฐ๋ |
| 19 | ํ์คํฌ ๊ฒฐ๊ณผ (1 = ์ฑ๊ณต, 0 = ์คํจ) |
์ฃผ์ ์์น:
- ์ผ์ด๋ธ 7์ข (๊ฐ์ฑยทํ๋ฉด ์ง๊ฐยท๊ตต๊ธฐ๊ฐ ๋ค๋ฆ), ๋๋ค ์กฐ์ ์ฝ 3,907,477 ํ๋ ์, ์ฌ๋ ์์ฐ 44,288 ํ๋ ์.
- ์ด๊ฐ: DIGIT 3๊ฐ(indexยทthumbยทmiddle)๋ฅผ ์ธ๋ก๋ก ์ด์ด ๋ถ์ธ 240ร960 ์ด๋ฏธ์ง.
- RGB: ์ ๋ฉด Femto Mega 1280ร720, ํ๋ถ Azure Kinect DK 1280ร720, ๊ด ์นด๋ฉ๋ผ(USB ๋ด์๊ฒฝ) 640ร480. ์ ๋ถ 5 fps.
- ๊ด: L์๋ถ ๋ด๊ฒฝ 1.3 in / ์ธ๊ฒฝ 1.6 in, ๊ทธ ์์ ๋ด๊ฒฝ 1.0 in ์ง๊ด์ด 2 in ์ฐ์ฅ. ์ ์ฒด ๋์ด ์ฝ 18.5 in.
- ์ํํธ์จ์ด: ROS Melodic / Ubuntu 18.04,
/franka_state_controller/franka_states์์ ์ํ ์ทจ๋, ๋๊ธฐํ๋ ์คํ๋ผ์ธ ์ํํธ์จ์ด ํ์์คํฌํ(ํ๋์จ์ด ๋๊ธฐํ ์์).
๊ฒฐ๋ก :
์ ์ด์ด ํ๋ถํ DLO ์ฝ์ ์ ์ด๊ฐ+์๊ฐ+๊ณ ์ ์์ฉ+ํ์ผ๋ก ๋์์ ๋ด์ ๊ณต๊ฐ ๋ฐ์ดํฐ๋ก๋ ๋๋ฌผ๊ฒ ๊ท๋ชจ๊ฐ ํฌ๋ค. ๋ค๋ง ์ด ๋ ผ๋ฌธ์ Data in Brief์ ๋ฐ์ดํฐ ์ํฐํด์ด๋ผ ๋ชจ๋ธ๋, ๋ฒ ์ด์ค๋ผ์ธ๋, ์ฑ๊ณต๋ฅ ๋ ๋ณด๊ณ ํ์ง ์๋๋ค. ๋ฐ์ดํฐ์ ๊ฐ์น๋ ์ ์ ์ผ๋ก ๋ด๋ ค๋ฐ์ ์ฐ๋ ์ชฝ์์ ์ฆ๋ช ํด์ผ ํ๊ณ , ๋ค์์ ๋ณด๊ฒ ์ง๋ง ๊ทธ ๊ณผ์ ์์ ๋ง์ฃผ์น ํจ์ ์ด ์ ์ง ์๋ค.
๐ Ring Review
๐ Ring โ An idea that echoes. Grasp the core and its value.
ํ ์ค๋ก ์์ํ๋ฉด
โ์๊ณ ๋ฆฌ์ฆ ์์ด ๋ฐ์ดํฐ๋ง ๋ธ๋คโ๋ ์ ์ธ์ด๊ณ , ๊ทธ ์ ์ธ์ด ์ ์งํ ๋งํผ ๋ ์๊ฐ ์ง์ ๊ฒ์ฆํ ๊ฒ๋ ๋ง์ ๋ ผ๋ฌธ์ด๋ค.
๋ฐฐ๊ฒฝ: ์ wire fishing์ธ๊ฐ
๋ ผ๋ฌธ์ Background๋ ์งง์ง๋ง ์ด์ ์ด ๋ถ๋ช ํ๋ค. ๋ณํ์ฒด ์กฐ์์ด ์ด๋ ค์ด ์ด์ ๋ โ ๋์ ์์ ๋, โก ์์ธกํ๊ธฐ ์ด๋ ค์ด ๊ฑฐ๋, โข ์ ์ด ์ํธ์์ฉ์ ๋ํ ๋ฏผ๊ฐ์ฑ์ด๊ณ , ์ ํต์ ์กฐ์ ์ ๋ต์ ๊ฐ์ฒด ์ญํ์ ๋ง์ถฐ์ ธ ์์ด ์ค์๊ฐ ๊ฐ์ง์ ์ ์ ์ ์ด๊ฐ ํ์ํ๋ค๋ ๊ฒ์ด๋ค. ์ฌ๊ธฐ๊น์ง๋ DLO ์๋ฒ ์ด๋ค์ด ๊ณต์ ํ๋ ์ง๋จ์ด๋ค.
ํฅ๋ฏธ๋ก์ด ๊ฑด ํ์คํฌ ์ ํ์ด๋ค. wire fishing์ ๊ฑด์คยท์ ๊ธฐ ์กฐ๋ฆฝ ํ์ฅ์์ ๋งค์ผ ์ผ์ด๋๋ ์์ ์ธ๋ฐ, ๋ก๋ด ์ฐ๊ตฌ์์ ํํ ์ฐ์ด๋ ์ผ์ด๋ธ ๋ผ์ฐํ ยท๋งค๋ญ ๋ฌถ๊ธฐ์ ๋ฌ๋ฆฌ ๊ด ๋ด๋ถ๊ฐ ๋ณด์ด์ง ์๋๋ค. ๊ด์ด ๊บพ์ธ ์ง์ ์์ ์ผ์ด๋ธ ๋์ด ์ด๋์ ๊ฑธ๋ ธ๋์ง๋ ์นด๋ฉ๋ผ๋ก ์ ์ ์๊ณ , ์์ ์ ํด์ง๋ ์ ํญ๊ณผ ๋ฏธ์ธํ ์ง๋์ผ๋ก๋ง ์ ์ถํ ์ ์๋ค. ์ด๊ฐ์ ๋ฐ๋์ ํ์๋ก ํ๋ ์๋๋ฆฌ์ค๋ฅผ ๊ณ ๋ฅธ ์ ์ด๋ผ, โ๋ฉํฐ๋ชจ๋ฌ ๋ฐ์ดํฐ์ โ์ด๋ผ๋ ๊ฐํ์ด ์ฅ์์ด ์๋๊ฒ ๋๋ค. ์ ์ ๋ฉ(ICIC Lab)์ด ๊ฑด์ค ์ ๋ณดํ ์ฐ๊ตฌ์ค์ด๋ผ๋ ์ ๋ ํ์คํฌ ์ ํ์ ์ค๋ช ํ๋ค.
๊ฐ์ ๋ฌธ์ ์์์ผ๋ก ์ด๊ฐ์ ๋ถ์ธ ๋ณํ์ฒด ์กฐ์ ์ฐ๊ตฌ๋ก๋ ViTac-Tracing(์๊ฐ-์ด๊ฐ ๋ชจ๋ฐฉํ์ต์ผ๋ก ๋ณํ์ฒด๋ฅผ ํ์ด ํด๋ ์์ )๊ณผ HEPI(ํ์์ด ๋ณํ๋ ๋ฌผ์ฒด์ ๋ํ ๊ธฐํ ์ธ์ง RL)๊ฐ ์ด ๋ธ๋ก๊ทธ์ ์๋ค. WireFishing-M์ ๊ทธ ๊ณ์ด์ ์ ์ฑ ๋ ผ๋ฌธ์ด ์๋๋ผ ์์ฌ๋ฃ ๋ ผ๋ฌธ์ด๋ค.
ํ๋์จ์ด: ๋ฌด์์ผ๋ก ์ฐ์๋๊ฐ

์ด๊ธฐ ์์ธ์์์ ์์คํ ๊ตฌ์ฑ(Fig. 2a). ๊ฐ์ด๋ฐ ์ ์ฒด ์ ์ , ์ข์๋จ DIGIT ์ด๊ฐ ์ด๋ฏธ์ง(Right Thumb / Right Index), ์ขํ๋จ ์ ๋ฉด ์นด๋ฉ๋ผ, ํ๋จ ํ๋ถ ์นด๋ฉ๋ผ, ์ฐ์ธก ๊ด ๋ด๋ถ ๋ทฐ์ ๊ด ์นด๋ฉ๋ผ ์ด์ง ์์. ์ด ์์ ์ ๊ด ์นด๋ฉ๋ผ ์์์ ๊ฑฐ์ ์ ๋ถ ์ด๋ก๋ค.
- ๋ก๋ด: Franka Emika Panda 7-DOF, Vention ์ํฌ์คํ ์ด์ ์์ ์ค์น. ์ ๊ตฌ๊ฐ ์ํผ๋์ค ์ ์ด.
- ์: Allegro Robot Hand, 4์ง 16 DOF. (๋ ผ๋ฌธ์ ์ ์กฐ์ฌ๋ฅผ Shadow Robot Company๋ผ๊ณ ์ ๋๋ฐ โ ์๋ ์ฝ์ ์ ์ฐธ์กฐ.)
- ์ด๊ฐ: DIGIT. ยง4.1์ indexยทmiddleยทthumb ์ธ ์๊ฐ๋ฝ ๋์ ์ฅ์ฐฉํด ์ธ ์คํธ๋ฆผ์ ์ด์ด ๋ถ์ฌ 240ร960์ผ๋ก ๋ง๋ ๋ค๊ณ ํ๊ณ , 5 fps๋ผ๊ณ ์ ๋๋ค.
- ์นด๋ฉ๋ผ 3๋: ์ ๋ฉด Femto Mega RGB-D(ํ๋ซํผ ์ ์ฝ 18.5 in, ๊ด์์ ์ฝ 20 in), ํ๋ถ Azure Kinect DK(ํ๋ซํผ ์ ์ฝ 7 in, ํฌ๋ช ์์ ๋ฉด ์๋์์ ์ดฌ์), ๊ด ์นด๋ฉ๋ผ๋ LED ๋ด์ฅ 16.4 ft USB ๋ด์๊ฒฝ.
- ์บ๋ฆฌ๋ธ๋ ์ด์ : ์ฒด์ปค๋ณด๋๋ก ์นด๋ฉ๋ผ ๋ด๋ถยท์ธ๋ถ ํ๋ผ๋ฏธํฐ, DIGIT๋ ์ ์กฐ์ฌ ์ ์ฐจ๋๋ก ๊ทธ๋ ์ด์ค์ผ์ผ ๊ฐ๋ยท์ ๋ ฌ ๋ณด์ .
- ๋๊ธฐํ: ์ค์ ROS ๋ ธ๋๊ฐ ํ์์คํฌํ๋ฅผ ์ฐ๊ณ ์คํ๋ผ์ธ์์ ์ ๋ ฌ. ํ๋์จ์ด ๋๊ธฐํ๋ ์๋ค๊ณ ๋ช ์ํ๋ค.
๋ฐ์ดํฐ ์์ง: ๋์ ํ์๊ณผ ์ฌ๋ ์์ฐ
๊ฐ trial์ ๋ฏธ๋ฆฌ ์ ํด์ง ์์น์์ ์ผ์ด๋ธ์ ์ก๋ ๊ฒ์ผ๋ก ์์ํ๋ค. Allegro ์์ ๊ณ ์ ๊ด์ ๋ช ๋ น์ผ๋ก ๊ทธ๋ฆฝ์ ์ ์งํ๋ค โ ์ฆ ์๊ฐ๋ฝ์ ๋ฅ๋์ ์ผ๋ก ์์ง์ด์ง ์๋๋ค. ๊ทธ ์ํ์์ ์์ ๋ณธ ๊ท ๋ฑ๋ถํฌ ๋์ ์คํ ์ ์์ ๊ด ์ ๊ตฌ๋ก ์ ๊ทผํ๊ณ , ์ฝ์ ๊น์ด๋ฅผ ๋๊ธฐ๋ฉด ๋ฆฌ์ ํ๋ค. ์ด ์ด๋ฆฐ ๋ฃจํ ์ ๋ต์ด ์ฑ๊ณตยท๋ถ๋ถ ์ฝ์ ยท์ค์ ๋ ฌยท์ถฉ๋์ ์์ฐํ ๋ค์์ด ์ค๋ค.
๋ ๋ฒ์งธ ๋ชจ๋๋ ์ฌ๋ ์์ฐ์ด๋ค. ์ฌ๋์ด ์๋์ดํํฐ๋ฅผ ์ง์ ์ก๊ณ ๋์ด(kinesthetic teaching) ์ ๋ฌธ๊ฐ ์์ค์ ์ฝ์ ์ ์ฌํํ๋ค. ๋ ผ๋ฌธ์ ์ด์ชฝ์ด ์ฑ๊ณต๋ฅ ์ด ๋๊ณ ๊ถค์ ์ด ๋งค๋๋ฝ๋ค๊ณ ์์ ํ๋ค โ ๋ค๋ง โ๋๋คโ์ ์์น๋ ๋๋ด ๋์ค์ง ์๋๋ค.

์ฑ๊ณต ์ฝ์ ์์ ์ ๋์ผ ๊ตฌ์ฑ(Fig. 2b). ๋ ผ๋ฌธ ๋ณธ๋ฌธ์ โ(b)์ ์ฐํ๋จ ๊ทธ๋ ์ด์ค์ผ์ผ ์์์ ๊ด ์ถ๊ตฌ ๊ทผ์ฒ ์ด๋์ด ํฝ์ ์ด ๋ง๋คโ๊ณ ์ค๋ช ํ๋๋ฐ, ์ค์ ๊ฒ์ฌ ์์์์ ๋์ ๋๋ ๊ฒ์ ๊ฒ์ ๋ฐฐ๊ฒฝ ์์ ๋ฐ์ ์ค๊ธฐ๋ค(์๋ ์ฝ์ ์ ์ฐธ์กฐ).
๋ฐ์ดํฐ ๊ตฌ์ฑ: ํ๋ ์์ ๋ง๊ณ , trial์ ๋ชจ๋ฅธ๋ค

์ผ์ด๋ธ 7์ข ๊ณผ ์กฐ๊ฑด๋ณ ๋ฐ์ดํฐ๋(Table 1). ๊ตต๊ธฐยท๊ฐ์ฑยทํผ๋ณต(๋ธ๋ ์ด๋ ๋์ผ๋ก ์ ๋ฌด)์ด ๋ค๋ฅธ 7์ข ์ด๋ฉฐ, ์ค๋ฅธ์ชฝ ๋ ์ด์ด ๋๋ค ์กฐ์ / ์ฌ๋ ์์ฐ ๋ฐ์ดํฐ๋์ด๋ค.
| # | ์ค๋ช | Random | Human Demo |
|---|---|---|---|
| 1 | Flexible, Thin, Lightweight, Braided nylon cover | ~2,900,000 | 5,962 |
| 2 | Rigid, Thick, Heavy-duty, No cover | 84,621 | 5,994 |
| 3 | Rigid, Thin, Lightweight, No cover | 57,285 | 6,668 |
| 4 | Less Flexible, Thin, Lightweight, Braided nylon cover | 169,602 | 6,170 |
| 5 | Less Rigid, Thin, Lightweight, No cover | 284,262 | 7,624 |
| 6 | Rigid, Thin, Lightweight, Braided nylon cover | 27,232 | 4,949 |
| 7 | Flexible, Thin, Lightweight, No cover | 384,475 | 7,141 |
| Total (๋ ผ๋ฌธ ํ๊ธฐ) | ~3,907,477 | 44,288 |
ํ์ ์ด ์ ๋ชฉ์ Trial Counts์ง๋ง ๋ณธ๋ฌธ์ ์ด ์ซ์๋ค์ ํ๋ ์ ์๋ก ์ค๋ช ํ๋ค(โover 3.9 million frames collected in randomized trials and 44,288 frames in human demonstrationsโ). ์ฆ ํ ์ ๋ชฉ์ด ํ๋ ธ๋ค๊ณ ๋ณด๋ ํธ์ด ๋ง๋ค.
์ฌ๊ธฐ์ ๋์ ๋๋ ๊ฑด ๋ ๊ฐ์ง๋ค.
(1) ์ผ์ด๋ธ 1๋ฒ์ด ์ ์ฒด์ 74%๋ฅผ ์ฐจ์งํ๋ค. 2,900,000 / 3,907,477 โ 74.2%(์ง์ ๊ณ์ฐ). ๋๋จธ์ง 6์ข ์ด 100๋ง ํ๋ ์์ ๋๋ ๊ฐ๋๋ฐ 6๋ฒ์ 27,232 ํ๋ ์๋ฟ์ด๋ค โ ์ต๋/์ต์ ๋น๊ฐ 106๋ฐฐ๋ค. ๋ ผ๋ฌธ์ ์ด ๋ฐ์ดํฐ๊ฐ โ์ผ๋ฐํยท๊ฐ๊ฑด์ฑ ์ฐ๊ตฌ๋ฅผ ๋ท๋ฐ์นจํ๋คโ๊ณ ์ฐ์ง๋ง, ์ด ์ ๋ ๋ถ๊ท ํ์ด๋ฉด ์ฌ๊ฐ์ค ์์ด ํ์ตํ๋ฉด ์ฌ์ค์ ์ผ์ด๋ธ 1๋ฒ ์ ์ฉ ๋ชจ๋ธ์ด ๋์จ๋ค.
(2) ์ฌ๋ ์์ฐ ํฉ๊ณ๊ฐ ๋ง์ง ์๋๋ค. 7๊ฐ ๊ฐ์ ๋ํ๋ฉด 5,962+5,994+6,668+6,170+7,624+4,949+7,141 = 44,508์ธ๋ฐ ํ์ Total์ 44,288์ด๋ค. 220 ํ๋ ์ ์ฐจ์ด๋ค(์ง์ ๊ฒ์ฐ). ๋๋ค ์ชฝ์ 1,007,477 + 2,900,000 = 3,907,477๋ก ์ ํํ ๋ง์ผ๋ฏ๋ก, ์ด๊ธ๋ ๊ฑด ์ฌ๋ ์์ฐ ์ด ํ๋๋ค. ํฐ ์์น๋ ์๋์ง๋ง ํ์ ์ด๊ณ๊ฐ ๊ฒ์ฐ์ ํต๊ณผํ์ง ๋ชปํ๋ค๋ ์ฌ์ค ์์ฒด๊ฐ ๋ฐ์ดํฐ ๋ ผ๋ฌธ์์๋ ์ ํธ๋ค.
ํ๋ ์ ์๋ฅผ ์๊ฐ์ผ๋ก ๋ฐ๊ฟ ๋ณด๋ฉด ๊ท๋ชจ๊ฐ ์ค๊ฐ๋๋ค. ์ ์คํธ๋ฆผ 5 fps์ด๋ฏ๋ก ๋๋ค 3,907,477 ํ๋ ์ โ 217์๊ฐ(์ฝ 9์ผ์น ์ฐ์ ๊ธฐ๋ก), ์ฌ๋ ์์ฐ 44,288 ํ๋ ์ โ 2.5์๊ฐ์ด๋ค(์ง์ ๊ณ์ฐ). ์ฌ๋ ์์ฐ์ด ์ ์ฒด์ 1.1%์ ๋ถ๊ณผํ๋ค๋ ๋ป์ด๊ธฐ๋ ํ๋ค.
์ํ์ด ์ค์ ๋ก ์ด๋ป๊ฒ ์๊ฒผ๋

๋ฐ์ดํฐ ์ํ ์์(Fig. 1). (a) ํ๋ถ ๋ทฐ โ ๊ด๊ณผ ์ผ์ด๋ธ, ์นด๋ฉ๋ผ ๋ฆฌ๊ทธ๊ฐ ๋ณด์ธ๋ค. (b) ๊ด ์นด๋ฉ๋ผ ์ธก๋ฉด ๋ทฐ โ ๊ด ๋ฒฝ๋ฉด์ ์ด์ ์ด ๋ง์ ํ๋ฆฟํ๋ค. (c) ์ ๋ฉด ๋ทฐ โ ์ํฌ์คํ์ด์ค ์ ๊ฒฝ. (d) DIGIT ์ด๊ฐ ์ด๋ฏธ์ง โ ์์์๋ถํฐ index / thumb / middle.
์ด ๊ทธ๋ฆผ์ด ๋ฆฌ๋ทฐ์์ ๊ฐ์ฅ ์ค์ํ ํ ์ฅ์ด๋ค. ์บก์ ์ด ์๋๋ผ ํฝ์ ์ ๋ณด๋ฉด ๋ฐ์ดํฐ์ ์ค์ ํ์ง์ด ๋๋ฌ๋๊ธฐ ๋๋ฌธ์ด๋ค.
- (d) ์ด๊ฐ ์ด๋ฏธ์ง๋ ์ปฌ๋ฌ๋ค. ๋ณธ๋ฌธ ยง3์
tactile_view/๋ฅผ โGrayscale tactile images (.jpg)โ๋ผ๊ณ ๋ช ์ํ๋๋ฐ, ๊ฒ์ฌ๋ Fig. 1(d)์ Fig. 2์ ์ธ์ ์ ๋ชจ๋ DIGIT ํน์ ์ RGB(์ /๋ น/์ฒญ ์กฐ๋ช ) ์ด๋ฏธ์ง๋ค. ์ค์ ํ์ผ์ด ๋ฌด์์ธ์ง๋ ๋ด๋ ค๋ฐ์ ํ์ธํ ์๋ฐ์ ์๋ค. - (d)์ ์ ์ด ์ ํธ๊ฐ ํฌ๋ฏธํ๋ค. ์ธ ํจ์น ๋ชจ๋ ๋ถ๋๋ฌ์ด ์ ๊ทธ๋ผ๋์ธํธ๋ง ๋ณด์ด๊ณ , ์ผ์ด๋ธ์ด ๋๋ฆฐ ์๊ตญ ๊ฐ์ ์ ๋ช ํ ๊ตญ์ ๋ณํ์ด ๋ณด์ด์ง ์๋๋ค. DIGIT์ ์ ค ํ๋ฉด์ ๊ตญ์ ์ํ์ ์ก๋ ์ผ์์ธ๋ฐ, ๊ทธ๋ฆฝ์ ๊ณ ์ ๊ด์ ๋ช ๋ น์ผ๋ก ์ ์งํ๋ ์ค๊ณ์์๋ ์ ์ด ํจํด์ด ๊ฑฐ์ ๋ณํ์ง ์์ ์ ์๋ค. ์ฆ ์ด ์ด๊ฐ ์คํธ๋ฆผ์ด ์ฝ์ ์ฌ๊ฑด(๊ฑธ๋ฆผยท์ข๊ตดยท๋ฏธ๋๋ฌ์ง)์ ์ผ๋ง๋ ๋ด๊ณ ์๋์ง๋ ๋ ผ๋ฌธ๋ง์ผ๋ก๋ ์ ์ ์๋ค.
- (b) ๊ด ์นด๋ฉ๋ผ ๋ทฐ๊ฐ ํ๋ฆฌ๋ค. ์ฑ๊ณต ํ์ ์ ๊ทผ๊ฑฐ๊ฐ ๋๋ ์คํธ๋ฆผ์ธ๋ฐ ์ด์ ์ด ๊ด ๋ฒฝ์ ๋ง์ ์๋ค. ์๊ณ๊ฐ ๊ธฐ๋ฐ ๋ผ๋ฒจ๋ง์ด ์ด๋ฐ ์์ ์์์ ๋๋ค๋ ๋ป์ด๋ค.
์ง๊ด: ์ด ๋ฐ์ดํฐ์ ์ง์ง ๊ตฌ์กฐ
์ด ๋ฐ์ดํฐ์ ์ ํต์ฌ์ โ๋ฉํฐ๋ชจ๋ฌโ์ด๋ผ๋ ๊ฐํ๋ณด๋ค ๋ผ๋ฒจ ์์ฑ ๋ฐฉ์์ ์๋ค๊ณ ๋ณธ๋ค. ์ฑ๊ณต/์คํจ๊ฐ ์ฌ๋ ํ๋จ์ด ์๋๋ผ N>40์ด๋ผ๋ ํฝ์ ์นด์ดํธ์์ ๋์ค๊ธฐ ๋๋ฌธ์, ๋ผ๋ฒจ y๋ ์ฌ์ค์
y = \mathbb{1}\left[\,\big|\{\,p \in \mathcal{R}\ :\ I(p) < 50\,\}\big| > 40\,\right]
๋ผ๋ ๊ฒฐ์ ๋ก ์ ํจ์๋ค(\mathcal{R}์ ๊ด ์ถ๊ตฌ ๊ทผ์ฒ ๊ณ ์ ์์ญ). ์ด ํจ์๊ฐ ๋ฌผ๋ฆฌ์ ์ฑ๊ณต๊ณผ ์ผ์นํ๋ ์ ๋๊ฐ ๋ฐ์ดํฐ ์ ์ฒด์ ์ ๋ขฐ๋ ์ํ์ด ๋๋ค. ์กฐ๋ช ์ด ๋ฐ๋๊ฑฐ๋ ๊ด ์นด๋ฉ๋ผ๊ฐ ๋ฐ๋ฆฌ๊ฑฐ๋ ๊ฒ์ ์ผ์ด๋ธ ๋์ ํฐ ์ผ์ด๋ธ(ํ 3ยท5๋ฒ)์ ์ฐ๋ฉด ์ด ํจ์๋ ํ๋ค๋ฆฐ๋ค โ ์ค์ ๋ก 7์ข ์ค 2์ข ์ด ๋ฐ์ ์์ด๊ณ , โ์ด๋์ด ํฝ์ ์นด์ดํธโ๋ ์ผ์ด๋ธ ์์ ์ง์ ์์กดํ๋ค. ๋ ผ๋ฌธ์ ์ด ๊ต๋์ ์ธ๊ธํ์ง ์๋๋ค.
๋ฌ๋ฆฌ ๋งํด, ์ฑ๊ณต ๊ฒ์ถ๊ธฐ๋ฅผ ์ด ๋ผ๋ฒจ๋ก ํ์ตํ๋ฉด ๋ชจ๋ธ์ด ๋ฐฐ์ฐ๋ ๊ฒ์ โ์ฝ์ ์ ์ฑ๊ณตํ๋๊ฐโ๊ฐ ์๋๋ผ โ๊ด ์ถ๊ตฌ ์์ญ์ด ์ด๋์์ก๋๊ฐโ์ผ ๊ฐ๋ฅ์ฑ์ด ๋๋ค. ์ด๊ฑด ๋ฐ์ดํฐ์ ๊ฒฐํจ์ด๋ผ๊ธฐ๋ณด๋ค ์ฌ์ฉ์๊ฐ ๋ฐ๋์ ์๊ณ ์จ์ผ ํ ์ฑ์ง์ด๋ค.
์ ์ฅ์ ์ค์ฌ: ์ค์ ๋ก ๋ฌด์์ด ์ฌ๋ผ์ ์๋
๋ ผ๋ฌธ์ Data Availability๋ ๋ ๊ฐ์ Harvard Dataverse DOI๋ง ์ค๋ค. ์ค์ ๋ก ์ด์ด ํ์ธํ๋ค(Dataverse API, 2026-09-22).
| DOI | ์ด๋ฆ | ํ์ผ ์ | ์ฉ๋ | ๊ตฌ์ฑ |
|---|---|---|---|---|
| 10.7910/DVN/MUOJXI | WireFishing-M-1 | 529 | ์ฝ 1,127.6 GB | Cable_1~7_{Random,Human} ์ ๋ถ |
| 10.7910/DVN/XOPUXY | WireFishing-M-2 | 186 | ์ฝ 412.1 GB | Cable_1_Random๋ง (๋ ์ง๋ณ ๋ถํ continuation) |
- ๋ผ์ด์ ์ค๋ ๋ ๋ค CC0 1.0, ๊ธฐํ์ผ 2025-07-14.
- ํ์ผ์ ์ ๋ถ
.7z์์นด์ด๋ธ์ด๊ณ20241130_101-104.7z์ฒ๋ผ trial ๋ฒํธ ๊ตฌ๊ฐ์ผ๋ก ์ชผ๊ฐ์ ธ ์๋ค. ์ฆ trial ํด๋ ๋จ์ ๋ฒํธ๋ ์กด์ฌํ๋๋ฐ ๋ ผ๋ฌธ์ ๊ทธ ์ด ๊ฐ์๋ฅผ ๋๋ด ๋ณด๊ณ ํ์ง ์๋๋ค. - ํฉ๊ณ ์ฝ 1.54 TB. ๋ด๋ ค๋ฐ์ ์ฐ๋ ค๋ฉด ์คํ ๋ฆฌ์ง ๊ณํ์ด ๋จผ์ ํ์ํ๋ค.
- ๋ ผ๋ฌธ ๋ณธ๋ฌธยทPDF ์ ์ฒด๋ฅผ ํ์ด๋ GitHub ๋ฑ ์ฝ๋ ์ ์ฅ์ ๋งํฌ๋ ์๋ค. ์์ง ์คํฌ๋ฆฝํธ๋, ์์ถ ํด์ ยท๋ก๋ฉ ์ ํธ๋ฆฌํฐ๋, ๋ฒ ์ด์ค๋ผ์ธ๋ ๊ณต๊ฐ๋์ง ์์๋ค.
Dataverse ๊ตฌ์ฑ์ด ๋ ผ๋ฌธ ์์ ์ ๋ณด์ํด ์ฃผ๋ ์ง์ ์ด ํ๋ ์๋ค. ์ผ์ด๋ธ 1๋ฒ์ด 74%๋ฅผ ์ฐจ์งํ๋ ์ด์ ๊ฐ ๋ณ๋ DOI ํ๋๋ฅผ ํต์งธ๋ก ์ธ ๋งํผ ์ด์ด์ ์์งํ๊ธฐ ๋๋ฌธ์ด๋ผ๋ ๊ฒ ํ์ผ ๋ฐฐ์น์์ ๋๋ฌ๋๋ค. ์๋์ ์ค๊ณ๋ผ๊ธฐ๋ณด๋ค ์์ง ์ผ์ ์ ์ฐ๋ฌผ๋ก ๋ณด์ธ๋ค.
์คํ: ์๋ค
๋ฐ์ดํฐ ์ํฐํด์ด๋ฏ๋ก ๋น์ฐํ๋ค๊ณ ๋ณผ ์๋ ์์ง๋ง, ์ง์ด ๋ ํ์๊ฐ ์๋ค. ์ด ๋ ผ๋ฌธ์๋
- ํ์ต๋ ๋ชจ๋ธ์ด ์๊ณ ,
- ๋ฒ ์ด์ค๋ผ์ธ ์ฑ๋ฅ(์ฑ๊ณต ๊ฒ์ถ ์ ํ๋, ํ ์ถ์ ์ค์ฐจ ๋ฑ)์ด ์๊ณ ,
- ๋ฐ์ดํฐ์ ์ ์ฒด์ ์ฑ๊ณต/์คํจ ๋น์จ์กฐ์ฐจ ์๊ณ ,
- train/val/test split ์ ์๊ฐ ์๊ณ ,
- ๋ค๋ฅธ DLO ๋ฐ์ดํฐ์ ๊ณผ์ ๋น๊ตํ๊ฐ ์๋ค.
Data in Brief์ โRelated research articleโ ํญ๋ชฉ๋ None์ด๋ค โ ์ฆ ์ด ๋ฐ์ดํฐ๋ฅผ ์ค์ ๋ก ์ฌ์ฉํ ์ง ๋ ผ๋ฌธ์ด ์์ง ์๋ค๋ ๋ป์ด๋ค. Value of the Data๊ฐ ์ ์ํ๋ 6๊ฐ์ง ์ฉ์ฒ๋ ์ ๋ถ ๊ฐ๋ฅ์ฑ์ผ๋ก๋ง ์์ ๋๋ค.
๋นํ์ ์ผ๋ก ๋ณด๋ฉด
๊ฐ์
- ํ์คํฌ ์ ํ์ด ์ข๋ค. ๊ด ๋ด๋ถ๊ฐ ๋ณด์ด์ง ์๋ wire fishing์ ์ด๊ฐยทํ์ด ์ ๋ณด์ ํ์์ธ ๋ช ์ ๋๋ ์ค์ ์์ ์ด๋ค. โ๋ฉํฐ๋ชจ๋ฌ์ด๋ฉด ์ข๋คโ๊ฐ ์๋๋ผ โ๋ฉํฐ๋ชจ๋ฌ์ด ์๋๋ฉด ์ ๋๋คโ์ ๊ฐ๊น์ด ์ธํ ์ด๋ค.
- ๊ท๋ชจ๊ฐ ํฌ๊ณ ์ ์งํ๊ฒ ํฌ๋ค. 217์๊ฐ ๋ถ๋์ ์ค๊ธฐ ์ ์ด ๋ฐ์ดํฐ๋ ํ๊ณ ๋จ์ผ ๋ฉ ๊ธฐ์ค์ผ๋ก ํ์น ์๋ค. ์๋ฎฌ๋ ์ด์ ์ด ์๋๋ผ ์ ๋ถ ์ค๊ธฐ๋ค.
- ๋ผ๋ฒจ๋ง์ ์๋ํํ ๊ฒ์ด ๊ท๋ชจ๋ฅผ ๊ฐ๋ฅํ๊ฒ ํ๋ค. ์๊ณ๊ฐ ๋ฐฉ์์ด ๊ฑฐ์น ๊ธด ํด๋, ์์ญ๋ง ๋ฒ์ ์ฝ์ ์ ์ฌ๋์ด ๋ณผ ์๋ ์๋ค. ์ค๊ณ ๊ฒฐ์ ์ผ๋ก๋ ํฉ๋ฆฌ์ ์ด๋ค.
- CC0์ Harvard Dataverse. ๊ธฐ๊ด ์ ์ฅ์ + ํผ๋ธ๋ฆญ ๋๋ฉ์ธ ์กฐํฉ์ด๋ผ ์ ๊ทผ์ฑยท์์์ฑ์ด ์ข๋ค(arXiv-only ํ๋ก์ ํธ ํ์ด์ง๋ณด๋ค ํจ์ฌ ๋ซ๋ค).
- ๋ก๋ด ์ํ ๋ฒกํฐ ๊ท๊ฒฉ์ ์ธ๋ฑ์ค ๋จ์๋ก ๋ช ์ํ๋ค. 20์ฐจ์ ๋ฐฐ์ด์ ๊ฐ ์ฌ๋กฏ์ด ๋ฌด์์ธ์ง ์ ์ด ๋ ๋์ ์ฝ๋ ์์ด๋ ํ์ฑ์ด ๊ฐ๋ฅํ๋ค โ ์ฝ๋๋ฅผ ๊ณต๊ฐํ์ง ์์ ๋ ผ๋ฌธ์์ ์ด๊ฑด ์ต์ํ์ ์ฑ์๋ค.
- ํ๊ณ ์ ์ด ์์งํ๋ค. ๋ฌผ์ฒด ๋ค์์ฑ ๋ถ์กฑ, ๊ณ ์ ํ๊ฒฝ, ์ผ์ ๋น๋๊ธฐ, ์ด์ง ๋ผ๋ฒจ์ ์ค์ค๋ก ์ ์๋ค.
์ฝ์ ยทํ๊ณ
์๋ฌธ ๋์กฐ์์ ํ์ธํ ๋ถ์ผ์น๋ถํฐ ์ ๋๋ค. ๋ฐ์ดํฐ ๋ ผ๋ฌธ์ ์์ ์ด ๊ณง ์คํ์ด๋ฏ๋ก, ์ด๋ฐ ๋ถ์ผ์น๋ ์ฌ์ฉ์๊ฐ ์ค์ ๋ก ๊ฑธ๋ ค ๋์ด์ง ์ง์ ์ด๋ค.
- ์ด๊ฐ ํ๋ ์๋ ์ดํธ๊ฐ ๋ณธ๋ฌธ ์์์ ์ธ ๋ฒ ๋ค๋ฅด๊ฒ ์ ํ๋ค. ยง4.1 โ240ร960 pixels at 5 fpsโ, ยง4.2 โrecords at approximately 30 frames per secondโ, ยง4.4 โtactile images from the DIGIT sensor at approximately 5 FPSโ. 2:1๋ก 5 fps๊ฐ ์ฐ์ธํ์ง๋ง, ์ด๊ฐ์ ์ฐ๋ ค๋ ์ฌ๋์๊ฒ ์ด๊ฑด ์ฌ์ํ ์คํ๊ฐ ์๋๋ค.
- DIGIT ๊ฐ์๊ฐ ๋ ๋ฒ ๋ค๋ฅด๊ฒ ์ ํ๋ค. ยง4.1์ indexยทmiddleยทthumb ์ธ ์๊ฐ๋ฝ์ ์ฅ์ฐฉํด ์ธ ๋ทฐ๋ฅผ ์ด์ด ๋ถ์ธ๋ค๊ณ ํ๊ณ , ยง4.2๋ โmounted on one of the Allegro fingersโ๋ผ๊ณ ํ๋ค. Fig. 1(d)๋ 3๊ฐ ์คํ์ ๋ณด์ฌ์ฃผ๋ฏ๋ก ยง4.1์ด ๋ง์ ๋ณด์ด์ง๋ง, Fig. 2 ์ธ์ ์ ๋ผ๋ฒจ์ Right Thumb / Right Index ๋๋ง ๋ณด์ธ๋ค.
- ๋ผ๋ฒจ๋ง ๋ฐฉ์์ด ๋ณธ๋ฌธ๊ณผ Limitations์์ ๋ชจ์๋๋ค. ยง4.3์ ๊ทธ๋ ์ด์ค์ผ์ผ ์๊ณ๊ฐ ๊ธฐ๋ฐ ์๋ ๋ผ๋ฒจ๋ง์ โthousands of trials์ ๊ฑธ์ณ ์ผ๊ด๋๊ณ ํ์ฅ ๊ฐ๋ฅํ ์ฃผ์์ ๋ณด์ฅํ๋คโ๊ณ ์ค๋ช ํ๋๋ฐ, Limitations๋ โInsertion outcomes were labeled manually โฆ using visual inspectionโ์ด๋ผ๊ณ ์ด๋ค. ๋ ๋ค์ผ ์๋ ์๋ค.
- Fig. 2(b)๊ฐ ๋ณธ๋ฌธ ์ค๋ช ๊ณผ ์ด๊ธ๋ ๋ณด์ธ๋ค. ๋ณธ๋ฌธ์ ์ฑ๊ณต ์ ๊ด ์ถ๊ตฌ ๊ทผ์ฒ์ ์ด๋์ด ํฝ์ ์ด ๋ง์์ง๋ค๊ณ ํ๋๋ฐ, ๊ฒ์ฌ๋ (b)์ ๊ด ์นด๋ฉ๋ผ ์ด์ง ์์์์ ๋๋๋ฌ์ง๋ ๊ฒ์ ๊ฒ์ ๋ฐฐ๊ฒฝ ์์ ๋ฐ์ ์ค๊ธฐ๋ค. ๋ฐ๋๋ก (a)๋ ๊ฑฐ์ ์ ๋ถ ๊ฒ๋ค โ ์ฆ ๊ทธ๋ฆผ๋ง ๋ณด๋ฉด โ์ฑ๊ณต = ๋ฐ์ ํฝ์ ์ฆ๊ฐโ๋ก ์ฝํ๋ค. ์ด์งํ ๊ฒฐ๊ณผ์ ๊ทน์ฑ(polarity) ์์ ์ด ๋ค์งํ๊ฑฐ๋ ๊ทธ๋ฆผ์ด ๋ฐ์ ๋ ๊ฒ์ผ๋ก ๋ณด์ด๋๋ฐ, ๋ ผ๋ฌธ๋ง์ผ๋ก๋ ์ด๋ ์ชฝ์ธ์ง ํ์ ํ ์ ์๋ค. ๋ผ๋ฒจ ์ ์์ ํต์ฌ์ด๋ผ ๊ทธ๋ฅ ๋๊ธธ ์ ์๋ ๋ถ์ผ์น๋ค.
- ์ด๊ฐ ์ด๋ฏธ์ง ์์ ์์ ์ด ๊ทธ๋ฆผ๊ณผ ๋ค๋ฅด๋ค. ยง3์ โGrayscale tactile imagesโ๋ผ๊ณ ํ๋๋ฐ Fig. 1(d)ยทFig. 2 ์ธ์ ์ ์ปฌ๋ฌ๋ค.
- ํ๋์จ์ด ์ถ์ฒ ํ๊ธฐ๊ฐ ํ๋ ธ๋ค. Allegro Hand๋ฅผ โ(Shadow Robot Company)โ๋ผ๊ณ ์ ๋๋ฐ, Allegro Hand๋ Wonik Robotics(๊ตฌ SimLab) ์ ํ์ด๊ณ Shadow Robot Company๋ ๋ณ๊ฐ ํ์ฌ์ ๋ณ๊ฐ ์์ด๋ค. DIGIT์ โ(GelSight Inc.)โ๋ผ ํ ๊ฒ๋ ๋์จํ๋ค โ DIGIT์ ์ค๊ณยท๊ณต๊ฐ๋ Meta AI(Lambeta et al. 2020, ๋ ผ๋ฌธ์ ์ฐธ๊ณ ๋ฌธํ [7])์ด๊ณ GelSight Inc.๋ ์์ฉ ๊ณต๊ธ์๋ค. ์ด๋ก์ด DIGIT ๋ฐ์ดํฐ๋ฅผ โGelSight tactile imagesโ๋ผ ๋ถ๋ฅด๋ ๊ฒ๋ ๊ฐ์ ํผ๋์ ์ฐ์ฅ์ด๋ค.
- ํ ์ด๊ณ๊ฐ ๊ฒ์ฐ์ ํต๊ณผํ์ง ๋ชปํ๋ค. ์ฌ๋ ์์ฐ 44,508(ํฉ) vs 44,288(ํ๊ธฐ), 220 ์ฐจ์ด.
- ํ ์ ๋ชฉ์ด ๋ด์ฉ๊ณผ ๋ค๋ฅด๋ค. โTrial Countsโ์ธ๋ฐ ๊ฐ์ ํ๋ ์ ์๋ค.
- trial ์๋ฅผ ๋๊น์ง ๋ณด๊ณ ํ์ง ์๋๋ค. โ๊ฐ trial ํด๋๋ ์์ฒ ํ๋ ์์ ๋ด๋๋คโ๋ง ์๊ณ , ์ด trial ์๋ ์ผ์ด๋ธ๋ณ trial ์๋ ์๋ค. 5 fps์์ โ์์ฒ ํ๋ ์โ์ด๋ฉด ํ trial์ด 10๋ถ ์ด์์ด๋ผ๋ ๋ป์ธ๋ฐ, ๊ฐ์ ๋ฌธ์ฅ์ด ๊ทธ๊ฒ์ โa single cable insertion attemptโ๋ผ ๋ถ๋ฅธ๋ค โ 10๋ถ์ง๋ฆฌ ๋จ์ผ ์ฝ์ ์๋๋ ๋ฌผ๋ฆฌ์ ์ผ๋ก ์ด์ํ๋ค. trial = ๋ค์์ ์ฝ์ ์๋๋ฅผ ๋ด์ ์ธ์ ์ผ๋ก ์ฝ๋ ๊ฒ ๋ง์ ๋ณด์ด์ง๋ง, ๊ทธ๋ ๋ค๋ฉด 20๋ฒ ์ธ๋ฑ์ค์ ์ฑ๊ณต ๋ผ๋ฒจ์ด ์ธ์ ๋จ์์ธ์ง ํ๋ ์ ๋จ์์ธ์ง๊ฐ ๋ชจํธํด์ง๋ค. ์ด ๋ฐ์ดํฐ๋ก ์ฑ๊ณต ๊ฒ์ถ๊ธฐ๋ฅผ ๋ง๋ค๋ ค๋ฉด ๊ฐ์ฅ ๋จผ์ ํ์ด์ผ ํ ์๋ฌธ์ด๋ค.
- ์ฑ๊ณต/์คํจ ๋น์จ์ด ์๋ค. ์ด์ง ๋ถ๋ฅ ๋ฐ์ดํฐ์ ์ธ๋ฐ ํด๋์ค ๊ท ํ์ ๋ณด๊ณ ํ์ง ์๋๋ค. ์ด๋ฆฐ ๋ฃจํ ๋์ ํ์์ด๋ฏ๋ก ์คํจ๊ฐ ์๋์ ์ผ๋ก ๋ง์ ๊ฒ์ผ๋ก ์ง์๋์ง๋ง, ์ง์์ผ ๋ฟ์ด๋ค.
- ํ์ ์ผ์๊ฐ์ด ์๋๋ผ ์ถ์ ๊ฐ์ด๋ค.
/franka_state_controller/franka_states์ ์ธ๋ถ ํ ์ถ์ ์ ๊ด์ ํ ํฌ ๊ธฐ๋ฐ ๋ชจ๋ธ ์ถ์ ์ด๋ผ ํธํฅยท์ ์ญํต๊ณผ ํน์ฑ์ด ์๋ค. ๋ ผ๋ฌธ๋ โexternally estimatedโ๋ผ๊ณ ์ ์งํ๊ฒ ์ฐ์ง๋ง, ํ ์ถ์ ์ฐ๊ตฌ์ ์ฐ๋ ค๋ ์ฌ๋์๊ฒ ์ด๊ฑด ground truth๊ฐ ์๋๋ค. - ํ๋์จ์ด ๋๊ธฐํ๊ฐ ์๋ค. 5 fps ์ ํ๋ ์๋ ์ดํธ์์ ์ํํธ์จ์ด ํ์์คํฌํ ์ ๋ ฌ๋ง ํ๋ค๋ฉด, ์ ์ด ์ฌ๊ฑด ๊ฐ์ ๋น ๋ฅธ ์ ์ด๋ฅผ ๋ชจ๋ฌ๋ฆฌํฐ ๊ฐ์ ์ ๋ฐ ์ ํฉํ๊ธฐ ์ด๋ ต๋ค. ๋ ผ๋ฌธ์ Limitations๋ ์ด๋ฅผ ์ธ์ ํ๋ค.
- ์๊ฐ๋ฝ์ด ์์ง์ด์ง ์๋๋ค. Allegro 16 DOF๋ฅผ ๋ฌ์ ๋๊ณ ๊ณ ์ ๊ด์ ๋ช
๋ น์ผ๋ก ๊ทธ๋ฆฝ๋ง ์ ์งํ๋ค. ์ฌ์ค์ ํํ ๊ทธ๋ฆฌํผ + ์ด๊ฐ ํจ์น์ด๊ณ , ๋ฐ์ดํฐ์ in-hand ์กฐ์ ์ ๋ณด๋ ์๋ค. 16 DOF ์์ ๊ด์ ๊ฐ์ด
.npy์คํ์ ํฌํจ๋์ง ์์ ๊ฒ๋ ์ด ์ค๊ณ์ ์ผ๊ด๋๋ค(12โ18์ Franka 7๊ด์ ๋ฟ). - ์ฌํ ๋๊ตฌ๊ฐ ์ ํ ์๋ค. 1.54 TB์
.7z์์นด์ด๋ธ๋ง ์๊ณ ๋ก๋ยท์ธ๋ฑ์คยท๋ฉํ๋ฐ์ดํฐ CSVยท์์ ๋ ธํธ๋ถ์ด ์๋ค. ์ง์ ์ฅ๋ฒฝ์ด ์ฉ๋๋ณด๋ค ์ด์ชฝ์์ ๋ ๋๋ค. - ํ๊ฒฝ์ด ํ๋๋ค. ๊ด ๊ธฐํ๊ฐ ๋จ์ผ L์ ํ์์ด๊ณ ์กฐ๋ช ยท๋ฐฐ๊ฒฝ์ด ๊ณ ์ ์ด๋ผ, ์ฌ๊ธฐ์ ํ์ตํ ์ฑ๊ณต ๊ฒ์ถ๊ธฐ๊ฐ ๋ค๋ฅธ ๊ด์์ ์๋ํ ์ด์ ๊ฐ ์๋ค. ์ ์๋ ํ๊ณ๋ก ์ ๋๋ค.
์ข ํฉ ํ์
๋ฐ์ดํฐ ์์ฒด์ ์์ฌ๋ฃ ๊ฐ์น๋ ์ค์ฌํ๋ค โ ์ค๊ธฐ 217์๊ฐ, ์ด๊ฐยท๋ค์์ RGBยท๊ณ ์ ์์ฉยทํ, CC0. ๋ฐ๋ฉด ๋ฌธ์๋ก์์ ์์ฑ๋๋ ๋ฎ๋ค. ์ 15๊ฐ ์ค 1~8๋ฒ์ ๋ ผ๋ฌธ ๋ด๋ถ์์ ์๊ธฐ๋ชจ์์ด๊ฑฐ๋ ๋ช ๋ฐฑํ ์ค๊ธฐ์ด๊ณ , 9~10๋ฒ์ ๋ฐ์ดํฐ์ ๋ ผ๋ฌธ์ด๋ผ๋ฉด ๋ฐ๋์ ์์ด์ผ ํ ํต๊ณ์ ๋ถ์ฌ๋ค. Data in Brief์ ๋ฆฌ๋ทฐ ๊ฐ๋๋ฅผ ๊ฐ์ํด๋ ์ด๊ฐ fpsยท์ผ์ ๊ฐ์ยท๋ผ๋ฒจ๋ง ๋ฐฉ์ยท์ฑ๊ณต ํฝ์ ์ ๊ทน์ฑ์ด ๋ณธ๋ฌธ ์์์ ์๊ฐ๋ฆฐ ์ฑ ๊ฒ์ฌ๋ ๊ฒ์ ์์ฝ๋ค.
ํ์ค์ ์ธ ์ฌ์ฉ ๊ถ๊ณ ๋ ์ด๋ ๋ค: ์ด ๋ฐ์ดํฐ๋ฅผ ์ฐ๋ ค๋ฉด ๋
ผ๋ฌธ์ ์คํ ๋ฌธ์๋ก ์ ๋ขฐํ์ง ๋ง๊ณ , .7z ํ๋๋ฅผ ๋จผ์ ํ์ด robot_data/*.npy์ 20๋ฒ ์ธ๋ฑ์ค ๋ถํฌ์ tactile_view/ ์ด๋ฏธ์ง์ ์ฑ๋ยทํด์๋ยท์ค์ ํ๋ ์ ๊ฐ๊ฒฉ์ ์ง์ ํ์ธํ๋ ๊ฒ๋ถํฐ ์์ํด์ผ ํ๋ค. ๋
ผ๋ฌธ์ด ๋ตํ์ง ๋ชปํ๋ ์ง๋ฌธ(trial ์ ์, ํด๋์ค ๊ท ํ, ์ด๊ฐ ์ํ๋ง)์ด ๋ฐ๋ก ๊ทธ ํ ํด๋ ์์ ์๋ค.
๊ด๋ จ ์ฐ๊ตฌ์์ ์๋ฆฌ ๋งค๊น
๋ ผ๋ฌธ์ ์ฐธ๊ณ ๋ฌธํ์ 7๊ฐ๋ฟ์ด๊ณ , ์ขํ๋ ์ธ ์ถ์ด๋ค.
- DLO ์กฐ์ ์๋ฒ ์ด([1] Gu et al. 2023, [2] Zhu et al. 2022)์ ์กฐ์ ์ผ๋ฐ ๋ํฅ([3] Billard & Kragic, Science 2019), ๋น๊ฐ์ฒด ๋ฉํฐ๋ชจ๋ฌ ๊ฐ์ง ์๋ฒ ์ด([4] Nadon et al. 2018) โ ๋ฌธ์ ์ ๋์ด๋๋ฅผ ์ธ์ฐ๋ ๋ฐ ์ฐ์ธ๋ค.
- ์ฐ์ ์ผ์ด๋ธ๋ง([5] Tanureza et al., SII 2025)๊ณผ ์ด๊ฐ ๊ธฐ๋ฐ ์ผ์ด๋ธ ๋ผ์ฐํ ([6] Wilson et al., ICRA 2023) โ ํ์คํฌ์ ์ค๋ฌด์ ๊ทผ๊ฑฐ๋ค. ํนํ [6]์ ์ด๊ฐ ๊ตฌ๋ ๋ชจ์ ํ๋ฆฌ๋ฏธํฐ๋ธ๋ก ์ผ์ด๋ธ ๋ผ์ฐํ ์ ํธ๋ ์ฐ๊ตฌ๋ก, WireFishing-M์ด โ์ ์ฑ โ์ด ์๋๋ผ โ๋ฐ์ดํฐโ๋ฅผ ๋ด๋๋ ์๋ฆฌ๋ฅผ ์ญ์ผ๋ก ๊ท์ ํ๋ค.
- DIGIT([7] Lambeta et al., RA-L 2020) โ ์ผ์ ๊ทผ๊ฑฐ.
์ด ๋ธ๋ก๊ทธ ์์์์ ์๋ฆฌ๋ ์ด๋ ๊ฒ ์กํ๋ค. DIGIT ์ด๊ฐ์ ์ ์ฑ ์ ์ง์ ๋ฌผ๋ฆฐ ์ฐ๊ตฌ๋ก๋ TacFILM(์ด๊ฐ์ VLA์ ์ตํฉ)์ด ์๊ณ , ๋ณํ์ฒด๋ฅผ ์ด๊ฐ์ผ๋ก ๋ค๋ฃจ๋ ๋ชจ๋ฐฉํ์ต์ผ๋ก๋ ViTac-Tracing์ด, ํ์ ๋ณํ ๋ฌผ์ฒด์ ๋ํ RL๋ก๋ HEPI๊ฐ ์๋ค. WireFishing-M์ ์ด๋ค ์๋์ธต์ ํด๋นํ๋ค โ ๋ชจ๋ธ์ ์ ์ํ์ง ์๊ณ , ๊ทธ ๋ชจ๋ธ๋ค์ด ํ์ตํ ์ค๊ธฐ ์ ์ด ๋ฐ์ดํฐ๋ฅผ ์๋๋ค. ๋ค๋ง ์ ์ฐ๊ตฌ๋ค์ด ๊ฐ์ ์๊ธฐ ๋ฐ์ดํฐ๋ฅผ ์ค์ค๋ก ๋ชจ์ ์ฐ๋ ํ์ค์์, ์ด ๋ฐ์ดํฐ์ ์ด ์ค์ ๋ก ์ฌ์ฌ์ฉ๋๋ ค๋ฉด ๋ก๋์ ๋ฒ ์ด์ค๋ผ์ธ์ด ๋ฐ๋ผ์์ผ ํ๋ค.
์์ฝ
WireFishing-M์ ๊ด ์์ด ๋ณด์ด์ง ์๋ ์ค์ ์์ ์ ๊ณ ๋ฅด๊ณ , ๊ฑฐ๊ธฐ์ ์ด๊ฐยท๋ค์์ ์๊ฐยท๊ณ ์ ์์ฉยทํ์ ๋ถ์ฌ 217์๊ฐ์ ๊ธฐ๋กํด CC0๋ก ํผ ๋ฐ์ดํฐ์ ์ด๋ค. ํ์คํฌ ์ ํ๊ณผ ๊ฐ๋ฐฉ์ฑ์ ๋ถ๋ช ํ ๊ฐ์ ์ด๊ณ , ์๊ณ๊ฐ ์๋ ๋ผ๋ฒจ๋ง์ด๋ผ๋ ์ค์ฉ์ ํํ์ด ์ด ๊ท๋ชจ๋ฅผ ๊ฐ๋ฅํ๊ฒ ํ๋ค.
๋ฐ๋๋ก ์ด ๋ ผ๋ฌธ์ ๋ฐ์ดํฐ๋ฅผ ์ค๋ช ํ๋ ๋ฌธ์๋ก์ ์ฌ๋ฌ ๊ตฐ๋ฐ๊ฐ ์ด๊ธ๋ ์๋ค. ์ด๊ฐ fps๊ฐ ์ธ ๋ฒ ๋ค๋ฅด๊ฒ ์ ํ๊ณ , DIGIT ๊ฐ์๊ฐ ๋ ๋ฒ ๋ค๋ฅด๊ฒ ์ ํ๊ณ , ๋ผ๋ฒจ๋ง์ด ์๋์ธ์ง ์๋์ธ์ง ๋ณธ๋ฌธ๊ณผ ํ๊ณ ์ ์ด ์ถฉ๋ํ๋ฉฐ, ์ฑ๊ณต ํ์ ํฝ์ ์ ๊ทน์ฑ์ด ๊ทธ๋ฆผ๊ณผ ๋ณธ๋ฌธ์์ ๋ฐ๋๋ก ์ฝํ๊ณ , ์ฌ๋ ์์ฐ ์ด๊ณ๋ 220๋งํผ ๊ฒ์ฐ์ด ์ ๋ง๋๋ค. trial ์๋ ํด๋์ค ๊ท ํ๋ ์๋ค. ๊ทธ๋์ ์ด ๋ฐ์ดํฐ์ ๊ฐ์น๋ โ์ฐ๋ ์ฌ๋์ด ์ง์ ์ด์ด ํ์ธํ ๋งํผโ์ผ๋ก ๊ฒฐ์ ๋๋ค. 1.54 TB๋ฅผ ๋ด๋ ค๋ฐ๊ธฐ ์ ์, ์์นด์ด๋ธ ํ ์กฐ๊ฐ์ ๋จผ์ ํ์ด๋ณด๋ ๊ฒ์ด ์ด ๋ ผ๋ฌธ์ ๋ํ ๊ฐ์ฅ ์ฑ์คํ ๋ ํด๋ค.