소리와 진동으로 알 수 있는 3가지 센서를 조합하고 기계학습으로 처리를 해서 이게 물병이라고 실시간에 알려주는 기술인데 사물마다 특유의 반응을 한다.
그래서 간단한 원리를 소개해 드리자면요. 스마트폰 안에 있는 센서들이 있습니다. 그래서 소리 그리고 진동으로 알 수 있는 3가지 센서를 조합하고 기계학습으로 처리를 해서 '이게 물병이었다' 바로 알 수 있게, 실시간 내에 알 수 있는 그런 기술이고요. 사물마다 특유의 반응을 합니다. 노크를 했을 때 나는 소리, 그리고 이게 진동이 느껴지는데요. 그게 사물마다 달라요. 그래서 그것을 저희가 다른 하드웨어 제작 필요 없이 여러분들이 이미 사용하고 있는 스마트폰의 센서들이 그것을 받아내고요. 저희들이 그것을 처리를 하고 아까 말씀드린 대로 기계학습으로서 분류를 하는 것입니다. 좀 더 간단하게 좀 더 자세한 말씀드리지만, 왼쪽은 사실 노크를 감지하는 것입니다. 그래서 센서값을 감지하고 이것에 약간 전처리, 후처리 과정이 필요하고요. 이게 정말 노크였는지를 구분하는 기술을 한 140ms 이내에 구분을 하고, 분류는 기계학습을 적용하는 과정인데요. 미리 학습과정이 필요하고 실제 노크를 했을 때는 저게 90ms 이내에, 그러니까 총 다 합해서 230ms 이내에 사물을 두드렸을 때 이게 정확하게 무엇이다, 인식이 가능합니다. 그래서 그럼 이 인식을 하고 무엇을 할 수 있느냐? 아까 비디오에서 나왔지만 몇 가지 좀 더 설명을 보여드리자면요. 예를 들어서 요리할 때 '내가 파스타를 끓이니까 8분이 지나면 알려 달라' 알람을 맞출 수도 있고, 자전거를 내가 어디다 마지막에 두었는지 기억이 안 날 때 어디다 주차를 했는지 기억을 할 수 있게 한다든지, 아까 말씀대로 사물을 바로 주문할 수 있는, 저거는 물이고, 휴지 같이 약간 얇은 저런 것도 인식이 잘 돼서요, 바로 주문할 수 있고요.