Handwired는 어떻게 보통 JavaScript를 학습 없는 ‘신경망’으로 바꾼다고 말할까?
요약 듣기
요약 보기 
Handwired의 핵심 주장은 꽤 도발적이에요. 평범한 JavaScript 코드를 신경망처럼 생긴 계산으로 바꿀 수 있고, 그 과정에서 따로 학습하지 않아도 원래 프로그램과 같은 결과를 내게 만들 수 있으며, 동시에 미분도 가능하다는 거예요. 게다가 브라우저에서 GPU 없이도 돌릴 수 있다고 소개해요. 여기서 중요한 건, 보통 우리가 떠올리는 ‘데이터로 학습한 모델’ 이야기라기보다, 이미 있는 프로그램을 다른 계산 형식으로 다시 적는 발상에 가깝다는 점이에요.
이 말을 이해하려면 먼저 저자가 ‘신경망’이라는 말을 어떤 뜻으로 쓰는지부터 잡아야 해요. Handwired 설명만 놓고 보면, 이 프로젝트는 프로그램을 이루는 if-else, 반복문, 상태 같은 요소를 float 위의 행렬곱과 reglu로 바꾼다고 말해요. 그러니까 여기서의 신경망은 ‘학습된 지능’보다는, 덧셈·곱셈·활성화 함수 같은 아주 제한된 부품으로 이루어진 거대한 계산 그래프에 더 가까워 보여요. 비유하자면, 원래 프로그램이 여러 갈림길과 메모가 있는 종이 설명서라면, Handwired는 그 설명서를 한 장짜리 거대한 계산표로 다시 옮겨 적겠다는 그림이에요. 읽는 방식은 달라지지만, 저자의 목표는 같은 답이 나오게 만드는 데 있어요.
가장 중요한 메커니즘은 조건문을 숫자 계산으로 바꾸는 예시에 잘 드러나요. 원래 코드는 ‘a가 4보다 크면 10, 아니면 12’예요. Handwired는 이를 먼저 above4라는 값으로 바꿔요. relu는 0보다 작으면 0, 크면 그대로 두는 함수인데, 이걸 두 번 써서 a가 어느 구간에 있는지를 숫자로 표시하게 만들어요. 그리고 결과는 ‘10을 고르는 쪽’과 ‘12를 고르는 쪽’을 둘 다 계산한 뒤, above4가 어느 쪽을 살릴지 정하는 방식으로 써요. 마치 스위치를 켜서 한 전구만 켜는 게 아니라, 두 전구에 전선을 다 연결해 두고 마지막에 선택 신호가 어느 쪽 밝기를 1로 둘지 정하는 모습에 가까워요. 그래서 분기 자체를 없애고도 조건문의 효과를 흉내 낼 수 있다는 거예요.
저자가 왜 이걸 굳이 이렇게 바꾸는지도 이어서 설명해요. +, *, relu 같은 몇 가지 기본 연산으로 프로그램을 표현해 두면, 전체가 미분 가능하게 남고, 가중치는 사람이 직접 써 넣은 셈이니 학습이 필요 없다고 봐요. 또 이런 단순한 연산은 GPU 최적화 기법이 다루기 좋다고 주장해요. 그래서 이 프로젝트는 일반적인 단일 스레드 JavaScript처럼 작성된 코드를, 나중에는 거대한 행렬곱이나 WebGPU 커널 형태로 실행해 병렬성을 끌어내려는 방향을 잡고 있어요. 즉, 핵심 연결고리는 ‘프로그램을 아주 적은 종류의 수치 연산으로 번역하면, 미분 가능성과 병렬 처리라는 두 세계를 한 번에 건드릴 수 있다’는 저자의 판단이에요.
데모들은 그 발상을 어디에 써 보려는지 보여줘요. Mini OS 데모는 작은 데스크톱을 JavaScript로 만든 뒤 Handwired로 변환했다고 소개해요. 큰 리스트, 애니메이션, 쌓임, 스크롤, 드래그, 입력, 이미지까지 포함하고도 최종 렌더링은 일반 DOM으로 간다고 해요. 여기서 적어 둔 weights 9,909, layers 130, training 0은 이 데모가 신경망 같은 형식을 띠고는 있지만, 적어도 소개 문구상으로는 학습으로 얻은 모델이 아니라는 인상을 강화하는 숫자예요. 또 Learned gallery는 컴파일된 프로그램의 가중치를 다시 풀어 실시간으로 학습시켜 볼 수 있다고 하고, JSON 검색 데모는 정규식 매칭, JSON 파싱, 하이라이팅을 JavaScript로 작성한 뒤 WebGPU 커널로 바꿔 대규모 병렬 처리를 노린다고 말해요. 여기서 특히 learned gallery나 다른 확장 아이디어들은 ‘이렇게 해 볼 수 있다’는 제안과 실험의 톤이지, 이미 일반적으로 검증된 방법이라고 단정하는 서술은 아니에요.
다만 이 설명을 그대로 받아들일 때 붙는 조건도 분명히 있어요. 첫째, ‘정확하다’는 말은 예시 수준에서는 직접 손으로 계산해 같은 결과를 확인할 수 있다는 뜻으로 제시되지만, 그 예시는 a가 정수일 때 above4가 0이나 1이 된다는 조건에 기대고 있어요. 그러니 어떤 JavaScript든 아무 조건 없이 완전히 같은 동작을 한다고, 이 짧은 소개만으로 넓게 일반화할 수는 없어요. 둘째, 저자 스스로도 일부 용도는 ‘이게 대체 뭘 하게 될까? 알아보자’라는 식으로 말해요. 즉, 가중치를 풀어 다시 학습시키거나, 다른 신경망과 끝까지 연결해 학습시키는 건 확정된 결론보다 실험 제안에 가깝다는 뜻이에요. 셋째, 성능도 데모 문구에서는 매우 빠르다고 말하지만, 어떤 조건에서 얼마나 일관되게 그런지, 정확히 어떤 제약이 있는지는 이 자료만으로는 알 수 없어요. 그래서 Handwired를 이해할 때는 ‘이미 있는 프로그램을 미분 가능한 수치 계산으로 재표현하려는 흥미로운 컴파일 아이디어’로 보는 게 가장 안전해요.