ML Commons 란?

ML Commons는 OpenSearch에서 머신러닝 기능을 붙여 쓰게 해주는 플러그인이라고 보면 된다.

공식 문서 기준으로 모델 배포, 추론, 외부 모델 연결, ML 작업 관리 같은 기능을 REST API로 다룰 수 있게 해준다.

쉽게 말해 “OpenSearch 안에서 ML 모델을 등록하고 실행하고 관리하는 레이어”다.

CLIP, OpenSearch, kNN 문맥에 맞춰 말하면 역할은 이렇게 나뉜다.

또한, ML Commons는 OpenSearch 내부 모델만 다루는 게 아니라, 커넥터를 통해 외부에 호스팅된 모델과도 연결할 수 있다.

공식 문서에는 외부 엔드포인트에 연결하는 connector 기능이 따로 설명되어 있다.

Ex. 흐름 예시

  1. ML Commons에 임베딩 모델을 등록하거나 배포한다.
  2. 텍스트 or 이미지를 모델에 넣어 벡터를 생성한다.
  3. 생성된 벡터를 knn)vector 필드에 저장한다.