Dev. World

KorT: LLM이 평가하는 한국어 번역 벤치마크

한국어 번역 품질 벤치마크 KorT를 출시했습니다! 최근 한강 작가님의 작품이 노벨 문학상을 수상하며 전 세계의 주목을 받았던 일을 기억하시나요? 사실, 상을 수상한 배경 뒤에는 좋은 번역이 있었습니다. 좋은 번역은 단순한 언어 변환을 넘어, 우리의 문화와 이야기를 세계 무대에 성공적으로 선보이는 데 결정적인 역할을 합니다. 이처럼 번역의 중요성은 점점 더 커지고

By Dev. World

TPU Pods Gemma3 파인튜닝 정리

최근 구글이 출시한 Gemma3를 TPU Pods에서 파인튜닝해보기 위해 삽질중이다. 이 포스트는 삽질을 정리하기 위해 작성하고 있다. 요약 2025-03-20 gemma-llm으로 시도해보았지만 실패했다. 2025-03-21 Google Deepmind gemma-3 report 팀에 이메일을 보냈다. 2025-03-22 🤗 Optimum TPU에서 파인튜닝이 되는 것을 확인했다. EasyDeL에 대해 알게 되었다. 2025-03-26 keras-hub에 gemma3가 merged됨! 우선, Gemma v1 모델은 https://github.

By Dev. World

gemago

한영 번역기 Gemago 개발기

최근 AI가 화제입니다. 그러나 온디바이스 AI는 아직까지 많지 않은 편입니다. 외부로 유출되면 안되는 민감한 내용을 포함하면 API를 이용하기 힘들기 때문에 수요는 매우 많음에도 불구하고 말이죠. 특히 제 경우에는 개인정보가 포함된 내용을 번역하는데에서 어려움이 많았습니다. 그래서 저는 Google에서 새로 공개한 Gemma 모델을 활용해 소형 언어 모델의 장점을 최대한 살린 한-영 번역기

By Dev. World