knowledge-based content
3년 전부터 달리기를 시작했다. 처음엔 주 3회, 5km 정도였다. 1년이 지나니까 주 4~5회, 10km까지 늘었다. 지금은 마라톤도 완주했고, 자존감도 많이 올라갔다. 근데 정말 신기한 게, 주변 사람들이 자주 하는 말이 “넌 왜 계속 달리기만 해? 헬스장도 가고, 요가도 해보고, 수영도 해봐”라는 거였다. 처음엔 무시했다. “달리기면 충분하지, 뭘 더 필요해?”라고 생각했거든. 근데 최근에 발표된 대규모 연구 … Read more
지난주 금요일, 보안팀에서 한 통의 전화가 왔다. “Azure OpenAI API 키가 GitHub에 커밋된 게 발견됐어요. 즉시 로테이션 해주세요.” 상황이 얼마나 심각한지는 말할 필요가 없다. 한 명의 개발자가 실수로 키를 노출시켰는데, 그 키로 누구나 당신의 AI 서비스를 이용할 수 있다. 월 청구액이 수천 달러에 이를 수도 있다. 이게 처음 겪는 일이 아니다. 여러 프로젝트를 하면서 API … Read more
최근 한국 증시가 소위 말하는 ‘활화산’ 상태라고 불릴 정도로 뜨거워지고 있습니다. 특히 지난 1주일 사이 코스닥지수가 19.2%나 급등하면서 투자자들 사이에서 이게 진짜 트렌드인지, 아니면 일시적 현상인지에 대한 논쟁이 뜨겁습니다. 이런 와중에 SK하이닉스가 사상 최대 실적을 기록했다는 뉴스가 나왔는데, 이 두 가지 소식이 결국 같은 맥락에서 이해돼야 한다는 점을 아는 투자자는 많지 않습니다. 단순히 “주가가 올랐다”라고 … Read more
AI 모델을 만들었다. 이제 이걸 API로 서빙해야 한다. 그런데 Azure에서 뭘 써야 할까? 이 질문으로 밤을 샌 개발자가 얼마나 될까. Stack Overflow나 GitHub 이슈를 찾아봐도 대부분 일반적인 답변만 있다. “Container Apps는 마이크로서비스용이고, App Service는 전통적인 웹앱용이다”라는 식으로. 하지만 이건 AI API 서빙에는 정확한 답이 아니다. 지난 6개월간 실제로 AI 모델을 여러 환경에서 서빙해봤다. 처음엔 App … Read more
작년까지만 해도 Azure에서 OpenAI 모델을 쓰려면 Azure OpenAI Service를 직접 다뤄야 했다. 약간 복잡했다. 여러 서비스를 오가야 했고, 모니터링도 헷갈렸고, 모델 배포도 손이 많이 갔다. 그런데 올해 1월 기준으로 Azure AI Foundry가 본격적으로 작동하면서 판이 바뀌었다. 이건 단순한 UI 개선이 아니라, 전체 개발 경험을 다시 생각한 플랫폼이다. 내가 처음 Azure AI Foundry를 켰을 때 느낀 … Read more
지난 1월 16일의 은행 금리 현황을 보면 정말 눈물이 난다. 5년 고정형 주담대 금리가 3.88%에서 6.286% 사이를 오가고 있다는 건데, 혼합형은 더 심하다. 4.130%부터 6.297%까지, 거의 7%에 코앞이다. 5년 전만 해도 2.5~4.0% 수준이었는데 말이다. 정확히 2배 가까이 올랐다는 뜻이다. 누군가는 말할 수 있다. “그래도 6%대면 괜찮지 않나?” 하지만 이게 남의 얘기가 아니라 자신의 월급으로 집을 … Read more
데이터 엔지니어라면 이런 상황을 겪어본 적 있을 거다. AI 팀에서 “이거 어디 올려놨어? 다운로드 링크 줄 수 있어?” 하면서 물어오고, 보안팀은 “공개 접근? 절대 안 돼. 데이터 유출 위험 있어”라고 말한다. 그 사이에서 어떻게 적절히 관리할지 고민하다가 결국 복잡한 권한 설정에 빠져든다. 지난 2년간 여러 AI 프로젝트를 하면서 Azure Blob Storage를 많이 다뤘다. 처음엔 단순히 … Read more
최근 몇 달간 Azure에서 대형 언어 모델을 서빙해야 하는 상황이 자주 생긴다. 특히 한국 기업들이 AI를 실제 서비스에 녹여내려고 할 때 그렇다. 그럼 대부분 이런 고민을 한다. “OpenAI API만 쓰면 안 되나? 왜 굳이 직접 모델을 서빙해야 하지?” 그 답은 간단하다. 비용, 지연시간, 그리고 데이터 프라이버시다. 직접 모델을 서빙하면 OpenAI 같은 외부 API에 의존하지 않아도 … Read more
요즘 IT 담당자들이 자주 받는 질문이 있다. “AI 도입할 때 Azure OpenAI를 써야 하나, 아니면 OpenAI API를 직접 쓰면 되지 않나?” 겉으로는 단순한 질문이지만, 이 선택이 회사의 보안, 비용, 그리고 향후 AI 전략에 미치는 영향은 생각보다 크다. 지난 몇 년간 여러 기업의 AI 도입 과정을 지켜보면서 느낀 거지만, 많은 기업들이 처음엔 “API 직접 쓰면 간단하고 … Read more
제조업 R&D 담당자라면 이런 고민을 해봤을 거다. 신제품 개발할 때마다 수십억 원대의 시제품 제작비가 들어가고, 테스트 비용도 만만치 않다. 실패할 수도 있는데 투자는 이미 다 한 상황. 그런데 요즘 몇몇 선진 제조업체들은 다르게 움직이고 있다. 물리적 시제품을 만들기 전에 가상 공간에서 수백 번, 수천 번 시뮬레이션을 하는 거다. 비용은 몇 분의 일로 줄이면서도 더 정확한 … Read more