방구석 개발자의 실험실

[Elasticsearch] ELK쿼리로 API 호출 건수 집계해보기 (+Kibana Dev tools aggs field)          WhyAPI 호출 추이를 Whatap 필터링으로도 확인 가능하나,특정 조건을 걸거나, 집계를 하고싶어서ELK 쿼리로 직접 작성해보았다.https://www.whatap.io/ SaaS 모니터링 No.1 와탭 모니터링 | 와탭 | WhaTap와탭으로 IT 서비스를 완성하세요. 클라우드 최적화. 15일간 무료 사용. 쉽고 빠른 설치. 특허로 인정받은 분석력. 통합 모니터링. 실시간 모니터링. 마이크로 아키텍처. 유연하고 안정적인 확장whatap.io      내가 원했던 쿼리는1. 메뉴 검색 API 관련, 호출 건수 집계2. 시나리오 구분     2.1 검색바에서 En..

[컨퍼런스] 오픈 테크넷 서밋 2024 후기 2024년 9월 24일 다녀온 오픈 테크넷 서밋 2024 후기입니다.최근에 Apache-Tika 오픈소스를 사용하기도 했었고 + 핫한 AI를 주제로 다룰 뿐더러,세션 제목 보면 흥미로운 주제들이 많았어서 신청을 안할 수가 없었습니다.참가비 보고 잠시 주춤하긴 했습니다     우선 컨퍼런스 페이지 링크입니다.https://www.ddaily.co.kr/seminar/view?idx=313 오픈 테크넷 서밋(Open Technet Summit) 2024오픈소스는 기업의 IT인프라 구현에 필수 요소로 자리잡은 지 오래 입니다. 특히, 최근 기업의 SW 생산 방식은 자체 인력으로 개발하는 폐쇄적(Closed) 혁신에서 OSS 커뮤니티 등을 통한 개방형(Open)www..

[git] Fetch from origin시 lock fail 오류 발생 (이클립스) 대소문자를 무시한 동명의 브랜치가 있을경우, 이클립스에서 fetch시 발생remote의 유효하지 않은 참조를 제거하는 아래 명령어를 통해 해결$ git remote prune origin$ git remote update --prune

컨퍼런스 공식 페이지https://toss.im/slash-24 토스 개발자 컨퍼런스 SLASH24참가 신청 8.23-9.2 / 본 행사 9.12 COEXtoss.im         [SLASH24] 발표 자료를 전달드립니다. [Web발신] 안녕하세요, SLASH24 운영팀입니다. SLASH24에 관심을 가지고 참가 신청해 주셔서 감사드리며, 모든 참가 신청자 여러분께 세션 발표 자료를 전달드립니다. [발표 자료 다운로드하기] https://bit.ly/47o5ewS세션 다시 보기의 경우, 10월 중으로 SLASH24 홈페이지 및 토스 유튜브 채널에 업로드될 예정입니다. 궁금하신 점은 slash@toss.im으로 편히 문의해 주세요. 감사합니다. SLASH24 운영팀 드림 SLASH24 발표 자료 | N..

[git] Contribute to Apache (아파치 오픈소스 기여 경험기)      Contribution을 하게된 배경바야흐로 2024년 중순경 Confluence의 첨부파일을 API 호출해서 다운받고Apache-Tika 오픈소스 라이브러리 기반으로텍스트를 추출하는 로직을 구현했다. 2024.07.05 - [IT/Elasticsearch] - [Elasticsearch] 회사 내부 첨부파일의 내용을 통합 검색할 수 있다면? (feat. Fasoo DRM, Tika, Confluence) [Elasticsearch] 회사 내부 첨부파일의 내용을 통합 검색할 수 있다면? (feat. Fasoo DRM, Tika, Confluence)※ 사내 기밀은 담지 않도록 ※[Elasticsearch] 회사 내부..

[java] 유니코드 대체문자(��) 검증 및 처리 방법 (마름모 안의 물음표)   문제 상황 Confluence의 첨부파일 API를 호출해서 다운로드 로직 구현하고나서Tika 라이브러리의 parseToString 메소드로 여러가지 확장자 파일의 텍스트를 추출하는 과정에서일부 암호화된 파일을 파라미터로 넘겨줄 경우쓰레기값 대체문자들이 리턴되어 예외처리 분기가 필요했다. 대체문자. 바로 채득해보자.     대체문자(代替文字,replacement character)란? - 오류가 발생하거나 잘못되어 있다는 사실을 표시하기 위하여 사용되는 제어 문자입니다.  - 컴퓨터가 이해할 수 없거나, 유니코드에서 지원되지 않는 문자가 들어온 경우 대신 표현하는 유니코드(unicod)의 특수블록(special block)..

[테스트]

[git] GitHub 여러 Repository 하나로 합치기 (커밋 로그 유지하면서)  GitHub를 관리하던 중에,여러 repository를 합쳐야 하는 순간이 있었다.commit log를 유지하면서 Git Repository를 합치는 방법을 기록하고자 한다. 깃허브에서 새로운 레포지토리를 생성 후해당 신규 레포지토리에 옮기고 싶은 레포지토리들을 다 넣을 것이다. 커밋했던 내역들이 그대로 복사되어 온다.다만 문제점은 파일 하나하나의 히스토리는 열람하지 못한다. subtree를 이용할거다!    엄청 옛날에 잠시 만졌었던 드론 3d모델링 프로젝트 소스를 합쳐볼까나..추억이다..     1. 윈도우에 git 설치https://git-scm.com/downloads Git - DownloadsDownloa..

[Java] com.fasterxml.jackson.core.JsonParseException: Illegal unquoted character ((CTRL-CHAR, code 10)): has to be escaped using backslash to be included in string value at [Source: (StringReader); line: 1, column: 200304] at    spring boot 에서 API를 호출해서 데이터를 저장하는 파이프라인 배치가 있는데,받아온 API 의 응답을 jackson object mapper으로 파싱하는 부분에서 오류가 발생했다. mapper 를 사용하는 부분에서개행문자가 포함되어 있는 json 데이터를 처리하려고 하면 (메소드 파라미터로 ..

[오라클 클라우드] 무료 웹 서버 구축기2 (인텔리제이, 도커)  이 게시물의 결과물을 미리 맨위에서 보여드립니다.아직 아무것도 없지만 API 이거저거 붙여볼 생각에 설레네요 (OpenAI 딱 기다려 !)http://caracter-test.kro.kr/    대범이가 노래를 부른 그놈의 도커.이번 기회에 나도 한번 직접 해보자는 생각이 들었다.    도커란 무엇인가?Go언어로 작성된 리눅스 컨테이너 기반으로 하는 오픈소스 가상화 플랫폼이다. 다시 말해 특정한 서비스를 패키징하고 배포하는데 유용한 오픈소스 프로그램이다.    도커를 왜 사용할까?1. 애플리케이션 독립성을 가진다. 호스트 OS, 다른 컨테이너와도 독립된 공간을 보장받아 충돌이 발생하지 않는다. 2. 컨테이너 내부에 작업 후 배포하려 한다면..