All Articles

TIL&TEL 20.08.03~20.08.09

TIL( Today I Learned)

20-08-03 월

  • 금요일 커밋코드 실수 확인하기
  • 프로세스 옵션 추가
  • admin 에러 확인
  • 0.000000 00:00:00차이 확인
  • 11뽐

20-08-04 화

  • 자연어 강의 리서치

    • 무슨 문제를 해결할 것인가
    • BERT 활용, TWC 적합 모델링 만들기

      • ML 모델링 이해 및 활용
      • 머신러닝 프레임워크 이해 및 활용
      • BERT 원리 이해
      • pretrain 모델 생성, fine tuning 배우기
    • 자연어 처리

      • 텍스트 전처리
      • 모델링에 활용할 수 있는 데이터 파이프 라인 만들기
  • DB 이전
  • PingPong chat space 테스트

    • 채팅 데이터가 아닌 평문에서는 효과가 좋진 않아보인다.
  • 9뽐

20-08-05 수

  • 사내 데이터 전처리 검토

    • 데이터 훑어보기
    • 메일
  • 7뽐

20-08-06 목

  • NLP 계속 복습하기
  • BERT 이해하기
  • 프로세스 확장 논의
  • 11뽐

20-08-07 금

  • 한국어 임베딩 bert 복습
  • T 아카데미 BERT 강의 들어보기
  • 9뽐

TEL (Trial and Error Log)

20-08-03

  • ERROR:md 파일 헤더에 -로 시작하면 lv1 콘텐츠 아래 lv 2의 indent가 동작안함 (gatsby)

    • SITUATION: md 파일로 블로그 작성중
    • SOLUTION: 헤더에 - 삭제
  • ERROR: API에서 에러 발생,KeyError

    • SITUATION: API POST 요청 보내면 KEY ERROR 발생
    • REASON: if 분기문에 새로운 KEY 추가하고 받는데, else 조건으로 빠졌을 경우 처리 안해줌 (ELSE 절에 필요한 KEY가 아니라서)
    • SOLUTION: else 절에 KEY 추가
  • ERROR: json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)

    • SITUATION: request 응답후 res.text 읽을 수 에러가 발생함, 무한 루프 종료가 안됨
    • REASON: pass 해야하는데 처리하는 조건절이 없어서 exit 하지 못하고 다시 queue에 넣어 놓고 무한 loop
    • SOLUTION: insta HTTP response 예외 케이스 조건에서 LOOP 탈출 조건 걸어줌
    • Other Cases
    • 많은 경우, 이것은 구문 분석하려는 문자열이 비어 있기 때문에 발생합니다.

      • 미리 json_string가 비어 있는지 확인하여 해결 => 이케이스
    • XML/HTML 출력 (<로 시작하는 문자열) 또는 호환되지 않는 문자 인코딩

      • JSON 처럼 보이는 데이터 본문을 가지고 있더라도 구문 분석에 실패하면 데이터 본문의 따옴표를 바꾸어보라
    • 404와 같은 http 오류 코드가 있고 JSON으로 응답을 구문 분석하려고 할 때 발생할 수 있습니다!

      • 200 (확인)을 확인하거나 오류가 발생되도록해야합니다.