로보틱스 연구일지

오랜만에 다시 블로그를 시작하려고 합니다. 얼마 전 혼자 유럽여행을 다녀왔습니다.일주일 만에 비행기티켓 끊고 떠난 여행이라 무계획, 즉흥여행 그 자체였죠 ㅎㅎ하지만, 그때 깨달은 몇 가지 점들이 저에게 꽤나 긍정적인 영향을 끼쳤던 것 같습니다. 그중 가장 크게 느낀 점은 제목 그대로입니다. 뷔프 부르기뇽입니다. 프랑스 버간디 지역에서 나오는 레드와인으로 만들어진 비프스튜라고 하네요.사진으로는 커 보이지만 실제로는 굉장히 작습니다. 성인 여성 손바닥 하나 정도의 크기정도 됩니다. 처음에는 크기가 작다고 생각했지만 먹고 나서 생각은 온전히 바뀌었습니다.작지만 알차다..! 알차다라 함은, 제가 먹어본 것 중 가장 부드러웠던 감자와 당근부터, 생각보다 많았고 부드러웠던 고기, 그리고 그것들의 조화가 군더더기 ..

안녕하세요~. 다들 잘 지내고 계신가요? 블로그로 찾아뵙는 것은 오랜만이네요:) 새내기의 개발일지로 시작한 블로그가 어느덧 3년차에 접어들고 있네요:)한동안 바쁘다는 핑계로 포스팅하지 못한 글들이 수두룩한데, 앞으로는 더 열심히 블로그로 정보를 공유하려고 합니다.모르는 점 있으면 댓글 달아주세요 !!   저는 이번 방학에 강화학습 스터디를 개최해서 일주일에 한 번씩 진행하고 있는데, 제가 스터디하면서 정리했던 내용을 같이 공유드립니다. 참고서적으로 사용한 강화학습 책과 책 소개에 대해서는 게시글 제일 아래에 기재해 두었으니 궁금하신 분들은 참고 바랍니다.  자세한 내용은 다음 깃허브 레포에서 확인해 주세요! (Star는 Sense~)https://github.com/Prcnsi/Reinforcement-..

이번 포스트에서는 최신 AI 논문에서 자주 등장하는 Offline Meta-Reinforcement-Learning에 대해 정리해 보았다. 이 Offline Meta-RL을 이해하기 위해서는 Meta-Learning, Online-Offline Learning에 대해서 이해가 필요해서 이를 정리하고, 추가적으로 Offline Meta-RL과 함께 자주 언급되는 Online Self-Supervision에 대해서도 정리해 보았다. 1. Meta-Learning - Meta는 한 단계 더 위에 있는 것을 가리킬 때 사용한다. 예를 들어, meta-data는 데이터에 대한 정보이고, meta 인지는 스스로에 대해 인지하는 것을 뜻한다. 그래서, Meta-Learning은 학습하는 방법을 학습하는 것입니다. 즉..

C++에서 벡터, 스택, 큐는 C++의 모두 STL Library에 들어있으며 각각 ,, 헤더파일을 include해서 사용할 수 있다. 스택과 큐는 벡터를 응용한 개념이고 스택과 큐 둘 다 push()는 원소 추가, pop()은 원소 제거 stack pop(): 제일 뒤의 원소 제거 queue pop(): 제일 앞의 원소 제거 스택은 먼저 들어간게 먼저 나옴 (FIFO, First In First Out) 스택은 top()으로 가장 위에 있는 원소를 출력할 수 있고 큐는 먼저 들어간게 나중에 나오고 (LIFO, Last In First Out) 큐는 front()로 제일 아래에 있는 원소를 출력하고, back()으로 가장 위에(나중에 들어간) 원소를 출력함 대괄호([])를 통해 원소의 접근이 불가능하고 ..