대답해드리는게 인지상정

개요MDP는 S(state space), A(action space), P(transition probability), R(reward function), $\gamma$ (Discount factor) 묶음이 매 상태마다 Markov property를 가질 때로 정의한다. 어떤 문제를 해결하기 위해 사람이 문제를 정의하는 방법으로 MDP를 통해 S,A,R, $\gamma$ 또는 P 를 정의함으로 복잡한 문제를 해결할 수 있다. MDP의 주요 용어와 Model-based와 Model-free의 차이를 간단하게 알아보자. 주요 용어S : 상태 공간(State space)사람이 정의한 상태들의 집합각 상태는 미래가 과거의 영향을 받지 않기 위해(Markov property) 정의되어야 한다.A : 행동 공간..

안녕하세요. 이전에 외부참조에 대해 간단히 알려드렸었는데요? ##외부참조 사용하는 방법 [Autocad] 외부참조(xref) 사용법캐드로 업무를 하다 보면가장 많이 사용하는 것 중 하나가외부참조(xref)라고 생각합니다. 그럼 외부참조(xref)에 대해한 번 알아보도록 하겠습니다. 외부참조(xref)에 대해 간략히 설명을 해보자zzinkimpitang.tistory.com 오늘은 그 외부참조 도면을 사용할 때 생기는 하나의 해프닝에 대해 소개해드리려고 합니다. 바로 외부참조 도면에 관련해 설정값을 다 수정하고 저장했으나다시 그 도면에 들어가면 모든 설정값이 원상복구가 된 적이 있지 않나요? 그에 대한 해결법을 알려드리겠습니다. 그 명령어는 바로visretain 입니다. visretain 사용법에 대해 간..

캐드로 업무를 하다 보면가장 많이 사용하는 것 중 하나가외부참조(xref)라고 생각합니다. 그럼 외부참조(xref)에 대해한 번 알아보도록 하겠습니다. 외부참조(xref)에 대해 간략히 설명을 해보자면,한마디로현 도면이 아닌 외부에 다른 도면을불러들여 활용하는 것입니다. 저는 보통 토목, 건축 도면을외부참조도면에 넣어불러들여 사용하곤 합니다.(종종 건축물이 바뀌는데그걸 도면파일 하나하나 들어가서 바꾸기엔너무 귀찮으므로..!) 그럼 외부참조를사용하는 법을 알아볼까요?? 외부참조(xref)  1.우선 외부참조 도면을 하나 만들어볼게요.저는 파일명에 xref.000 이런 식으로 따로 기입을 해주는데,각자 기억하는 방법으로 파일명을 만들어주시면 됩니다.저는 간략히 도면 틀을 만들어 주고저장했습니다.  2.그럼 ..

저는 캐드를 주로 사용하는 직종에서 종사하지만가끔 명령어가 생각이 안 나거나궁금할 때가 있더라고요.그래서 종종 캐드 명령어에 대해글을 올려보도록 하겠습니다.여러분 저는 캐드에서중요한 것 중 하나는바로 "레이어"라고 생각합니다. 그중 레이어를 정리할 때,삭제가 안 되는 레이어가 있거나또는 한 번에 레이어를 합치고 싶은 적있지 않나요? 그때 필요한 명령어를 소개해 드리겠습니다.바로,"LAYMRG"입니다. 간단하게 LAYMRG 사용하는 방법을 알려드리겠습니다. 우선 레이어를 이렇게 시작해 보겠습니다.   약품실에 약품탱크를 넣고 싶어탱크 외형도를 넣으려고 합니다. 보통 이런 외형도는레이어 정리가 안 돼있기에,저는 해당 레이어를 전부0 레이어로 바꿔보겠습니다. 우선 외형도를 가져왔을 때 레이어가 추가된 게 보이..

기초 개념Stochastic process는 과거의 모든 상태가 미래에 어떻게 영향을 미치는지 모른다. Markov property는 미래는 오직 현재의 상태만 영향을 받고 과거의 모든 영향을 미치지 않는다는 것이다. 이는 다음과 같이 표현 할 수 있다.$$ P(S_{t+1}= s' | S_t= s) = P(S_{t+1}=s' | S_0 =s_0,S_1=s_1,...S_t= s)$$ Stochastic process에서 나온 예시는 오직 오늘 먹은 음식이 내일 먹을 점심에 영향을 미친다면 Markov property라고 할 수 있다. 또는 과거에 먹은 점심의 영향력이 매우 작아 무시할 수 있다면 Markov property을 유지한다.Markov property를 유지하는 상태를 Markov proces..