로그파일 내의 중복 라인 제거

IIS의 로그에서 방문한 페이지 목록을 뽑을 일이 생겼다.
중복된 페이지는 제거하고 페이지 목록만을 뽑기 위해,
아래와 같은 과정을 진행하였다.

$ awk '{print $8}' *.log |sort|uniq|grep -v "\.[jpg|gif|css|js]"|grep
"user_mgmt"

결과는 아래와 같이 나왔다.

/user_mgmt/...
/user_mgmt/....
...
...