programming

cache HTTP cache는 현재 요청을 만족하는 이전 응답을 재사용해 성능을 향상시키는 것을 목표로 한다. cache에 관한 설정은 Cache-Control을 통해서 한다. 캐시의 종류는 2가지가 있다. shared cache는 여러 유저를 위한 캐시로 중개자(보통 프록시)가 캐싱한다. private cache는 한 유저를 위한 캐시로 유저의 프로세스가 캐싱한다.Cache-Control: privateCache-Control: public 신선한 응답의 경우 검증없이도 캐시된 것을 사용할 수 있고 오래된 응답은 검증이 필요하다. Vary요청이 들어오는 URL이 같더라도 응답으로 오는 파일은 다를 수 있다. 콘텐츠 협상이 있는 경우가 그러한데 그럴 때는 Vary 헤더의 값에 있는 헤더와 URL을 결합..

네트워크 전공 수업 때 HTTP 프로토콜을 대충 배웠지만 웹서버를 만들어보면서 느낀 것이 해당 프로토콜을 생각보다도 더 겉핥기 식으로 배웠다고 느꼈다. 그래서 이번에 제대로 공부해볼려고 한다. 세세한 구현까지 살펴보진 않을 것이고 각 프로토콜의 핵심적인 아이디어 중 빠른 속도와 동시성을 더 확보하기 위해서 추가된 기술을 위주로 보겠다. 공부해야할 거리를 GPT한테 물어봐서 필수적인데 다루지 못한 내용이 있을 수도 있다. HTTP는 분산형 협업 hypertext 정보 시스템을 위한 무상태 애플리케이션 레벨 프로토콜이다. 기본적인 프로토콜의 메시지 형태는 넘어가겠다.HTTP/1.1Keep alive(persistent connections) 기존 방식은 새로운 연결을 만드는데 시간이 오래 걸리고 TCP 연결..

c++로 webserver를 만들다가 해당 개념을 알게 되었다. HTTP/1.1 프로토콜로 구현을 하고 있는데 thread poll을 사용 시 하나의 문제가 발생한다. connection: keep-alive로 둘 때 소켓을 그대로 유지 시켜나야 한다. connection은 현재 TCP 연결을 유지 할지 말지 결정하는 HTTP 헤더로 해당 헤더를 keep-alive로 셋팅할 때 클라이언트와 연결된 소켓을 유지해야 한다. 그렇다면 쓰레드 중 하나가 계속 기달려야 한다. 다만 생각을 해보면 소켓이 유지되어야 하는 것이지 쓰레드는 다른 일을 해도 된다. 그렇다면 그 소켓에 대한 정보를 어딘가에 저장을 하고 쓰레드를 하나 더 생성해 그 쓰레드가 요청이 온 소켓이 있는지 확인하고 있다면 쓰레드풀에 보내서 해당 요..

공모전을 나간 후기다. 예선 탈락을 해버렸는데 아마 주제가 딱히 안 좋았던 것 같다. 상금이 커서 기대하고 있었는데 다음에는 좀 더 좋은 주제를 생각해야 할 것 같다. 프로젝트 링크다.https://github.com/100050/kb_ai_challenge_frontendhttps://github.com/100050/kb_ai_challenge_backend 갑자기 친구가 16일 남았는데 공모전을 나가자고 했다. 2명에서 다급하게 주제를 '실거래 데이터와 개인 재무정보를 결합한 전월세 후보 비교 AI 에이전트'로 정하고 기획을 하고 나니 개발을 할 시간이 9일인가 남았었다. 개발할 사람은 나 뿐이다. 그 때문에 선택의 여지도 없이 바이브코딩하듯이 백엔드와 프론트앤드를 만들었어야 했다. 일반 프로젝트..

환경 설정qemu 설정sudo apt install ninja-build libc6-dev-i386cd ~/Downloads/AFLplusplus/qemu_mode/pip3 install mesonexport PATH="$HOME/.local/bin:$PATH"CPU_TARGET=i386 ./build_qemu_support.shcd ../sudo make installafl-fuzz가 최신버전인데다 현재 우분투가 구 버전이어서 새롭게 설정해야 했다.기존 방법과 다른 점은 meson이 필요하고 make install을 AFLplusplus에서 한 번만 실행해주면 된다.에러 메시지가 뜨는데 무시해도 상관없었다.샘플 데이터데이터의 경우 github에 보니까 https://github.com/pdf-assoc..

환경 설정환경설정을 해줘야 한다.공식 페이지를 보니까 아래와 같은 패키지를 설치해야 한다.sudo apt-get install git g++ make libtool automake autopoint pkg-config flex bison lua5.2그리고 configure를 실행해보면 필요한 라이브러리가 없다고 하는데 -dev 버전으로 설치해주면 된다.또한 컴파일하다보면 많은 에러가 발생하는데 afl-fuzz를 최신버전으로 설치했더니 문제가 많았다.gemini와 함께 고쳤다.샘플 데이터입력으로 Fuzzing101에서 주는 .wmv 파일을 사용한다.사전사전으로 Fuzzing101에서 주는 것을 사용한다.asf 사전을 주는데 입력으로 wmv 주길래 조금 찾아보니 형식은 같은데 쓰이는 곳이 다르다고 한다.퍼징..

환경 설정rm ./install/lib/gimp/2.0/plug-ins/*빌드한 뒤에 위의 명령어로 플러그인을 지우고 퍼징을 한다.샘플 데이터Exercise 5/SampleInput.xcf를 사용하라고 한다.사전xml의 문법을 저장해놓은 파일을 퍼저에 준다. 이러면 탐색을 더 잘한다고 한다.https://github.com/AFLplusplus/AFLplusplus/blob/stable/dictionaries/xml.dict위에 있는 사전을 사용한다.지속 모드이번엔 지속 모드를 사용하라고 한다.단일 fork에서 여러 번 실행을 하도록 해서 실행마다 fork를 할 때보다 속도가 빨라진다.app.c에서 file_open_from_command_line 실행하는 부분을 아래와 같이 바꾸었다. ..

환경 설정샘플 데이터Exercise 5/SampleInput.xml를 사용하라고 한다.샘플로 실행해보기$HOME/fuzzing_libxml2/install/bin/xmllint ./pi.xml아래와 같이 나온다.사전xml의 문법을 저장해놓은 파일을 퍼저에 준다. 이러면 탐색을 더 잘한다고 한다.https://github.com/AFLplusplus/AFLplusplus/blob/stable/dictionaries/xml.dict위에 있는 사전을 사용한다.퍼징저번이랑 같이 ASAN을 사용한다.CVE-2017-9048을 찾아야 하고 xmlSnprintfElementContent 함수에서 스택에서 오버플로우가 발생한다고 한다.10시간은 돌린 것 같은데 나오지 않았다.구글링해서 찾았다.s=$(printf "%-..

환경 설정샘플 데이터libtiff 안에 test 폴더에 샘플 데이터가 있다.샘플로 실행해보기$HOME/fuzzing_tcpdump/install/bin/tiffinfo -D -j -c -r -s -w ./test/images/logluv-3c-16b.tiff코드 커버리지를 향상시키기 위해 모든 플래그를 활성화한다.아래와 같이 나온다.TIFF Directory at offset 0x10 (16) Image Width: 1 Image Length: 1 Bits/Sample: 16 Sample Format: signed integer Compression Scheme: SGILog Photometric Interpretation: CIE Log2(L) (u',v') Samples/Pixel: 3 ..

환경 설정이거 github 가보니까 버전을 4.9.1로 해야할 것 같아서 4.9.1로 했다.libpcap도 따로 깔아줘야 한다.configure: error: neither %llx nor %Lx nor %qx worked on a 64-bit integer위와 같은 에러가 자꾸 뜨던데 tcpdump의 ./configure를 실행할 때 아래 flag를 추가하니 되었다.CFLAGS="-Wno-error=implicit-function-declaration -Wno-error=implicit-int"샘플 데이터tcpdump 안에 test 폴더에 샘플 데이터가 있다.샘플로 실행해보기$HOME/fuzzing_tcpdump/install/sbin/tcpdump -vvvvXX -ee -nn -r ./tests/ge..