신입부터의 기록

Release 프로그램의 비정상 종료시 덤프를 무조건 남기기

MAKGA — Thu, 20 Jun 2024 20:25:46 +0900

가끔 Release 모드로 빌드한 프로그램이 비정상 종료될 때 덤프가 안남는 경우가 있다.

그럴 땐 마이크로소프트에서 만든 해당 툴을 사용해 프로세스를 감시하면, 비정상 종료시 덤프가 발생한다.

다운로드

https://learn.microsoft.com/ko-kr/sysinternals/downloads/procdump

실행

procdump.exe -mp -w -e -h -64 ProcessName.exe D:\Folder\

-mp: mini dump plus (full dump는 오래 걸림)

-w: 대상 프로세스가 실행될 때까지 대기

-e: 프로세스 내에서 처리되지 않는 exception 발생시 dump

-h: 응답 없음 발생시 dump

-64: 64비트 dump

리눅스 자동 업데이트 확인 및 종료

MAKGA — Wed, 19 Jun 2024 18:23:08 +0900

AWS에서 실행중이던 MYSQL 서비스가 종료되어 원인을 확인한 결과

apt-daily-upgrade 서비스가 활성화 되어있으며 자동으로 업데이트가 진행됐다.

#apt-daily-upgrade 동작 확인
systemctl status apt-daily-upgrae.timer

# apt-daily-upgrade 종료
systemctl stop apt-daily-upgrade.timer
systemctl disable apt-daily-upgrade.timer
systemctl daemon-reload

ibd 파일로 데이터 복구하기

MAKGA — Sun, 28 Apr 2024 13:43:44 +0900

mysql 에서 저장된 데이터들은 테이블이름.ibd 파일로 저장된다.

해당 파일로 다른 곳에서의 복구를 위해선 해당 파일과 테이블의 스키마가 필요하다.

t_table 이란 이름으로 예를 들어보자.

1. 복구할 DB에 테이블 스키마로 빈 테이블 생성

CREATE TABLE t_table
[구조]....

2. 빈 테이블의 데이터 파일 연결 해제

ALTER TABLE t_table DISCARD TABLESPACE;
FLUSH PRIVILEGES;

3. 빈 테이블 ibd 위치에 내가 복구하려는 ibd 파일 복사 및 사용 권한 부여

cp /home/myaccount/t_table.ibd /var/lib/mysql/databasename/
chown mysql:mysql t_table.ibd

4. 테이블에 데이터 파일 연결

ALTER TABLE t_table IMPORT TABLESPACE;

이후 SELECT 문으로 정상 연결 되었는지 확인.

Unity 1개 프로젝트를 2개의 에디터 열기

MAKGA — Tue, 6 Feb 2024 10:11:19 +0900

유니티 프로젝트가 있는 프로젝트에서 신규 경로로 심볼릭 링크를 만들어준다.

mklink 신규경로 원본경로

mklink D:UnityProject2\Asset D:UnityProject\Asset

mklink D:UnityProject2\Packages D:UnityProject\ Packages

mklink D:UnityProject2\ProjectSetting D:UnityProject\ProjectSetting

타입에 따른 템플릿 오버로딩

MAKGA — Wed, 10 Jan 2024 17:50:37 +0900

	template<typename T>
	std::enable_if_t<std::is_same_v<T, const char*> || std::is_same_v<T, const char* const>, void>
	AddField(const char* _key, const T& _value)
	{
		Key(_key);
		String(_value);
	}

	template<typename T>
	std::enable_if_t<std::is_same_v<T, std::string>, void>
	AddField(const char* _key, const T& _value)
	{
		Key(_key);
		String(_value.c_str());
	}

	template<typename T>
	std::enable_if_t<std::is_same_v<T, bool>, void>
	AddField(const char* _key, const T& _value)
	{
		Key(_key);
		Bool(_value);
	}

	template<typename T>
	std::enable_if_t<std::is_same_v<T, int8_t> || std::is_same_v<T, int16_t> || std::is_same_v<T, int32_t>, void>
	AddField(const char* _key, const T& _value)
	{
		Key(_key);
		Int(_value);
	}

	template<typename T>
	std::enable_if_t<std::is_same_v<T, uint8_t> || std::is_same_v<T, uint16_t> || std::is_same_v<T, uint32_t>, void>
		AddField(const char* _key, const T& _value)
	{
		Key(_key);
		Uint(_value);
	}

	template<typename T>
	std::enable_if_t<std::is_same_v<T, int64_t>, void>
	AddField(const char* _key, const T& _value)
	{
		Key(_key);
		Int64(_value);
	}

	template<typename T>
	std::enable_if_t<std::is_same_v<T, uint64_t>, void>
	AddField(const char* _key, const T& _value)
	{
		Key(_key);
		Uint64(_value);
	}

	template<typename T>
	std::enable_if_t<std::is_floating_point_v<T>, void>
	AddField(const char* _key, const T& _value)
	{
		Key(_key);
		Double(_value);
	}

	void AddFields() {}

	template<typename Key, typename Value, typename... Rest>
	void AddFields(Key&& _key, const Value& _value, const Rest&... _rest)
	{
		AddField(_key, _value);
		AddFields(_rest...);
	}

Elastic search에 C++로 데이터 입력시에 발생한 문제 1

MAKGA — Fri, 5 Jan 2024 09:17:16 +0900

Elastic search에 C++ http client로 데이터를 밀어넣었을 때,

첫 번째 Post는 정상이였고, 그 이후부터 다음과 같은 에러가 발생했다.

{
  "error": {
    "root_cause": [
      {
        "type": "content_type_header_exception",
        "reason": "java.lang.IllegalArgumentException: only one Content-Type header should be provided"
      }
    ],
    "type": "content_type_header_exception",
    "reason": "java.lang.IllegalArgumentException: only one Content-Type header should be provided",
    "caused_by": {
      "type": "illegal_argument_exception",
      "reason": "only one Content-Type header should be provided"
    }
  },
  "status": 400
}

헤더를 한번만 제공해야된다는 얘기인데 내가

HTTPClient::HeadersMap requestHeaders.insert({ "Content-Type", "application/json" });
httpclient.Post(std::format("http://{0}:{1}/{2}/_doc", m_ip, m_port, "document"), RequestHeaders, _data, _length, response);

외에 데이터를 추가로 넣은 줄 알았다.

근데 Post 요청마다 담은 헤더가 문제였다.

Post를 한번 보냈으면 다음부터는

if (m_isFirst)
{
    HTTPClient::HeadersMap requestHeaders;
    requestHeaders.insert({ "Content-Type", "application/json" });
    HTTPClient::HttpResponse response;
    httpclient.Post(std::format("http://{0}:{1}/{2}/_doc", m_ip, m_port, "document"), RequestHeaders, _data, _length, response);
    m_isFirst = false;
}
else
{
    HTTPClient::HeadersMap requestHeaders;
    HTTPClient::HttpResponse response;
    httpclient.Post(std::format("http://{0}:{1}/{2}/_doc", m_ip, m_port, "document"), RequestHeaders, _data, _length, response);
}

이렇게 보내야 에러가 안나고 정상적으로 데이터가 추가된다.

Redis 다중 설치하기

MAKGA — Tue, 28 Nov 2023 10:21:04 +0900

1. Redis 설치하기 (최신버전용)

sudo apt-get update
sudo add-apt-repository ppa:redislabs/redis
sudo apt update
sudo apt install -y redis-server

2. Redis 설정 파일 복사

sudo cp /etc/redis/redis.conf /etc/redis/redis-2.conf (중복X)

3. 복사한 conf 파일 수정

sudo vim /etc/redis/redis-2.conf (중복X)

// 중복 방지용
port 6379  => port 6380 (중복X)
pidfile /var/run/redis/redis-server.pid  => /var/run/redis/redis-server-2.pid (중복X)
logfile /var/log/redis/redis-server.log  => /var/run/redis/redis-server-2.pid (중복X)
dir /var/lib/redis  => dir /var/lib/redis-2 (중복X)


// 기타 옵션 수정
bind 127.0.0.1 ::1  =>  # bind 127.0.0.1 ::1
protected-mode yes  => protected-mode no
databases 16  => databases 1 (기본 데이터베이스 사용)
stop-writes-on-bgsave-error yes => stop-writes-on-bgsave-error no

4. Redis Service 파일 복사

sudo cp /lib/systemd/system/redis-server.service /lib/systemd/system/redis-2.service (중복X)

5. service 파일 수정

sudo vim /lib/systemd/system/redis-2.service (중복X)

ExecStart=/usr/bin/redis-server /etc/redis/redis-2.conf --supervised systemd --daemonize no (중복X)
PIDFile=/run/redis/redis-server-2.pid (중복X)
ReadWriteDirectories=/var/run/redis
Alias=redis-2.service (중복X)

6. 디렉토리 권한 부여

sudo mkdir /var/lib/redis-2 (중복X)
	
sudo chown -R redis:redis /var/lib/redis-2 (중복X)

sudo chmod 750 /var/lib/redis-2 (중복X)

7. Redis 서비스 등록

sudo systemctl enable redis-2 (중복X)
sudo service redis-2 start (중복X)

8. 포트 오픈

sudo ufw allow out 6380/tcp
sudo ufw allow in 6380/tcp

2개가 아니라 n개까지 하고싶다면 (중복X) 표시가 되어있는 넘버링만 증가시켜 띄우면 된다.

용어 정리

MAKGA — Thu, 12 Oct 2023 23:26:50 +0900

ANN

인공 신경망(Artificial Neural Network)

CNN

합성곱 신경망(Convolutional Neural Network)

UTF-8 문자열 관리

MAKGA — Thu, 12 Oct 2023 23:23:02 +0900

C++20부터 char8_t, u8string등 UTF-8을 지원하기 위한 타입이 추가되었으나, 다른 라이브러리와의 호환등을 위해 개인적으론 아직 char와 string을 주로 사용하고 있다.

UTF-8에서 한글은 3바이트를 사용하는데, UTF-8 문자 "가" 는 각 바이트에 234, 176, 128로 저장된다.

유니코드표에서 "가"를 찾아보면 U+AC00 이라고 되어있고, AC00는 2바이트(172, 0) 값인데, 저렇게 저장되는 이유는 각 바이트는 다음 그림과 같은 기본 규칙이 있기 때문이다.

표에 의하면 기본적으로 3바이트를 쓰는 한글은 기본 1110xxxx 10xxxxxx 10xxxxxx 값이 정해져 있고, 유니코드의 HEX값은 x에 치환되는 값만 표에 적어둔 것이다.

0xAC00을 0b로 변경하면 1010 110000 000000 인데 해당 비트의 갯수와 위 x의 갯수가 동일한 것을 볼 수 있다.

두 비트 값을 자릿수에 맞춰 OR하면 11101010 10110000 10000000가 나오는데, 각각 8비트씩 10진수로 변경해보면 아까 봤던 234, 176, 128이 되는 것이다.

그럼 앞으로 문자열을 유니코드 code point 값과 쉽게 비교하기 위해 code point로 변환하는 방법을 알아보자.

앞의 "가" 에 대한 설명을 역순으로 계산해보자

A = 234; // 11101010

A = A & 0xF (하위 4개 비트만 가져오기)

B = 176; //10110000

B = B & 0x3F (하위 6개 비트만 가져오기)

C = 128; //10000000

C = C & 0x3F (하위 6개 비트만 가져오기)

CodePoint = (A << 12) | (B << 6) | C = AC00;

으로 계산할 수 있다.

유니코드 블록 목록

https://symbl.cc/kr/unicode/blocks/

ddd

MAKGA — Wed, 28 Jun 2023 12:23:49 +0900

struct stst
{
	std::vector<int> vec;
};

std::vector<stst> vec;

template<typename... Args>
stst* findFunc(Args... args)
{
	auto iter = std::find_if(vec.begin(), vec.end(), [args = std::initializer_list<int>{ args... }](const stst& _st) {
		std::size_t argSize = args.size();

		if (_st.vec.size() < argSize)
		{
			return false;
		}

		for (std::size_t i = 0; i < argSize; ++i)
		{
			if (_st.vec[i] != *(args.begin() + i)) {
				return false;
			}
		}
		
		return true;
	});

	if (vec.end() == iter)
	{
		return nullptr;
	}

	return &(*iter);
}


int main()
{
	stst s1, s2, s3;
	s1.vec = { 0, 1, 2, 3 };
	s2.vec = { 4, 5, 6 };
	s3.vec = { 1, 2, 3 };

	vec.push_back(s1);
	vec.push_back(s2);
	vec.push_back(s3);

	auto ptr = findFunc(0, 1, 2, 3);
	if (nullptr != ptr)
	{
		for (auto iter : ptr->vec)
		{
			std::cout << iter << std::endl;
		}
	}

    return 0;
}