파워노트

범위 검색 비교 연산자 보다는 BETWEEN ~ AND 사용하기

파워킴 — Wed, 16 Nov 2022 21:32:11 +0900

BETWEEN

BETWEEN연산자를 사용하면 테스트할 범위를 지정할 수 있습니다 .
연산자를 사용하여 BETWEEN 문에서 반환된 행에 대한 검색 조건을 구성하면 SELECT값이 지정된 범위에 있는 행만 반환됩니다.
다음은 BETWEEN 연산자 의 구문을 보여줍니다 .

expression [ NOT ] BETWEEN low AND high

해당구문은 아래와 같음을 의미 한다.

value >= low AND value <= high

between 예제 - 사이 숫자값

[ 상품 테이블 ]

다음 구문은 비용이 500에서 600 사이인 제품을 반환합니다.

SELECT
    product_name,
    standard_cost
FROM
    products
WHERE
    standard_cost BETWEEN 500 AND 600
ORDER BY
    standard_cost;

standard_cost 열이 500~600 범위를 비교 하여 해당범위 제품만을 반환했습니다.

between 예제 - 사이 숫자값이 아닌경우

다음 구문은 비용이 500에서 600 사이인 제품이 아닌경우만을 반환 합니다 .

SELECT
    product_name,
    standard_cost
FROM
    products
WHERE
    standard_cost NOT BETWEEN 500 AND 600
ORDER BY
    product_name;

standard_cost 열이 500~600 가 아닌 제품을 반환

between 예제 - 날짜값 비교 ( X )

[ 주문 테이블 ]

주문일이 2016-12-01 과 2016-12-31 사이의 주문값만을 반환 합니다 .

SELECT
    order_id,
    customer_id,
    status,
    order_date
FROM
    orders
WHERE
     order_date BETWEEN TO_DATE( '2016-12-01', 'YYYY-MM-DD' ) AND  TO_DATE( '2016-12-31', 'YYYY-MM-DD' )
ORDER BY
    order_date;

결과는 다음과 같습니다.

between 예제 - 날짜값 비교 ( 시간값 포함 )

날짜 비교시에는 주의 사항이 있다 .
2016-12-10 과 2016-12-02 날짜로 비교 조회시 2016-12-02 일 날짜의 정보를 반환하지 못한다 .

 SELECT
    order_id,
    customer_id,
    status,
    order_date
FROM
    orders
WHERE
    order_date BETWEEN TO_DATE( '2016-12-01', 'YYYY-MM-DD' ) AND  TO_DATE( '2016-12-02', 'YYYY-MM-DD' )
ORDER BY
    order_date;

아래와 같이 2016-12-02일 날짜가 반환되지 않았다.. 의도 하지 않은 결과이다.

 SELECT
    order_id,
    customer_id,
    status,
    order_date
FROM
    orders
WHERE
    order_date BETWEEN TO_DATE( '2016-12-01', 'YYYY-MM-DD' ) 
          AND  TO_DATE( '2016-12-02', 'YYYY-MM-DD' ) + 0.99999
ORDER BY
    order_date;

2016-12-02 날짜를 포함한 내용을 처리 하고 싶다면 해당 날짜의 23:59:59 초 나타내야 한다.
또는 0.99999 를 더하여 2016-12-02 23:59:59 초가 되도록 한다.\
날짜 비교의 경우 DATE type의 경우 기본적으로 시분초를 포함하는 데이터이므로
2016-12-01 00:00:00 ~ 2016-12-02:00:00:00 의 데이터를 처리한다. 그러므로 2016-12-02 일의 데이터를 포함시키고자 한다면 2016-12-02 23:59:59 초의 데이터와 비교 처리 해야 한다.

Python 개발 환경 구성

파워킴 — Fri, 28 Oct 2022 22:26:36 +0900

ubuntu 환경에서 정리

설치

sudo apt update
sudo apt install python3
sudo apt install python3-venv
sudo apt install python3-pip

가상환경 사용

mkdir hello
cd hello
python3 -m venv .myenv
source ./.myenv/bin/activate [가상환경 활성화 ]

Windows에서는 ./.myenv/Scripts/activate

deactivate [가상환경 비활성화 ]

가상환경 진행 ( 자주 사용하는 모듈 설치 )

sudo pip install bs4
sudo pip install requests
sudo pip install selenium

개발 Dependency 저장

pip freeze > pip-requirements.txt
vi pip-requirements.txt

저장된 Dependency 설치

pip install pip-requirements.txt

[ 오라클 팁 ] 콤마로 나열된 배열 스트링에서 단어 찾기. feature REGEXP_LIKE

파워킴 — Fri, 28 Oct 2022 21:14:03 +0900

REGEXP_LIKE 를 사용한 정규화 식으로 데이터 찾기

콤마로 나열된 배열 스트링에서 단어 찾기.

[ 테스트 쿼리 ]

WITH NAMET AS
(
    SELECT '홍길동, 이길동, 김동길' NAME FROM DUAL
    UNION
    SELECT '홍길1, 이동길, 김김동' NAME FROM DUAL
    UNION
    SELECT '홍길2, 이동길3, 김김동' NAME FROM DUAL
)



SELECT * FROM NAMET
WHERE REGEXP_LIKE (NAME, '(^|,) 이동길($|,)')
;

REGEXP_LIKE (NAME, '(^|,) 이동길($|,)')

(^|,) : 처음이거나 ',' 콤마인지

($|,) : 마지막이 거나 , 인지

[쿼리 결과 ]

[ 오라클 팁 ] 오라클 테이블 복사하기.

파워킴 — Mon, 26 Sep 2022 21:26:58 +0900

1. 테이블 복사 스키마 (데이터도 복사O)

CREATE TABLE [NEW_TABLE] AS

SELECT * FROM [OLD_TABLE] [WHERE 절]

2. 테이블 구조만 복사

CREATE TABLE [NEW_TABLE] AS

SELECT * FROM [OLD_TABLE] WHERE 1=2 ( where절은 true가 아닌값을 조건으로 처리 )

3. 테이블은 이미 생성되어 있고 데이터만 복사 (테이블 구조가 동일한 경우)

INSERT INTO [NEW_TABLE] SELECT * FROM [OLD_TABLE] [WHERE 절]

4. 테이블은 이미 생성되어 있고 데이터만 복사 (테이블 구조가 다른 경우)

INSERT INTO [NEW_TABLE] (ID, NAME, TEL) SELECT ID, NAME, TEL FROM [OLD_TABLE]

oracle 테이블 정보, 컬럼 정보, 인덱스 정보, 코멘트 정보, 시노님 정보 조회

파워킴 — Mon, 26 Sep 2022 21:20:43 +0900

1. 접두사 종류 3가지 : 권한 및 조회 범위에 따라 사용
- DBA/ALL/USER

2. Object 조회 : 오브젝트 조회
SELECT *
FROM ALL_OBJECTS
WHERE OBJECT_NAME LIKE '명'

3. 테이블 조회
SELECT *
FROM ALL_TABLES
WHERE TABLE_NAME LIKE '명'

4. Synonym 조회
SELECT *
FROM ALL_SYNONYMS
WHERE SYNONYM_NAME = '명'

5. 인덱스 정보 조회
SELECT *
   FROM ALL_IND_COLUMNS
WHERE TABLE_NAME = '테이블명'

6. 컬럼 정보 조회
SELECT *
   FROM ALL_TAB_COLUMNS
WHERE TABLE_NAME = '테이블명'

7. 테이블 COMMENT 조회
  SELECT *
    FROM ALL_TAB_COMMENTS
  WHERE TABLE_NAME = '테이블명'

8. 컬럼(COLUMN) COMMENT 조회
  SELECT *
    FROM ALL_COL_COMMENTS
  WHERE TABLE_NAME = '테이블명'

[TIP] Oracle CHAR(8) 은 고정자리수 .. '0' 이 아니라 '0 ' 이였다.

파워킴 — Thu, 17 Mar 2022 10:13:46 +0900

[참고] https://kasckasc.tistory.com/entry/Oracle-CHAR-VARCHAR-VARCHAR2-%EC%B0%A8%EC%9D%B4

* CHAR와 VARCHAR (VARCHAR2)의 비교

문자의 경우 CHAR와 VARCHAR의 차이는 저장 영역과 문자열의 비교 방법이다.

VARCHAR 유형은 가변 길이이므로 필요한 영역은 실제 데이터 크기뿐이다. 그렇기 때문에 길이가 다양한 컬럼과, 정의된 길이와 실제 데이터 길이에 차이가 있는 컬럼에 적합하다.

저장 측면에서도 CHAR 유형보다 작은 영역에 저장할 수 있으므로 장점이 있다.

비교 방법에서도 차이가 있다.

CHAR 에서는 문자열을 비교할 때 공백을 채워서 비교하는 방법을 사용한다. CHAR(8) 이고 'AA'가 저장되어 있다면, 'AA' 뒤에 공백 6자리를 붙여 8자리로 비교하는 것이다.

따라서 'AA' = 'AA ' 은 실제로 'AA ' = 'AA ' 가 되어 같다는 결과가 나온다.

반면에 VARCHAR 에서는 공백도 하나의 문자로 취급하므로 끝에 공백이 들어가면 다른 문자로 판단한다.

같은 예로 들면 'AA' != 'AA ' 로 공백이 있어 서로 다른 문자로 판단한다.

따라서 이름, 주소 등의 길이가 변할 수 있는 값은 VARCHAR를 사용하고,

사번, 주민등록번호와 같이 길이가 일정한 데이터는 CHAR를 사용하는게 좋다.

더불어 오라클에서는 VARCHAR는 추후 별도의 데이터유형으로 사용할 예정이기에

VARCHAR2를 사용하는 것을 권장하고 있다.

tomcat 성능 향상. maxKeepAliveRequests="1"

파워킴 — Fri, 11 Mar 2022 14:34:33 +0900

# 톰캣 튜닝 및 성능 향상과 관련. ( server.xml )

https://bcho.tistory.com/788
조대협님의 글을 참고 한다.

<Connector URIEncoding="utf-8" port="8080"
protocol="HTTP/1.1"
connectionTimeout="3000"
redirectPort="8443"
maxThreads="1000"
maxKeepAliveRequests="1"/>

maxKeepAliveRequests="1" : Kepp Alive를 사용하지 않기위한 설정. 기본값은 100

@Async @Scheduler ThreadPool 생성 및 사용.

파워킴 — Tue, 8 Mar 2022 00:54:07 +0900

* Scheduler 및 비동기 처리 에 대해 Thread pool 생성 설정 및 사용을 해보자 .

# xml 설정.

[ servlet-context.xml ]

<task:executor id="AsyncExecutor" pool-size="10-100" queue-capacity="50" />
<task:scheduler id="SchedulerExecutor" pool-size="5" />
<!-- @Async and @Scheduler 설정 executor 는 기본으로 사용할 executor 설정. 설정이 없을때는 @Async-->
<task:annotation-driven executor="AsyncExecutor" scheduler="SchedulerExecutor" />

task:execute : Async 비동기 처리시에 사용할 pool 설정.
task:scheduler : scheduler 에서 사용할 pool 설정
task:annotation-driven : @Async @Scheduler 사용가능하게 하며, 기본 async executor 및 scheduler 를 설정한다.

** (주의 사항 ) executor 가 설정되어 있지 않은경우 기본적으로 @Async 와 같이 (id 지정 사용없이 )를 사용하면 SimpleAsyncTaskExecutor를 이용하게 되어 쓰레드제한 없이 무한으로 처리된다.
** 따라서 @Async("AsyncExecutor") 와 같이 명시적으로 사용하는것이 깔끔함.

[ * Scheduler - class 내에서의 사용 ]

@Scheduled(cron = "10 * * * * *")
public void scheldulerlog() {
    log.info("############# Scheduler ############## [[ " + Thread.currentThread().getName());
    try {
        Thread.sleep(2000);
    } catch (InterruptedException e) {
        e.printStackTrace();
    }
    log.info("############# Scheduler ############## ]] " + Thread.currentThread().getName());
}

[ scheduled cron 표현식 ]

( cron = 10 * * * * * )
          1 2 3 4 5 6
1 : 초(0-59)
2 : 분(0-59)
3 : 시간(0-23)
4 : 일 (1-31)
5 : 월 (1-12)
6 : 요일 (0-7) 0과 7은 일요일이며, 1부터월요일 6이 토요일
* : 모든조건
? : 설정 값 없을 때 (날짜와 요일에서만 사용가능 )
- : 범위지정
, : 여러값 지정
/ : 초기값과 증가치 설정

[ * Async - class 내에서의 사용 ]

제약사항 :
1. public 한 메소드에만 써야한다.
2. 같은 클레스 안에서 @Async를 적용한 메소드를 사용하면 작동하지 않는다.
3. return Type이 void이거나 Future객체를 사용해야 한다.

@Async("AsyncExecutor")
public void backgroundJob() {
    log.info("############# Async ############## [[" + Thread.currentThread().getName());

    try {
        Thread.sleep(5000);
    } catch (InterruptedException e) {
        e.printStackTrace();
    }

    log.info("############# Async ############## ]]" + Thread.currentThread().getName());
}

spring legacy project 에서 log4j2.xml 을 profile로 관리 할때

파워킴 — Fri, 4 Mar 2022 19:41:01 +0900

* spring 에서 logging 시스템은 중요한 부분을 차지 한다.

* 경우에 따라서는 운영환경별로 분리 하기도 하고 외부 경로의 설정값을 이용하기도 한다.

# log4j2.xml 의 profile별 관리

나의 경우 테스트 환경과 운영 서버 환경의 logfile 저장 경로가 달라 profile 별로 설정을 고려 해야 했다
예를 들면
- 나의 로컬 개발 환경은 로그 저장경로가 /svc/powernote,
- 운영 서버의 로그 저장경로는 /home/opc/logs

<?xml version="1.0" encoding="UTF-8"?>
<Configuration xmlns="http://logging.apache.org/log4j/2.0/config">
    <Properties>
        <SystemPropertyArbiter propertyName="spring.profiles.active" propertyValue="bhkim">
            <Property name="logPath">/svc/powernote</Property> 
        </SystemPropertyArbiter>
        <SystemPropertyArbiter propertyName="spring.profiles.active" propertyValue="prod">
            <Property name="logPath">/home/svc/logs</Property> 
        </SystemPropertyArbiter>
        <Property name="layoutPattern">
                %style{%d{yyyy/MM/dd HH:mm:ss,SSS}}{cyan} %highlight{[%-5p]}{FATAL=bg_red, ERROR=red,
                INFO=green, DEBUG=blue} [%C{1.}] %style{[%t]}{yellow}- %m%n
        </Property>
    </Properties>
    <Appenders>
         <File name="file" fileName="${logPath}/sample.log" append="false">
            <PatternLayout pattern="${layoutPattern}" />
         </File>
    </Appenders>
 ...
 </Configuration>

- SystemPropertyArbiter 를 통해 설정 할 수 있다.

- propertyName 는 properties 의 Key 값 이다.

- propertyValue 는 properties 의 값에 해당한다.

# log4j2-xxx.xml 의 별도 관리 파일 ( 파일명 변경 및 위치 변경 )

서버 운영 환경에서의 별도로 로그를 꾸준히 설정을 변경하고 관리가 필요하여 외부 파일을 설정하는경우가 있다.
이때 유용할 듯 하다.
-Dlog4j.configurationFile 옵션 셜정을 통해 해결.

* 톰캣 실행시 catalina.sh 파일에 해당 옵션을 주어 실행하면 해당 로그파일을 설정할 수 있다.

JAVA_OPTS="$JAVA_OPTS -Dlog4j.configurationFile=/home/svc/config/log4j2-prod.xml"

# 참고적으로 ~~

web.xml 에 아래와 같은 설정은 log4j2 에서는 통하지 않는것을 알고 있으며 테스트 시에도 동작 하지 않는다.

<context-param>
   <param-name>log4jConfigLocation</param-name>
   <param-value>classpath:log4j-${spring.profiles.active}.xml</param-value>
</context-param>
<listener>
   <listener-class>org.springframework.web.util.Log4jConfigListener</listener-class>
</listener>

또한 spring 4.2.1 에서는 log4j 1.x가 EOL 로 Deprecated Class로 관리 되고 있다.

그거므로 되도록이면 log4j2 를 사용하고 경로 설정및 파일명 변경에 대해서는 catalina, 또는 java 실행 옵션으로 지정하는것이 좋을것 같다.

Java 실행변수 -Dlog4j.configuration를 통한 log4j2.xml 위치 변경이 가능 합니다.
또는 catarina 옵션 설정으로 set CATALINA_OPTS=-Dlog4j.configuration=log4j.xml 가능 합니다.
[참고 ] : https://www.egovframe.go.kr/home/qainfo/qainfoRead.do?menuNo=69&qaId=QA_00000000000013124

spring properties 에 대해서...

파워킴 — Fri, 4 Mar 2022 19:24:07 +0900

* 대충 정리 하자면 spring 3.1 정도에서 좀 변화가 있었던거 같다.

# 일반적인 xml 설정.

Spring 3.1이전에는<context:property-placeholder>를 정의하면 PropertyPlaceholderConfigurer를 사용하였다. Environment를 이용해 해당값을 가져올수 있다.
물론 spring 3.1 이후에도 사용가능 하다.

<context:property-placeholder location="/WEB-INF/config/jdbc-${spring.profiles.active}.properties"  file-encoding="UTF-8" />

# property의 사용

[ application.properties ]

app.message.hello="i am a boy"

[ class ]

@Value("${app.message.hello}")
String hello;

[ class 내에서의 사용 ]

log.info("hello : {}", hello);

# spring 3.1 이후 변화

spring 3.1 이후 부터는 PropertySourcesPlaceholderConfigurer를 내부에서 사용하고 있으며 ${...} 값을 찾지 못하면 Environment에서 Properties를 가져온다. 그러나 Environment 변수에는 직접적으로 setting할수는 없어 Environment 변수 setting이 필요한 경우에는 PropertySource를 통해 사용자정의 구현이 필요 하다.

# PropertySourcesPlaceholderConfigurer xml 설정.

<beans:bean id="propertyConfigurer" class="org.springframework.context.support.PropertySourcesPlaceholderConfigurer">
   <!-- 아래 properties 목록에서 없는 properties는 무시 -->
   <beans:property name="ignoreResourceNotFound" value="true" />
       <!-- 만약 설정 요소가 존재하지 않아도 서버를 멈추지 않고 정상적으로 작동될 수 있도록 해줍니다. -->
   <beans:property name="ignoreUnresolvablePlaceholders" value="true" />
   <beans:property name="locations">
      <beans:list>
         <beans:value>classpath:application.properties</beans:value>
         <beans:value>classpath:application-${spring.profiles.active}.properties</beans:value>
         <beans:value>classpath:test.properties</beans:value>
      </beans:list>
   </beans:property>
</beans:bean>

# property의 설정이나 사용은 동일 하다.

# Environment 환경변수 값에 property setting ( PropertySources )

Environment 환경변수에 직접 properties 값을 로딩할 수 있다.

@Configuration
@PropertySources({
        @PropertySource("classpath:application.properties"),
        @PropertySource(value = "classpath:/application-${spring.profiles.active}.properties", ignoreResourceNotFound = true)
})
public class AppConfig {

}

# property의 사용

[ application.properties ]

app.message.hello="i am a boy"

[ application-prod.properties ]

app.message.hello="how are you?"

[ class ]

@Autowired
Environment env;

@Value("${app.message.hello}")
String hello;

[ class 내에서의 사용 ]

environment 변수 및 Value를 통한 사용 모두 가능 하다 .

log.info("app.message.hello {}" , env.getProperty("app.message.hello") );
log.info("properties app.message.hello {}" , hello );

# 추가적으로 Apache PropertiesConfiguration

apache commons lib를 통한 프로퍼티변경을 톰캣 재기동없이 반영할 수 있다. 서버 운영시에 가장 많이 사용되지 않나 싶다.

[ pom.xml ] dependency 설정

<!-- commons-configuration PropertiesConfiguration 를 통한 property 관리 -->
<dependency>
   <groupId>commons-configuration</groupId>
   <artifactId>commons-configuration</artifactId>
   <version>1.10</version>
</dependency>

[ servlet-context.xml ]

<bean id="propertyReloading" class="org.apache.commons.configuration.reloading.FileChangedReloadingStrategy" />

<bean id="runtimeProperties" class="org.apache.commons.configuration.PropertiesConfiguration">
   <constructor-arg type="java.lang.String" value="${app.runtime.property.filepath}" />
   <property name="reloadingStrategy" ref="propertyReloading" />
</bean>

${app.runtime.property.filepath} 는 properties 로 사용할 외부 경로를 넣어주면 된다.

[ class 내 사용을 위한 주입 ]

@Autowired
private PropertiesConfiguration runtimeProperties;

[ class 내에서의 사용 ]

model.addAttribute("app.title", runtimeProperties.getProperty("app.title"));
model.addAttribute("app.configYN", runtimeProperties.getProperty("app.configYN"));