영삼이의 전문 정보 발행처

1. crontab 사용법 

2.등록 및 수정

 # crontab -e

  vi 형식의 에디터 창이 나오면 i 키로 등록할 명령어를 입력한다.

* * * * * /usr/home/test.sh >> /dev/null   : 1 분간격으로 해당 파일을 실행 하고 오류 저장을 하지 않는다.

3. .목록 확인

# crontab -l

4. 목록 수정

# crontab -e

# crontab -u username -e : 해당 유저의 crontab 수정

5. 목록 삭제

# crontab -r

6. 실행확인

# ps -ef | grep cron

7. 로그검토

# /var/log/cron

8. 파일 등록

# crontab [file_name]

9.시간 설정

※ 주석 처리리시 맨 앞에 '#' 붙인다

   # * * * * * /usr/home/test.sh

※ PHP 쉘스크립트(php 바이너리 파일이 있는 곳을 앞에 적어준다)

 #!/usr/bin/php -e

<?php

    echo "hello";

?>

//iframe 제거

　$STRING = preg_replace("!<iframe(.*?)<\/iframe>!is","",$STRING);
　

　//script 제거

　$STRING = preg_replace("!<script(.*?)<\/script>!is","",$STRING);
　

　//meta 제거

　$STRING = preg_replace("!<meta(.*?)>!is","",$STRING); 
　

　//style 태그 제거

　$STRING = preg_replace("!<style(.*?)<\/style>!is","",$STRING); 
　

　//&nbsp;를 공백으로 변환

　$STRING = str_replace("&nbsp;"," ",$STRING);
　

　//연속된 공백 1개로

　$STRING = preg_replace("/\s{2,}/"," ",$STRING);
　

　//태그안에 style= 속성 제거

　$STRING = preg_replace("/ style=([^\"\']+) /"," ",$STRING); // style=border:0... 따옴표가 없을때
　$STRING = preg_replace("/ style=(\"|\')?([^\"\']+)(\"|\')?/","",$STRING); // style="border:0..." 따옴표 있을때
　

　//태그안의 width=, height= 속성 제거

　$STRING = preg_replace("/ width=(\"|\')?\d+(\"|\')?/","",$STRING);
　$STRING = preg_replace("/ height=(\"|\')?\d+(\"|\')?/","",$STRING);
　

　//img 태그 추출 src 추출

　preg_match("/<img[^>]*src=[\"']?([^>\"']+)[\"']?[^>]*>/i",$STRING,$RESULT);
　preg_match_all("/<img[^>]*src=[\"']?([^>\"']+)[\"']?[^>]*>/i",$STRING,$RESULT);

This tutorial is continuation from previous yahoo screen-scraping using PHP4 tutorial.
We will try different method using DOM and XPath which only supported in PHP5.

First, a bit knowledge of XPath is required. More about XPATH can be read on:

http://www.zvon.org/xxl/XPathTutorial/General/examples.html

Also there's small concern that using XPATH is a bit slower than pure DOM Traversal. Read Speed: DOM traversal vs. XPath in PHP 5
But i personally also think that XPath is neat and easier.

Let's start. First we diagnose document structure using Mozilla Firebug.
Try a very easy case, which is to grab the title "Top Movies":

Copy XPath using Firebug and get this query:

/html/body/center/table[8]/tbody/tr/td[5]/table[4]/tbody/tr/td/font/b

1. Firefox automatically fix broken html structure, and it also add tbody tag. So, we need to remove this tag.
2. Only grab first row of table. Change .../tr/td/font/b into .../tr[1]/td/font/b

Now we get our first XPath query:

/html/body/center/table[8]/tr/td[5]/table[4]/tr[1]/td/font

Next harder case is to grab contents.

XPath query from Firebug is:

/html/body/center/table[8]/tbody/tr/td[5]/table[4]/tbody/tr[2]/td[2]/a/font/b

1. Same problem here. Firefox automatically fix broken html structure, and it also add tbody tag. Remove tbody tag from XPath query.
2. Grab all row of table. Change .../tr[2]/td[2]/a/font/b into .../tr/td[2]/a/font/b

Final XPath query for content is:

/html/body/center/table[8]/tr/td[5]/table[4]/tr/td[2]/a/font/b

Now final step is to put all two XPath queries into few lines of code, and we're done:

몇해전에 PHP 를 이용해서 멋진 라이브러리를 만든적이 있습니다.

아직도 애용하고 있죠 ㅎㅎ

웹페이지의 특정 정보를 얻기위해 로긴하고 게시물을 본다거나 글을 올리는 행위(?)를 꼭 브라우저를 쓰지않고 자동으로 동작하게 할수 없을까, 그리고 이걸 스케줄에 넣어서 자동화 할수 없을까 하다가 하나 만들게 된게 Autosurf 라는 php 라이브러리입니다.

당시에 잘 쓰지 않는 php 의 클래스를 써서리 멋지게 만들었지요.

그래서 무단 갈무리 해오기에 무척이나 좋게 되었고, 한때 유행하던 sms 보내는걸 제 홈피에 내가 서비스 하는것처럼 올릴수도 있었죠.

그당시 sms 가 무료라서 상당히 좋았었는데.. 지금은 유료화가 되서...

이걸 만들면서 http 통신 방식에 대해 많은걸 이해하게 되었답니다.


그 다음은 html 파서인데.. 이전에 펄(perl)을 좀 다루면서 펄에 내장 라이브러리로 있던 html 파서가 무척이나 마음에 들었는데.. 같은 방식으로 오히려 더 좋게 php 버전으로 만들었습니다.

html 태그 각 항목을 입맛대로 수정할수 있었지요.

autosurf 로 웹페이지를 가져온다음에 html파서로 정보 변경해서 제 홈피에 올리는 불펌.. 이랄까.. 그외에도 참 많이 애용 되고 있답니다.

Autosurf 소스 받기
autosurf.php 내용 보기
Html Parse 소스 받기


AutoSurf 1.0 Beta1

AutoSurf 는 자동으로 웹서핑을 할수 있는 프로그램입니다.
예들 들어 우리가 웹브라우저를 통해서 웹페이지를 서핑하는걸 프로그램으로
처리하는거지요.
쿠키/섹션을 이용한 인증처리도 통과가 가능합니다.
사용시에는 간단한 스크립터를 사용하면됩니다.

이걸 이용한다면, 문자메세지 전송프로그램도 제작가능하겠지요.
상대서버가 인증을 거치더라도 가능합니다.
특별한 경우를 제외하고는 자동웹서핑이 가능합니다.
특별한 경우라는건, 웹페이지가 자바스크립터를 이용해 쿠키세팅할때와
웹서버인증(입력폼이 뜨는..)에서는 아직 지원안합니다.

동작방식은, GET 과 POST 두개를 이용합니다.

라이브러리 사용법
require "autosurf.php";

$a = new autosurf();
$a->set_key("변수명", "값");
$a->set_key("변수명", "값");
$a->cfg_run("스크립터파일");


스크립터 명령어들..
debug: (yes/no) - http header 송신/수신을 보여줍니다. 가장상단에 한번적으시면 됩니다.
url: (domain) - 접속 주소
retry_num: (숫자) - 재전송 횟수. retry 명령어의 문자열을 만나면 재전송한다. form_action: (path 포함파일명) - 읽을 html 파일 혹은 디렉토리, http url은 제외 (

$conn = mysqli_connect("localhost", "test", "test", "test");

 $conn->query("Create table test_model"."(year integer, model varchar(50), accel REAL)");

 $stmt = $conn->prepare("insert into test_model values(?,?,?)");
 $stmt->bind_param("isd", $year, $model, $accel);

 prepare 의 사전적 의미를 생각한다면 쉽게 이해할 수 있다.

 $stmt = $conn->prepare("insert into test_model values(?,?,?)");

 쿼리를 이렇게 날리겠다. 라는 의미라고 생각해도 무방할 듯 하다.

 $stmt->bind_param("isd", $year, $model, $accel);

 여기서는 컬럼이 총 3개인데 파라메타 값이 4개가 들어가 있다.

 첫 isd 를 제외하고는 나머지는 컬럼에 들어갈 값이라는 걸 쉽게 알 수 있다.

 isd를 잘 살펴 보면 의외로 답은 쉽게 나온다.

 i 의 경우는 integer 를 의미하고

s 의 경우는 문자(string)을 의미하고

d 의 경우는 double 형을 의미한다.

$year, $model, $accel 의 순서로 입력이 되니 첫번쨰 파라메터 역시 isd로 써주면 된다.

추가적으로 b 옵션이 하나 있는데 이것은 blob 형으로 들어간다고 메뉴얼에.. ㅡ,,ㅡ

/*
 $year = 2001;
 $model = '156 2.0 Selespeed';
 $accel = 8.6;
 $stmt->execute();

 $year= 2003;
 $model = '147 2.0 Selespeed';
 $accel = 9.3;
 $stmt->execute();

 $year = 2004;
 $model = '156 GTA Sportwagon';
 $accel = 6.3;
 $stmt->execute();
*/

마지막으로 위 주석으로 된 코드에 주석을 없애고 실행을 하면 디비에 잘 들어가 있는 것을

확인할 수 있다.

디비에서 가져올 경우는

 $conn = mysqli_connect("localhost", "test", "test", "test");

 $stmt = $conn->prepare("select * from test_model order by year");
 $stmt->execute();

 $stmt->bind_result($year, $model, $accel);

 echo "<table>\n";
 echo "<tr><th>model</th><th>0-100 km/h</th></tr>\n";

 while($stmt->fetch()){
  echo "<tr><td>$year $model</td><td>{$accel} sec</td>\n";
 }
 echo "</table>\n";

방법1. number_format(값,자리수); 함수 사용

예---------------------------------------

코드.

<?

$char = 1234;

 echo number_format($char,2);

?>

실행 결과.

1,234.00

-----------------------------------------
1,234.00 이라는 소수점 두 자리까지의 처리 결과를 돌려 준다.

일반적으로 number_format() 함수는 숫자를 금액 단위로 표현하여

화면에 보여주려고 할 경우 많이 사용하는 함수입니다.

방법2. floor(); 함수 사용

예---------------------------------------

코드.

<?

$char = 1234.123;

$char2 = floor($char*10000))/100

 echo ($char2);

?>

실행 결과.

1234.12

-----------------------------------------

1234.123값을 123412.3으로 만든 다음 floor()함수를 써서 정수값만 가져온다.

그런다음 /100을 해서 소수점 두자리까지의 값을 가져온다.

PCRE 정규표현식 기본기