NyARToolkit - たまブロ！

processingで音声解析ライブラリのminimを使いつつ、せっかくなんでProcessingに対応しているar(Augmented Reality)ライブラリのNyARToolkitも使ってみた。
音の波形を出しつつ、ar的なこともやっている謎の動画。
しかも途中で映像が切れてしまってる。最悪だ・・・
しかもソースもひどいわー　次はもっとまともなの載せれるように頑張ります。
ひでー・・・
/**	NyARToolkit for proce55ing/0.2.0
	(c)2008 nyatla
	airmail(at)ebony.plala.or.jp
*/
 
import processing.video.*;
import jp.nyatla.nyar4psg.*;
import processing.opengl.*;
import javax.media.opengl.*;
import ddf.minim.*;
import ddf.minim.effects.*;

Minim minim;
AudioPlayer groove;
BandPass bpf;

Capture cam;
NyARBoard nya;
PFont font;



void setup() {
  size(640,480,OPENGL);
  colorMode(RGB, 100);
  font=createFont("FFScala", 32);
  //キャプチャを作成
  cam=new Capture(this,width,height);
  //平面検出クラスを作成
  nya=new NyARBoard(this,width,height,"camera_para.dat","patt.hiro",80);
  //各種プロパティ設定（必要に応じて設定すること。何もしないとデフォルト値が入力される。）
  nya.gsThreshold=120;//画像２値化の閾値(0<n<255) default=110
  nya.cfThreshold=0.4;//変換行列計算を行うマーカ一致度(0.0<n<1.0) default=0.4
  //nya.lostDelay=10;//マーカ消失を無視する回数(0<n) default=10

  /*  他に、読み出しプロパティとして以下のものがある。
  　  これらはdetect関数がtrueを返した時に有効になる。
    double confidence
      マーカの一致度。(0<n<1.0)
    int lostCount
      マーカ認識後に消失した時に加算されるカウンタ。マーカの遅延消失に使用する。
    int pos2d[4][2]
      検出したマーカの画面上の頂点座標×4個
    PVector angle
      マーカの軸を中心にした回転角度(x,y,z)単位はラジアン
    PVector trans
      マーカの中心を基準とした平行移動量。単位はmm
    double transmat[12]
      OpenGLに指定するマーカの変換行列。
      行列から値を逆算する時、beginTransformを使用せずに自分で行列操作を行う時に使用してください。
    double projection[16]
      OpenGLに指定するProjection行列。
      beginTransformを使用せずに自分で行列操作を行う時に使用してください。
  */
  
  /* minim初期化 */
  minim = new Minim(this);
  
  /* mp3読み込み */
  groove = minim.loadFile("groove.mp3");
  groove.loop();

  /* minim設定 */
  bpf = new BandPass(440, 20, groove.sampleRate());
  groove.addEffect(bpf);
  
  float passBand = map(0, 0, 160, 100, 2000);
  bpf.setFreq(passBand);
  float bandWidth = map(100, 0, 160, 50, 500);
  bpf.setBandWidth(bandWidth);
  bpf.printCoeff();
}

//この関数は、マーカ頂点の情報を描画します。
void drawMarkerPos(int[][] points)
{
  textFont(font,10.0);
  stroke(100,0,0);
  fill(100,0,0);
  for(int i=0;i<4;i++){
    ellipse(nya.pos2d[i][0], nya.pos2d[i][1],5,5);
  }
  fill(0,0,0);
  for(int i=0;i<4;i++){
    text("("+nya.pos2d[i][0]+","+nya.pos2d[i][1]+")",nya.pos2d[i][0],nya.pos2d[i][1]);
  }
}

String angle2text(float a)
{
  int i=(int)degrees(a);
  i=(i>0?i:i+360);
  return (i<100?"  ":i<10?" ":"")+Integer.toString(i);
}
String trans2text(float i)
{
  return (i<100?"  ":i<10?" ":"")+Integer.toString((int)i);
}

void draw() {
  background(255);
  
  if (cam.available() !=true) {
    return;
  }
  cam.read();
  //背景を描画
  image(cam,0,0);

  //マーカの検出。マーカが発見されるとdetectはTRUEを返す。
  if(nya.detect(cam))
  {
    //一致度を書く
    textFont(font,25.0);
    fill((int)((1.0-nya.confidence)*100),(int)(nya.confidence*100),0);
    text((int)(nya.confidence*100)+"%",width-60,height-20);
    //マーカの角度、水平位置等
    pushMatrix();
    textFont(font,10.0);
    fill(0,100,0,80);
    translate((nya.pos2d[0][0]+nya.pos2d[1][0]+nya.pos2d[2][0]+nya.pos2d[3][0])/4+50,(nya.pos2d[0][1]+nya.pos2d[1][1]+nya.pos2d[2][1]+nya.pos2d[3][1])/4+50);
    text("TRANS "+trans2text(nya.trans.x)+","+trans2text(nya.trans.y)+","+trans2text(nya.trans.z),0,0);
    text("ANGLE "+angle2text(nya.angle.x)+","+angle2text(nya.angle.y)+","+angle2text(nya.angle.z),0,15);
    popMatrix();    
    //マーカの位置を描画
    drawMarkerPos(nya.pos2d);
    
    PGraphicsOpenGL pgl = (PGraphicsOpenGL) g;
    nya.beginTransform(pgl);//マーカ座標系での描画を開始する。
    
    //ここからマーカ座標系
    noFill();
    stroke(255,200,0);
    translate(0,0,20);
    //box(40);
    
    /* Waveを表示 */
    stroke(255);
    translate(-80,0,0);
    
    for(int i = 0; i < groove.right.size()-1; i++)
    {
      float x1 = map(i, 0, groove.bufferSize(), 0, 160);
      float x2 = map(i+1, 0, groove.bufferSize(), 0, 160);
      
      // 赤で塗りつぶし
      stroke(255, 0, 0);
      line(x1, groove.left.get(i)*50 - 20, x2, groove.left.get(i+1)*50 - 20);
      
      stroke(255, 0, 0);
      line(x1, groove.right.get(i)*50 + 20, x2, groove.right.get(i+1)*50 + 20);
    }
    
    nya.endTransform();//マーカ座標系での描画を終了する。（必ず呼んで！）
  }
}

void mouseMoved()
{

}

void stop()
{
  // always close Minim audio classes when you finish with them
  groove.close();
  // always stop Minim before exiting
  minim.stop();
  
  super.stop();
}