2009/02/10(火)[NiosII][ACM] 動画再生装置(お試し版)
はじめに
NEEKを使用したACM code*1データの再生装置を試作してみた.ALTERA FPGA/cyclone IIIを用いて,NiosIIコア,SOPC Builder・QuartusIIなどの使用に慣れることを目的とした事例である.
実機動作動画
ニコニコのほうにうpしておいたので,会員の方は参照されたい.
構成
cycloneIII内部のブロック図を以下に記す.(UWXGAであればpixel/dotで表示できるだろう)
また,システム構成として,NEEKのブロック図を引用させていただく.
本試作においても,全てのリソースを使用しつくしていない.半田付けもせずに.それなりに遊べる評価ボードであると考える.
緒言
ITEM | Description | part name |
---|---|---|
FPGA | Altera Cyclone III | EP3C25F324 |
Parallel Flash Memory | 8M x16 low voltage parallel flash | PC28F128P30B85 |
DDR SDRAM | 4M x16 x 4 DDR SDRAM | A2S56D40CTP-G5PP |
Syncronus SRAM | 256K x 32 synchronous SRAM | IS61LPS25636A-200TQL1 |
ブロック説明
前述したブロック図を,SOPC Builderで配置・接続した例を以下に示す.
基本的には,NEEKサンプルの"picture_viewer"をベースとして捕らえ,QuartusIIでフルスクラッチでプロジェクトを作成した.\チュートリアルでは,既存プロジェクトを改変して云々とあるが,新規に自主開発を行ううえで必要となる知識を得ることができないと判断した.\そもそもQuartusIIのver.upに伴う差分に対応できるかも不安であり,また,SDカードI/F等,サードパーティ製のIPを用いている点が引っかかった.\ためしに無償評価ライセンスを取り寄せてみたりもしたが,期限が一月ということもあり,個人でまったりと遊ぶには心もとない.\[em:無ければ作る]の精神で,増築していく方針で進めた.
NiosIIコアの構成
ゲート規模から考えると,余力が十分にあるため,Nios II/fコアの採用とした./eについては,1命令の実行に複数サイクルを要することから,今回のようにCPU演算量が多くなりそうな用途の場合,不向きである.SOPC Builderで,Nios II Processorの編集ダイアログを見ておきましょう.
記憶領域
コアのインストラクション・データは,それぞれがAvalon-MM Masterとなっています.PCからのダウンロードで,全てのメモリへのデータ供給後にCPU startとなるようです.\それ以外はconfig ROMから吸い上げorスタートアップルーチンがFLASHから吸い上げて転送してくれるのかどうか(未確認).
基本的にSRAMにマッピングしておるので,DDRSDRAM側へのアクセスは少ないはずです.ただし,heap領域およびVRAM(裏面含む)を配置してあるので,データ転送量は相当*2なものとなります.CPUコアによる展開処理での転送と,LCD表示のためのSGDMAによる読み出しの転送とが発生しますので,さらに負荷があがります.LCDは,800x480x60FPSなので,92,160,000 Bytes/Secとなります.
このLCD用のSG-DMAは,DDRSDRAMコントローラとは64bitバスで接続されているので,帯域としては66.5x8=532 Mbytes/sec を有するので,占有は2割ほどです.ただし,コントローラのオーバヘッドや,CPUからのアクセス・SGDMA自身のデスクリプタテーブル読み出しによるアクセスが衝突することで,転送レートに大きな影響を与えます.*3
LCDC
前述のとおり,VRAMとしてDDRSDRAMを用いております.CPUとシェアしており,裏RAMからの転送処理が不要な反面,アクセス衝突によるパフォーマンス劣化が生じえます.
LCDとは,MAX IIを介して接続されており,レベル変換・demax処理をさせています.FPGAからは,RGB各8bitのデータを時分割で送信する形態をとっています.
現状は,picture viewerに習って,altera-video-sync-generatorを用いています.これはAavlon-STを受け取って,LCDに必要な同期信号・フロントポーチ・バックポーチ信号(クロック)を生成します.データはAvalon-ST Packetのback pressure機能を用いて,データ本体の未送出時には取り出さないようにさせています.
SG-DMAと,video sync generatorとは動作クロックも異なり,データ幅も異なります.途中でDFAやFIFOを噛ませて所望の形に直していきます.
表示装置や,Dot Per Pixelに手を加えるには,このあたりのモジュールや接続部分を変更していくと便利かもしれません.
MMC SPI
長船さんが公開されているVHDLのIPをVerilogに移植してみました.無償版のModelSimでのHDL混在シミュレーションができないため,やむを得ず移植しました.本来なら流用してウマーという流れなのでしょうが,無念ですw
その他
ALTERAの基本IPをぺたぺたと貼り付けただけなので,説明は不要でしょう.適宜邦訳版コンテンツやメモ,ALTERAから出ている資料に目を通してください;)
ドライバレベルソフト
ALTERA IPについては,基本的にドライバ(Hardware Adaption Layer)が用意されています.newlibの標準入出力関数に適応したドライバも用意されており,シリアル入出力ポートを用意しておけばデバッグ時に便利でしょう.\無論,JTAG debug機能が有効であれば Eclipse上(NiosII IDE上)からGDB経由でらくらくデバッグが可能でしょうが.
LCDC
NEEKサンプルのソフトを流用します.
C:\altera\72\kits\cycloneIII_3c25_niosII_eval\examples\picture_viewer\software_examples\app\picture_viewer\alt_video_display
SGDMAドライバも内部で使用しています.個人的にVsyncカウントもほしかったので,このソフトにも手を入れています.
SGDMAをPackモードで使用せず,デスクリプタチェインの終了を要因とした割り込みを用いてソフトで再キックしています.プロジェクトが落ち着いてから公開しましょう.恥ずかしいコメントだらけなので(ぇ-
MMC
当該IP制御に関するコードは長船さんのコードをパク…参考に,もってきました.FAT File Systemについては,おなじみのFatFsを使わせていただきます*4.
個人でいじっている分には自己責任でアレですが,製品や人に配布するものとして適用してしまうとゲイツ陣営と争う必要が出てくるかもしれません.
また,SDカードの使用については,MMCへのアクセスを行っているだけである,という主張でSDカード非対応を宣言すればライセンシ不要という見方もあるようですが,軽くWEBサイトを見てまわった感じだと,わかりかねます.
データライン4本で転送してみたいものですがね….SPI 25MHz*5だとちょっときつい.
DAI
今回のACM v0.1対応版お試し公開では未使用.MMC I/Fのテストとして,waveファイルオープン・DAI経由でDACへデータを流して再生までは確認済.DAIモジュールにもFIFOを用意してあり,FIFO残量が減ってきたときに割り込みをかけて,FIFOへのデータ転送を行う.将来的にはAvalon-ST sinkポートを設けて,DMA経由で流し込めればCPUの処理を削減することができよう.
現状,ソフトでメモリ上にFIFOを構築して,割込みハンドラでデータを吐き出させている.メイン処理ではメモリ上のFIFO残量をポーリングして,ファイルからデータを吸い出している.
ACM decoder
ALTERAで行こう!の暫定公開 → 軽量動画フォーマットの研究を参照ください.\更新されて名前が変わったりしているかもしれませんが,適宜対応ください(^^;
アプリケーションレベルソフト
Test Programとしてのみ実装.RTOSは未使用であり,単純にSDからデータを吸い出してデコード・表示しているだけです.
frame rateにあわせて時間間隔を所望の時間に近い値でウェイトを入れている.frame rateに対応する待ち時間はシステムクロックの整数倍にはならないので,誤差を吸収する措置を入れてある.(誤差を積算してウェイト値に加算するだけですが)
[コラム] SDカード
つい本日(2009年2月10日)のことです.
トラ技2009年3月号 BASICS [連載] Cによるマイコン操作術〈第12回〉SPIを利用してSDメモリーカードにアクセスしてみよう
ちょうど,この記事を目にできた.立ち読み程度で申し訳ないが,FATFSのライセンス・SDカード使用のライセンスについて,伝聞調で記されていた.参照資料も特別明記無く,商用利用時は調査すべきだ,程度で終わっている.
軽くググってみたものの,SDライセンス・FATライセンスに関する詳細がみあたらない.MSのパテントとして2007年末に米国で認められているようだが,パテント期限が17年(スラドJP過去ログ)とかなんとか….FAT12/FAT16/FAT32/VFATそれぞれで期限が異なるのかしら?
相変わらず疑問だけが残るけれども,ここでも解決せずに筆をおくことになる…(ゴメンナサイ)
- 切れるとしていつごろ切れるのか.
- 切れないとして無断使用はNGということで認識は正しいか.
- linuxのfile systemとしてサポートが残っているが,ライセンス問題はどうなっているのか.
容易に組込み機器とPCとの間でデータをシェアしようと考えると,SD+FATFSが現状の最適解だと思う.active syncプロトコル自体もライセンスが要るようだし
最悪,セガサターンのRAMカセット並みのフォーマットで作ってもいいわけだが….MSDOSのメモリチェーン並みのしょぼさだけど(笑)
2009/01/29(木)[NiosII][ACM] 高速化・ベンチマーク測定
@IT MONOistで新記事があがっとります.FPGAですが,Xilinxで,且つlinux環境下という個人的に役立ちそうな情報です.\HDLシミュレータの紹介・インスコ方法から記載されていますので,良い資料になるでしょう.
-ザ・組み込み-ソフトウェアのハードウェア化(6)\追い出したソフトウェアを“ハードウェア化”する準備\鳥海 佳孝 設計アナリスト 2009/1/29
こうやって入門記事はそれなりに出てくるものなので,あえて競合する必要は無いなぁと思う次第であります.\そこで我々中途半端層の使命は,本能の赴くままに遊んで資料を残していくことだけ.見返りを求めて手を動かしていてはいけないと悟りました(キリッ\まぁ突き詰めて考えれば,誰かに認めてもらいたくて行動しているのでしょうがねぇ(笑)
QuartusIIもperlやらコアなところはcygwin環境でまわしてるようなので、Windowsよりもlinux版のほうが軽いような気がするのですが,実際のところはどうなんですかね….
閑話休題.本編は以降へ...
[FPGA][NiosII][ACM] 高速化・ベンチマーク測定
ALTERAで行こう!で紹介されている,暫定公開 → 軽量動画フォーマットの研究のアレをナニして楽しよう!検証していこうという企画であります(しれっ\管理日誌のほうに,マイコン側の展開高速化や時期verの構想の話があったりするので,NEEKで動画するならこれだろう,と.
全部ソフトだと話しにならないので,YUV210→ RGB変換処理をカスタム命令にしてみまんた.コアは/fを適用し,MMU/MPUは殺してあります.D-cacheも有効にして期待が高まりますが...?
緒言ぽいもの:最適化あり,Nios/f・Icache/Dcacheあり,Release向けbuild
~ばらつきは数ミリオーダで存在する模様.\この日記を書きながらコードを見てると,明らかに要らん処理がはいってます.全く同じ処理の比較ではないので,これはちょっとイカサマくさいです.それでも結構なステップを端折ることができているでしょう.
以下,測定結果.画像はどこかの果物の写真を拾ってきました.それなりに大きいかな?
File | dot size | MCU size |
---|---|---|
NATU03~1.ACM(natu03.bmp) | 405x315 | 51x40 |
CHERRY~1.ACM(cherry04.bmp) | 405x315 | 51x40 |
CHERRY~2.ACM(cherry05.bmp) | 405x315 | 51x40 |
【カスタム命令ナシ】
FILE: NATU03~1.ACM, size = 45912
Total Time: 0.233295 seconds (23105221 clock-cycles)
Section | % | Time (sec) | Time (clocks) | Occurrences |
---|---|---|---|---|
mcu decode | 72.5 | 0.16922 | 16759280 | 2040 |
dcb decode | 16.9 | 0.03945 | 3907418 | 12240 |
FILE: CHERRY~1.ACM, size = 48362
Total Time: 0.234586 seconds (23232991 clock-cycles)
Section | % | Time (sec) | Time (clocks) | Occurrences |
---|---|---|---|---|
mcu decode | 72.9 | 0.17110 | 16945317 | 2040 |
dcb decode | 17.6 | 0.04137 | 4097390 | 12240 |
FILE: CHERRY~2.ACM, size = 33638
Total Time: 0.216018 seconds (21394127 clock-cycles)
Section | % | Time (sec) | Time (clocks) | Occurrences |
---|---|---|---|---|
mcu decode | 71.3 | 0.15393 | 15244756 | 2040 |
dcb decode | 11.3 | 0.02450 | 2426448 | 12240 |
【カスタム命令アリ】
FILE: NATU03~1.ACM, size = 45912
Total Time: 0.149199 seconds (14776427 clock-cycles)
Section | % | Time (sec) | Time (clocks) | Occurrences |
---|---|---|---|---|
mcu decode | 58.4 | 0.08714 | 8630226 | 2040 |
dcb decode | 25.4 | 0.03783 | 3746338 | 12240 |
FILE: CHERRY~1.ACM, size = 48362
Total Time: 0.15123 seconds (14977634 clock-cycles)
Section | % | Time (sec) | Time (clocks) | Occurrences |
---|---|---|---|---|
mcu decode | 58.9 | 0.08907 | 8821080 | 2040 |
dcb decode | 26.3 | 0.03976 | 3937702 | 12240 |
FILE: CHERRY~2.ACM, size = 33638
Total Time: 0.133595 seconds (13231058 clock-cycles)
Section | % | Time (sec) | Time (clocks) | Occurrences |
---|---|---|---|---|
mcu decode | 54 | 0.07210 | 7141035 | 2040 |
dcb decode | 17.2 | 0.02301 | 2278744 | 12240 |
カスタム命令
HDL持ってくるの忘れたので,後日貼ります.誰が書いても同じようなモンになりそうですしネw
// Verilog Custom Instruction Template File for Internal Register Logic module custom_inst_yuv2rgb ( clk, // CPU system clock (required for multi-cycle or extended multi-cycle) reset, // CPU master asynchronous active high reset (required for multi-cycle or extended multicycle) clk_en, // Clock-qualifier (required for multi-cycle or extended multi-cycle) start, // Active high signal used to specify that inputs are valid (required for multi-cycle or extended multi-cycle) done, // Active high signal used to notify the CPU that result is valid (required for variable multi-cycle or extended variable multi-cycle) dataa, // Operand A (always required) datab, // Operand B (optional) result // Result (always required) ); // INPUTS input clk; input reset; input clk_en; input start; input [31:0] dataa; // Y(0.255) input [31:0] datab; // u(-128..127), v(-128..127) // OUTPUTS output reg done; output reg [31:0] result; // temporary regs. reg signed [17:0] calc_R, calc_G, calc_B ; // to refer parameter wire signed [8:0] dy_i ; wire signed [8:0] du_i, dv_i ; // internal regs/wires reg [3:0] conv_state ; wire signed [17:0] d_Rv1, d_Rv2 ; wire signed [17:0] d_Gu1, d_Gv2 ; wire signed [17:0] d_Bu1, d_Bu2 ; localparam STAT_IDLE = 4'b0001; localparam STAT_STEP1 = 4'b0010; localparam STAT_STEP2 = 4'b0100; localparam STAT_FINISH = 4'b1000; assign dy_i = { 1'b0, dataa[ 7: 0] } ; // unsigned 0..255 assign du_i = { datab[15], datab[15: 8] } ; // signed -128..127 assign dv_i = { datab[7], datab[ 7: 0] } ; // signed -128..127 always @ (posedge reset or posedge clk) begin if (reset) begin conv_state <= STAT_IDLE ; done <= 1'b0 ; result <= 32'h00000000 ; calc_R <= 18'h0; calc_G <= 18'h0; calc_B <= 18'h0; end else begin if (clk_en) begin case (conv_state) STAT_IDLE: begin if (start) begin calc_R[17:0] <= {1'b0, dy_i[8:0], 8'h0000 } ; calc_G[17:0] <= {1'b0, dy_i[8:0], 8'h0000 } ; calc_B[17:0] <= {1'b0, dy_i[8:0], 8'h0000 } ; conv_state <= STAT_STEP1 ; end else begin done <= 1'b0 ; end end STAT_STEP1: begin calc_R <= calc_R + d_Rv1 ; calc_G <= calc_G + d_Gu1 ; calc_B <= calc_B + d_Bu1 ; conv_state <= STAT_STEP2 ; end STAT_STEP2: begin calc_R <= calc_R + d_Rv2 ; calc_G <= calc_G + d_Gv2 ; calc_B <= calc_B + d_Bu2 ; conv_state <= STAT_FINISH ; end STAT_FINISH: begin done <= 1'b1 ; result[31:24] <= 8'h0 ; if (calc_R[17]==1'b1) result[23:16] <= 8'h0 ; else if (calc_R[16]==1'b1) result[23:16] <= 8'hFF ; else result[23:16] <= calc_R[15:8] ; if (calc_G[17]==1'b1) result[15: 8] <= 8'h0 ; else if (calc_G[16]==1'b1) result[15: 8] <= 8'hFF ; else result[15: 8] <= calc_G[15:8] ; if (calc_B[17]==1'b1) result[ 7: 0] <= 8'h0 ; else if (calc_B[16]==1'b1) result[ 7: 0] <= 8'hFF ; else result[ 7: 0] <= calc_B[15:8] ; conv_state <= STAT_IDLE ; end endcase end end end assign d_Rv1 = { dv_i[8], dv_i[8:0], 8'h00 }; // v x 256 MUL_RV MUL_RV_inst ( // 9'h067; .clken ( clk_en ), .clock ( clk ), .dataa ( dv_i ), .result ( d_Rv2 ) ); MUL_GU MUL_GU_inst( // 9'hfa8; .clken ( clk_en ), .clock ( clk ), .dataa ( du_i ) , .result ( d_Gu1 ) ); MUL_GV MUL_GV_inst( // 9'hf49; .clken ( clk_en ), .clock ( clk ), .dataa ( dv_i ) , .result ( d_Gv2 ) ); assign d_Bu1 = {du_i[8], du_i[8:0], 8'h00 }; // u x 256 MUL_BU MUL_BU_inst ( // 9'h0c6; .clken ( clk_en ), .clock ( clk ), .dataa ( du_i ), // signed 9bit (mul 198. you must mult 256 and add) .result ( d_Bu2 ) // 18bit ); endmodule
※MUL_xxは乗算器をMega Wizardで生成しました.それぞれ9bitx9bit符号有りの乗算器です.
ソースコード(抜粋)
未掲載部分はオリジナルと同一.ベータ版というか動作保障ナシで各自自己責任でお使いください.\改造ポイントと,計測ポイントを示すために貼っておきます.ノークレームノーリターンでお願いします.(?)
UJIYA_CI_YUV2RGB_MACRO は 引数2つのカスタムインストラクション番号0呼び出しです.これももってくるの忘れたので,後日追記しておきます.
// カスタム命令呼び出しのマクロ #define UJIYA_CI_YUV2RGB_N 0x00 #define UJIYA_CI_YUV2RGB_MACRO(n,Y,UV)\ __builtin_custom_inii( UJIYA_CI_YUV2RGB_N, (Y),(UV)) int mcu_decode ( // MCUのワードサイズを返す unsigned short *pMCU, // MCUデータポインタ mcu_rgb32 *pP, // 展開先ポインタ int cmode // 出力カラーモード ) { int i,n,x,y; int r,g,b; int tu[16],tv[16],ty[16], *yy; int c,mcu_n; // U成分とV成分の展開 PERF_BEGIN( PERFORMANCE_COUNTER_BASE, 2); c = dcb_decode(pMCU, tu, -128); PERF_END(PERFORMANCE_COUNTER_BASE, 2); pMCU += c; mcu_n = c; PERF_BEGIN( PERFORMANCE_COUNTER_BASE, 2); c = dcb_decode(pMCU, tv, -128); PERF_END(PERFORMANCE_COUNTER_BASE, 2); pMCU += c; mcu_n += c; // Y成分の展開とRGB変換 i = 0; // U,Vのindex for(n=0 ; n<4 ; n++) { PERF_BEGIN( PERFORMANCE_COUNTER_BASE, 2); c = dcb_decode(pMCU, ty, 0); PERF_END(PERFORMANCE_COUNTER_BASE, 2); pMCU += c; mcu_n += c; yy = &ty[0] ; // yyはシーケンシャル for(y=0 ; y<4 ; y++) { // YUV420をRGBに変換 for(x=0 ; x<4 ; x++) { #if 1 /* ここでカスタム命令とソフト処理とを切り替える */ mcu_rgb32 d_rgb ; d_rgb = UJIYA_CI_YUV2RGB_MACRO(0, *yy, (((tu[i]&0xFF)<<8) | (tv[i]&0xFF))) ; // & bitmask[cmode]; *pP++ = d_rgb; #else r = (256 * (*yy) + 359 * tv[i]) >> 8; g = (256 * (*yy) - 88 * tu[i] - 183 * tv[i]) >> 8; b = (256 * (*yy) + 454 * tu[i] ) >> 8; if (r < 0) { r = 0; } else { r += dither[cmode][y][x]; if (r > 255) r = 255; } if (g < 0) { g = 0; } else { g += dither[cmode][y][x]; if (g > 255) g = 255; } if (b < 0) { b = 0; } else { b += dither[cmode][y][x]; if (b > 255) b = 255; } *pP++ = mcu_rgb32_pack(r, g, b) & bitmask[cmode]; // ビット落としをシミュレート #endif // Y,U,V index更新. U,Vはxが2dot単位だから,展開してしまったほうが分岐が減ると思うのね. yy++ ; if ((x & 3) == 3) { i-- ; } else if (x & 1) { i++; } } if (y & 1) { i += 4 ; } pP += 4; // 4dot進める } if (n==1) { i -= 2 ; pP -= 4 ; // 左下の座標へ移動. } else { i -= 6 ; pP += (4 - 8*4) ; // 右上の座標へ移動. } } return (mcu_n); } int load_acm2mem( char* fname, gr_off_bitmap** pOffBitmap ) { FRESULT res ; FIL fp ; UINT rsz ; ACM_HEADER* acm_header ; gr_off_bitmap* pRet = NULL; int x, y, mcu_blocks ; int xx, yy ; unsigned int p[8*8]; // p[8][8] ; unsigned int* pBuft ; unsigned short* pACM = NULL; unsigned short* pACM_buf = NULL; int mcu_words; if (pOffBitmap==NULL) { return E_PAR ; } *pOffBitmap = NULL ; if ((res = f_open (&fp, fname, FA_READ)) != FR_OK) { return (res | 0x1000); } pACM = malloc(fp.fsize); if (!pACM){ goto ERROR ; }// error res = f_read(&fp, pACM, fp.fsize, &rsz) ; if (rsz < fp.fsize) { goto ERROR ; } // error acm_header = (ACM_HEADER*)pACM ; pRet = (gr_off_bitmap*)malloc( sizeof(gr_off_bitmap) + acm_header->width * acm_header->height * sizeof(unsigned int) ) ; if (pRet==NULL) { goto ERROR; } pRet->width = acm_header->width ; pRet->height = acm_header->height ; pRet->depth = 4; // とりあえずRGB888で固定する. pBuft = (unsigned int*)&pRet->data[0] ; pACM_buf = &acm_header->data[0] ; mcu_blocks = 0 ; PERF_RESET( PERFORMANCE_COUNTER_BASE ); PERF_START_MEASURING( PERFORMANCE_COUNTER_BASE ); for(y=0 ; y< acm_header->height ; y+=8) { for(x=0 ; x< acm_header->width ; x+=8) { if (++mcu_blocks > acm_header->wNumOfMCU) { } // デコードしてみる PERF_BEGIN( PERFORMANCE_COUNTER_BASE, 1); mcu_words = mcu_decode(pACM_buf, &p[0], 0); // output color mode=0(as RGB888) PERF_END(PERFORMANCE_COUNTER_BASE, 1); pACM_buf += mcu_words ; for(yy=0 ; yy<8 ; yy++) { for(xx=0 ; xx<8 ; xx++) { if((x+xx)< acm_header->width && (y+yy)< acm_header->height) { pBuft[ (y+yy) * acm_header->width + (x+xx) ] = p[yy*8+xx] ;// p[yy][xx] ; } } } } } PERF_STOP_MEASURING(PERFORMANCE_COUNTER_BASE) ; perf_print_formatted_report( (void*)PERFORMANCE_COUNTER_BASE, alt_get_cpu_freq(), 2, "mcu decode","dcb decode" ); ERROR: if (pACM) { free(pACM) ; pACM = NULL; } f_close(&fp) ; *pOffBitmap = pRet ; return E_OK ; }
goto文否定信仰気味でしたが,アセンブラレベルで想像できるときや,ヘタに書いて可読性が下がるとき・個人でいじくってるときの逃げなどでは大いに活用してよいと思います.これもC++の例外を触ってから考えが変わりました...\制御できる(問題を全て把握した上での)使用は同じだろう,と.あまりグダグダ書くと叩かれそうなのでこの辺で(笑)
少しだけ考察(未検証)
YUVの配列要素番号の算出を,オリジナルでは(乗算+加算)としてあります.とりあえず乗算は悪という思想で展開してみましたが,サイクル数を見るとcycloneIIのコア/fでは4サイクル程度*1….\命令フェッチ考えるとヘタにステップが増えるほうが遅くなるという罠.フルアセンブラでチマチマ最適化してやるのがベストですね.レジスタ変数にすればある程度スタックアクセスも減らせるかもですね.
ステップ数,メインメモリからのデータ読み出し,命令読み出しを考慮して最適化しないと,実際の最速を得ることができないでしょう.特にI/Dどちらもcache有効なコアなので,単純に演算速度だけが聞いてくるわけでもないですネ.\いかにコア内部でデータ移動を閉じられるかがカギですね.
gccのインラインアセンブラか….AVRでちょっとかじった程度だからなぁ….
- Update 2.Feb.2009.
- "後日掲載"アイテムを追加(HDL/マクロ/bmpサイズ)
2009/01/29(木)[NiosII][組込] IOアクセスの注意事項など
[NiosII][組込] NiosII コアを/fにしてD-cacheを有効にする場合の注意
NiosIIシステムはメモリマップドI/Oなので,I/Oに関するキャッシュ制御はどのようになっているのか気にはなっていた.
コアのconfigurationでキャッシュレスとして遊んできていたので,特に問題は起きてこなかった.キャッシュ有りとしてソフトの動作が不安定になったので,そのときに参照した資料へのポインタと,ドライバを各ユーザ向けのメモを残しておく.
こんなもんにはまってたらいかんのだが...
(引用元)
Nios II Software Developer’s Handbook (NII5V2-8.0, n2sw_nii5v2.pdf)\9. Cache and Tightly-Coupled Memory\ Writing Device Drivers
(意訳)
デバイスドライバでは,データキャッシュは命令セットのldio/stioファミリを使うことでバイパスしなければなりません.\データキャッシュの無いNios IIコアでは,これらの命令の挙動は 対応するld/st命令と同じように振舞うので,親切です?(benign).
Cプログラマのために.\volatileのようにポインタを宣言し,そのvolatileポインタを使ってアクセスしても,データキャッシュをバイパスすることはできないことに注意ください.\volatileキーワードはポインタを使ったアクセスを,コンパイラ最適化から防ぐ(除外する)だけです.
で,HAL上でコードを書いているなら,このマクロを使ってくれ,とのこと.
ファイル:C:\altera\81\nios2eds\components\altera_nios2\HAL\inc\io.h
/* Dynamic bus access functions */ IORD_32DIRECT(BASE, OFFSET) IORD_16DIRECT(BASE, OFFSET) IORD_8DIRECT(BASE, OFFSET) IOWR_32DIRECT(BASE, OFFSET, DATA) IOWR_16DIRECT(BASE, OFFSET, DATA) IOWR_8DIRECT(BASE, OFFSET, DATA)
これらは,offsetにBYTEアドレスを記述します.NG箇所の,DATA FIFOへの吐き出しコードを記します.
#define IOWR_UJIYA_DAI_DATAFIFO(base,data) IOWR_32DIRECT(base, ((3) * 4), (data))
"アドレス"が必要なので,ベースアドレスから3つ目のレジスタとなる,12バイト目をoffsetに渡しています.
/* Native bus access functions */ IORD(BASE, REGNUM) IOWR(BASE, REGNUM, DATA)
これらは,REGNUMにBYTEアドレスを記述します.\同ファイルに,以下の定義がなされています.バス幅を32bitにしていれば,REGNUM×4をオフセット指定したのと同じになりますね.
#define __IO_CALC_ADDRESS_NATIVE(BASE, REGNUM) \ ((void *)(((alt_u8*)BASE) + ((REGNUM) * (SYSTEM_BUS_WIDTH/8))))
作成するモジュールを,バス幅固定を前提とするか,任意幅(8bit幅で抑えることになる?)で実装するかによって,使うマクロを分けたほうが良い感じがしますね.\明示的に幅を規定するほうが安心感はありますけれど.
[NiosII][組込] 追記
長船さんからコメントをいただいておりますが,資料をあさっているとイロイロと書いてありました(^^;
cache controlの下記関数でcache対象外にしてしまう方法もある.memcpyするときとか,DDRRAMをVRAMにするときなんかに使える模様.
volatile void* alt_remap_uncached (void* ptr, alt_u32 len);
# memcpyのIO空間版を作るのが早そうだけれど.
さらに追記.というか順序からいうとこっちが先だろう...
Nios II Processor Reference Handbook ("NII5V1-8.1", "n2cpu_nii5v1.pdf")\Chapter 2: Processor Architecture\Memory and I/O OrganizationCache Memory\Cache Bypass Methods
- I/O Load and Store Instructions Method\The load and store I/O instructions such as ldio and stio bypass the data cache and
force an Avalon-MM data transfer to a specified address.
- The Bit-31 Cache Bypass Method\The bit-31 cache bypass method on the data master port uses bit 31 of the address as a
tag that indicates whether the processor should transfer data to/from cache, or bypass it.\This is a convenience for software, which might need to cache certain addresses and bypass others. Software can pass addresses as parameters between functions, without having to specify any further information about whether the addressed data is cached or not.
MSBに1たてとけばおk... 和訳は日本語ドキュメント見るなり華麗にスルーするなりで(笑
おまけ
memcpy()はsrc,dstが(4byte)alignmentされていればlong単位での転送.\burstを狙って*src++ = *dst++を記述(C言語で書かれている.)ただし,逆アセ結果は"ldw/add/stw/add"がセットになっているだけのコード.
インストラクションセットを見ると,こうせざるをえないようですね.ARMみたいなヘンタイ命令体系だと,複数転送命令があるのになぁ.(AMBAがburstコマンドを持っているから,必要なんだろうけど.Niosのburstはcache fillだけでburst動作かな...メモリが対応して無いと項か薄いだろうけど)
[NiosII][組込] 最適化有効(release build)時に漢字フォントが化ける
適当にいじくってるコードの話をしても通じませんが,恥ずかしい事例をひとつ.
globalにおいた char配列が奇数アドレスにマッピングされたために,まずいことになった.一部のメンバを shortでアクセスするため,alignment違反で変な値を読み込んでいた.
gcc方言となるが,__attribute__修飾子を使って4byte境界に置いておいた.
∵システムのバス幅が32bitなので,long(32buit)までのアクセスしかありえない
const char font_table_kanji[] __attribute__ ((aligned (4))) = { #include "./VMGOL16.inc"
参考サイト ttp://developer.apple.com/DOCUMENTATION/DeveloperTools/gcc-3.3/gcc/Variable-Attributes.htmlあぽーになってるけどgcc manualがあればなんでも良い...
2009/01/16(金)[SOPC][NEEK] WM8731を使う
[NEEK] オーディオ出力(本日のデバッグ)
avalon-I2C module
opencores.comで公開されているI2C moduleを拾ってきて,バスインタフェース部分をAvalon仕様に変更して使おうとしています.
NEEKの場合は,SCKのPAD部に注意が必要です.Pull Upされていないので,FPGAがドライブする必要があります.実装例を以下に記します.
assign HC_I2C_SDAT = (sda_padoen_o==1'b0 ? sda_pad_o : 1'bz) ; assign scl_pad_i = HC_I2C_SCLK ; assign HC_I2C_SCLK = scl_padoen_o ; // if module request SCL=1, then padoen=high.
シミュレーションしてみると挙動が変でした.信号を見ていくと,cr[7:4]のクリア動作が効いていないように見えます.夜を挟んで半日かけて気づくという失態をしてしまいましたが,問題箇所は自分で実装したこのあたり.
コーダーとしては最悪ですなw
if (avs_s0_write==1'b1 && CmdReg_sel==1'b1 && core_en==1'b1) if (avs_s0_byteenable[0]==1'b1) cr <= avs_s0_writedata[7:0] ; else begin if (done | i2c_al) cr[7:4] <= #1 4'h0; // clear command bits when done or when aribitration lost cr[2:1] <= #1 2'b0; // reserved bits cr[0] <= #1 1'b0; // clear IRQ_ACK bit end
2008/11/18(火)EDKサンプル"picture_viewer"
[Altera][Nios2] EDKサンプル"picture_viewer"を参照する
[TimeQuest][Quartus2] 制約ファイルの確認
cycloneIII_embedded_evaluation_kit_picture_viewer_settings.tcl
set_instance_assignment -name TCO_REQUIREMENT "3.3 ns" -from * -to ssram_adsc_n set_instance_assignment -name TCO_REQUIREMENT "3.3 ns" -from * -to ssram_bw_n set_instance_assignment -name TCO_REQUIREMENT "3.3 ns" -from * -to ssram_bwe_n set_instance_assignment -name TCO_REQUIREMENT "3.3 ns" -from * -to ssram_ce_n set_instance_assignment -name TCO_REQUIREMENT "3.3 ns" -from * -to ssram_oe_n set_instance_assignment -name TCO_REQUIREMENT "3.3 ns" -from * -to flash_ssram_a
SyncronusSRAMのアドレス,Byte enbale,ChipEnable,OutputEnableは3.3nSecのtCOを設定する.制御信号の全てのclockに対する出力遅延を定義している.(一定にそろえたい?)
set_instance_assignment -name TSU_REQUIREMENT "6 ns" -from * -to flash_ssram_d
SRAMのデータ用FFのSetupTimeを6nSecとしている?.
TCO_REQUIREMENTとTSU_REQUIREMENTを記述するのは,I/Oタイミング制約を課すことで,QuartusIIに対してレジスタつきI/Oピンの使用を促すためだろう*1.
cycloneIII_embedded_evaluation_kit_picture_viewer.sdc
他のところでも制約がある.SDCファイルで規定されているアレゲな何を理解する.参照するリファレンスは,主にTclScriptManual("TclScriptRefMnl.pdf").
## Creating and setting variables for clock paths to make code look cleaner set System_Clock_int *|the_pll|the_pll|altpll_component|auto_generated|pll1|clk[0] set SSRAM_Clock_ext *|the_pll|the_pll|altpll_component|auto_generated|pll1|clk[1] set Slow_Clock_int *|the_pll|the_pll|altpll_component|auto_generated|pll1|clk[2] set Remote_Update_Clock *|the_pll|the_pll|altpll_component|auto_generated|pll1|clk[3] set DDR_Local_Clock *|the_ddr_sdram|ddr_sdram_controller_phy_inst|alt_mem_phy_inst|ddr_sdram_phy_alt_mem_phy_ciii_inst|clk|pll|altpll_component|auto_generated|pll1|clk[1] set DDR_Controller_Clock *|the_ddr_sdram|ddr_sdram_controller_phy_inst|alt_mem_phy_inst|ddr_sdram_phy_alt_mem_phy_ciii_inst|clk|pll|altpll_component|auto_generated|pll1|clk[0]
まずは,clockに対する制約を記述するため,clockコレクションを得るためのワイルドカード記述を定義している.名称の変更やPLLの出力端子番号等により変化するでしょう.
##SSRAM Constraints set_output_delay -clock [get_clocks $SSRAM_Clock_ext] -reference_pin [get_ports {ssram_clk}] 2.4 [get_ports {ssram_adsc_n ssram_bw_n* ssram_bwe_n ssram_ce_n ssram_oe_n flash_ssram_a* flash_ssram_d*}] set_input_delay -clock [get_clocks $SSRAM_Clock_ext] -reference_pin [get_ports {ssram_clk}] 4.1 [get_ports {flash_ssram_d*}] set_multicycle_path -from [get_ports {flash_ssram_d*} ] -setup -end 2
starter kitのSSRAMは,"IS61LPS25636A"(8Mbit,36bit x 256k)です.ただしparity pbitは配線されていません.latency 2cycle,setup/holdは1.4/0.4[nSec]となっています.
制御信号等の出力遅延として,setup時間にマージンを1[nSec]加えて,2.4[nSec]としています(イメージ:ssram_clkに対して2.4nSec以上早く信号が出るように合成される).
toeq(Output Enable to Output Valid)が3.1[nSec]なので,データの入力遅延としてマージンを1[nSec]とって,4.1[nSec]としている(イメージ:ssram_clkに対して,setup timeが4.1[nSec]加えられる.).
## Cutting the paths between the system clock and ddr controller clock since there is a clock crossing bridge between them (FIFOs) set_false_path -from [get_clocks {osc_clk}] -to [get_clocks $Slow_Clock_int] set_false_path -from [get_clocks $Slow_Clock_int] -to [get_clocks {osc_clk}] ## Cutting the paths between the system clock and ddr controller clock since there is a clock crossing bridge between them (FIFOs) set_false_path -from [get_clocks $Slow_Clock_int] -to [get_clocks $System_Clock_int] set_false_path -from [get_clocks $System_Clock_int] -to [get_clocks $Slow_Clock_int] ## Cutting the paths between the system clock and ddr controller clock since there is a clock crossing bridge between them (FIFOs) set_false_path -from [get_clocks $Slow_Clock_int] -to [get_clocks $DDR_Controller_Clock] set_false_path -from [get_clocks $DDR_Controller_Clock] -to [get_clocks $Slow_Clock_int] ## Cutting the paths between the system clock and ddr controller clock since there is a clock crossing bridge between them (FIFOs) set_false_path -from [get_clocks {osc_clk}] -to [get_clocks $DDR_Controller_Clock] set_false_path -from [get_clocks $DDR_Controller_Clock] -to [get_clocks {osc_clk}] ## Cutting the paths between the system clock and ddr controller clock since there is a clock crossing bridge between them (FIFOs) set_false_path -from [get_clocks $System_Clock_int] -to [get_clocks $DDR_Controller_Clock] set_false_path -from [get_clocks $DDR_Controller_Clock] -to [get_clocks $System_Clock_int] ## Cutting the paths between the system clock and ddr local clock since there is a clock crossing bridge between them (FIFOs) set_false_path -from [get_clocks $System_Clock_int] -to [get_clocks $DDR_Local_Clock] set_false_path -from [get_clocks $DDR_Local_Clock] -to [get_clocks $System_Clock_int] ## Cutting the paths between the external oscillator clock and the system clock since there is an asyncronous clock crosser between them set_false_path -from [get_clocks {osc_clk}] -to [get_clocks $System_Clock_int] set_false_path -from [get_clocks $System_Clock_int] -to [get_clocks {osc_clk}] ## Cutting the paths between the external oscillator clock and the system clock since there is an asyncronous clock crosser between them set_false_path -from [get_clocks {osc_clk}] -to [get_clocks $DDR_Local_Clock] set_false_path -from [get_clocks $DDR_Local_Clock] -to [get_clocks {osc_clk}] ## Cutting the paths between the external oscillator clock and the remote update clock since there is an asyncronous clock crosser between them set_false_path -from [get_clocks {osc_clk}] -to [get_clocks $Remote_Update_Clock] set_false_path -from [get_clocks $Remote_Update_Clock] -to [get_clocks {osc_clk}]
コメントにあるように,clock domain間に対してfalse pathを設定しています.
双方向に影響がないことを示すため,from/toを入れ替えて記述する必要があります.
また,clock5種全ての組み合わせが必要なわけではなく,あるmoduleを通してclockが隣接するものだけで良いです*2.
set_false_path -from [get_clocks tx_clk_to_the_tse_mac] -to [get_clocks $System_Clock_int] set_false_path -from [get_clocks $System_Clock_int] -to [get_clocks tx_clk_to_the_tse_mac] set_false_path -from [get_clocks rx_clk_to_the_tse_mac] -to [get_clocks $System_Clock_int] set_false_path -from [get_clocks $System_Clock_int] -to [get_clocks rx_clk_to_the_tse_mac] set_false_path -from [get_clocks tx_clk_to_the_tse_mac] -to [get_clocks $Slow_Clock_int] set_false_path -from [get_clocks $Slow_Clock_int] -to [get_clocks tx_clk_to_the_tse_mac] set_false_path -from [get_clocks rx_clk_to_the_tse_mac] -to [get_clocks $Slow_Clock_int] set_false_path -from [get_clocks $Slow_Clock_int] -to [get_clocks rx_clk_to_the_tse_mac]
Ethernet Phy-moduleのclockについて,false path設定を行っている模様(MAC-phyは追いかけてないのでスルー).
#Constrain MAC network-side interface clocks create_clock -period "125 MHz" -name tx_clk_to_the_tse_mac [ get_keepers HC_TX_CLK] create_clock -period "125 MHz" -name rx_clk_to_the_tse_mac [ get_keepers HC_RX_CLK]
(MAC-phyは追いかけてないのでスルー).
#Constrain timing for half duplex logic set_multicycle_path -setup 4 -from [ get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|altera_tse_altsyncram_dpm_fifo:U_RTSM|altsyncram*] -to [ get_keepers *] set_multicycle_path -setup 4 -from [ get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|altera_tse_retransmit_cntl:U_RETR|*] -to [ get_keepers *] set_multicycle_path -setup 4 -from [ get_keepers *] -to [ get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|altera_tse_retransmit_cntl:U_RETR|*] set_multicycle_path -setup 4 -from [ get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|half_duplex_ena_reg2] -to [ get_keepers *] set_multicycle_path -hold 4 -from [ get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|altera_tse_altsyncram_dpm_fifo:U_RTSM|altsyncram*] -to [ get_keepers *] set_multicycle_path -hold 4 -from [ get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|altera_tse_retransmit_cntl:U_RETR|*] -to [ get_keepers *] set_multicycle_path -hold 4 -from [ get_keepers *] -to [ get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|altera_tse_retransmit_cntl:U_RETR|*] set_multicycle_path -hold 4 -from [ get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|half_duplex_ena_reg2] -to [ get_keepers *] set_max_delay 7 -from [get_registers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|dout_reg_sft*] -to [get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_top_1geth:U_GETH|altera_tse_mac_tx:U_TX|*] set_max_delay 7 -from [get_registers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|eop_sft*] -to [get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_top_1geth:U_GETH|altera_tse_mac_tx:U_TX|*] set_max_delay 7 -from [get_registers *|altera_tse_top_w_fifo:U_MAC|altera_tse_tx_min_ff:U_TXFF|sop_reg*] -to [get_keepers *|altera_tse_top_w_fifo:U_MAC|altera_tse_top_1geth:U_GETH|altera_tse_mac_tx:U_TX|*]
(MAC-phyは追いかけてないのでスルー).