CFU Playground: Kerangka Sumber Terbuka Full-Stack untuk Akselerasi TinyML di FPGA

CFU Playground: Kerangka Sumber Terbuka Full-Stack untuk Akselerasi TinyML di FPGA

Ingin prosesor ML yang lebih cepat? Lakukan sendiri!

Proyek ini menyediakan kerangka kerja yang dapat digunakan oleh seorang insinyur, magang, atau siswa untuk merancang dan mengevaluasi peningkatan ke FPGA- berbasis prosesor “lunak”, khusus untuk meningkatkan kinerja tugas pembelajaran mesin (ML). Tujuannya adalah untuk mengabstraksikan sebagian besar detail infrastruktur sehingga pengguna dapat mempercepat dengan cepat dan hanya fokus pada penambahan instruksi prosesor baru, mengeksploitasinya dalam komputasi, dan mengukur hasilnya.

Proyek ini memungkinkan iterasi cepat pada peningkatan prosesor — beberapa iterasi per hari.

Begini cara kerjanya:

  • Pilih model TensorFlow Lite; model deteksi orang terkuantisasi disediakan, atau bawa sendiri.
  • Jalankan inferensi pada papan Arty FPGA untuk mendapatkan jumlah siklus per lapisan.
  • Pilih operator TFLite untuk mempercepat, dan gali kode itu.
  • Desain baru instruksi yang dapat menggantikan beberapa operasi dasar.
  • Membangun unit fungsi kustom (sejumlah kecil perangkat keras) yang menjalankan instruksi baru .
  • Modifikasi kernel perpustakaan TFLite/Micro untuk menggunakan instruksi baru, yang tersedia sebagai intrinsik dengan sintaks panggilan fungsi.
  • Buat ulang Soc FPGA, kompilasi ulang perpustakaan TFLM, dan jalankan kembali untuk mengukur peningkatan.

Fokus di sini adalah performa, bukan demo. Input ke inferensi ML dikalengkan/dipalsukan, dan satu-satunya output adalah jumlah siklus. Perbaikan yang dibuat di sini dapat diekspor ke demo yang sebenarnya, tetapi saat ini tidak ada jalur yang disiapkan untuk melakukannya.

Dengan pengecualian Vivado, semua yang digunakan oleh proyek ini adalah open source.

Penafian: Ini bukan proyek Google yang didukung secara resmi. Dukungan dan/atau rilis baru mungkin terbatas.

Ini adalah prototipe awal kerangka kerja eksplorasi ML; mengharapkan kurangnya dokumentasi dan kerusakan sesekali. Jika Anda ingin berkolaborasi dalam membangun kerangka kerja ini, hubungi tcal@google.com! Lihat “Pedoman kontribusi” di bawah.

Perangkat keras/OS yang diperlukan

  • Salah satu papan yang didukung oleh Papan LiteX. Sebagian besar target Papan LiteX harus berfungsi.
    Itu telah diuji pada Arty A7-35T/100T, iCEBreaker, Fomu, OrangeCrab
      , ULX3S

        , dan Nexys Video

          boards.

  • Satu-satunya OS host yang didukung adalah Linux (Debian / Ubuntu).

Anda tidak memerlukan papan apa pun jika ingin menjalankan simulasi Renode atau Verilator.

Perangkat lunak yang diasumsikan

  • FPGA Toolchain: itu tergantung pada papan yang dipilih. Jika Anda sudah memasang rantai alat untuk papan Anda, Anda dapat menggunakannya.

Untuk papan dengan bagian Xilinx XC7, Anda dapat menggunakan Vivado, yang harus diinstal secara manual (ini panduan kami), atau rantai alat SymbiFlow open-source, yang dapat dengan mudah diinstal menggunakan Conda (lihat Panduan Pemasangan).

Untuk papan dengan Lattice iCE40, ECP5, atau Nexus FPGA, Anda dapat menginstal seperangkat alat sumber terbuka yang sesuai baik melalui Conda (lihat Panduan Penyiapan) atau sendiri dengan membangun dari sumber. Atau, Anda dapat menggunakan toolchain Lattice (Radiant/Diamond).

Jika Anda ingin mencoba berbagai hal menggunakan simulasi Renode, maka Anda tidak memerlukan board atau toolchain. Anda juga dapat melakukan simulasi akurat siklus tingkat Verilog dengan Verilator, tetapi ini jauh lebih lambat. Renode diinstal oleh skrip setup.

Paket lain yang diperlukan akan diperiksa dan, jika pada sistem berbasis Debian, otomatis diinstal oleh skrip setup di bawah.

Mempersiapkan

Klon repo ini, cd ke dalamnya, lalu jalankan:

Gunakan dengan papan

Papan default adalah Arty. Jika Anda ingin menggunakan papan yang berbeda, Anda harus menentukan target, misalnya TARGET=digilent_nexys_video

    .

    1. Bangun SoC dan muat bitstream ke Arty: 
      CD proj/proj_template buat prog

      Ini membangun SoC dengan CFU default dari proj/proj_template. Nanti Anda akan menyalin ini dan memodifikasinya untuk membuat proyek Anda sendiri.

    2. Buat program RISC-V dan jalankan di SoC yang baru saja Anda muat ke Arty:

    3. Gunakan tanpa papan

      Jika Anda tidak memiliki papan yang didukung oleh Papan LiteX, Anda dapat menggunakan Renode atau Verilator untuk mensimulasikannya.

      Untuk menggunakan Renode untuk mengeksekusi pada simulator pada mesin host (tidak diperlukan papan Vivado atau Arty), jalankan:

      Untuk menggunakan Verilator untuk mengeksekusi pada simulator tingkat RTL yang akurat siklus ( tidak diperlukan papan Vivado atau Arty), jalankan:

      Bendera make paling berguna

      4. Pilihan

      common_soc

      digilent_arty

      Penjelasan Contoh Bawaan
      PERON
      Pilih platform SoC yang Anda inginkan untuk membangun: hps atau sim atau umum_soc membuat bitstream PLATFORM=hps
      TARGET

      		Pilih salah satu dari banyak target dari repositori LiteX Boards,
      common_soc akan mengambil BaseSoC dari yang ditentukan target.py      		 buat bitstream TARGET=nexys_video_board
      USE_VIVADO
      Gunakan rantai alat Vivado buat bitstream USE_VIVADO=1 0 USE_SYMBIFLOW Gunakan rantai alat Symbiflow buat bitstream USE_SYMBIFLOW=1 0 UART_SPEED Pilih baudrate UART membuat bitstream UART_SPEED=115200 3686400 ABAIKAN_TIMING Abaikan waktu kendala (hanya untuk Vivado) buat bitstream USE_VIVADO=1 IGNORE_TIMING=1

      0

  • LiteX: Kerangka kerja sumber terbuka untuk merakit SoC (CPU + periferal)
  • VexRiscv: RISC sumber terbuka- V soft CPU yang dioptimalkan untuk FPGA
  • nMigen: Python toolbox untuk membangun perangkat keras digital

    • Berlisensi di bawah lisensi Apache-2.0

    Lihat file LISENSI.

    Pedoman kontribusi

    Jika Anda ingin berkontribusi di CFU Playground, pastikan untuk membaca panduan kontribusi. Proyek ini mematuhi kode etik Google. Dengan berpartisipasi, Anda diharapkan untuk menjunjung tinggi kode ini.

      Baca selengkapnya

      Rekomendasi:

      • KubeCon + CloudNativeCon Soroti Keamanan untuk Open Source KubeCon + CloudNativeCon Amerika Utara minggu ini secara langsung dan konferensi virtual menempatkan keamanan untuk pengembangan sumber terbuka kembali menjadi sorotan sementara juga membicarakan peningkatan pesat cloud native. Pryanka Sharma,…
      • 4 Hal Paling Penting yang Dapat Anda Kerjakan Tahun Ini Saya baru-baru ini berbicara dengan seorang pemilik bisnis, yang tampaknya bangga dengan daftar tugas yang panjang. Setelah sedikit dorongan, saya mengetahui bahwa mereka mengira daftar tugas yang lengkap adalah tanda…
      • Di mana membeli CPU 'Alder Lake' generasi… Gordon Mah Ung Pengecer mulai mengungkapkan harga jalanan dan ketersediaan untuk prosesor Intel Core "Alder Lake" generasi ke-12 yang baru, dan meskipun tidak aneh, mereka 'tidak terlalu cantik baik. CPU…
      • SubQuery: Membuat Kompatibilitas Lintas Rantai… SubQuery adalah agregasi data terdesentralisasi dan lapisan kueri antara blockchain Layer-1 dan aplikasi terdesentralisasi (dApps).Ini dirancang untuk membantu pengembang fokus pada kasus penggunaan inti dan fungsi front-end – sehingga mereka…
      • Coinpool: Panduan Lengkap Mengenai Platform Mining… Mining cryptocurrency menjadi salah satu cara populer untuk mendapatkan mata uang digital. Coinpool adalah salah satu platform mining cryptocurrency yang dapat membantu Anda memulai aktivitas mining dengan lebih mudah. Dalam…
      • Instrumen V Collection Arturia sekarang memiliki… Sekarang jauh lebih mudah menggunakan softsynths Arturia di MacBook baru Anda. Arturia telah merilis pembaruan V Collection 8.2 gratis yang menambahkan dukungan asli ke suite (saat ini didiskon) untuk Mac…
      • CPU AMD Ryzen 7000 series Zen 4 yang baru dirilis… Baru-baru ini, AMD telah secara resmi mengumumkan peluncuran seri CPU Desktop AMD Ryzen 7000 yang barudidukung oleh arsitektur mikro Zen 4 terbaru dari AMD, didukung oleh node proses N5 5nm…
      • BrainChip Bermitra Dengan MegaChips Untuk… Tanggal publikasi: 21 Nov 2021 18:18 ESTBrainChip Holdings Ltd (ASX: BRN), (OTCQX: BCHPY) penyedia terkemuka kecerdasan buatan kinerja tinggi berdaya sangat rendah teknologi dan produsen chip AI neuromorfik dan IP…
      • Mana yang lebih baik untuk bermain game Ada persaingan sengit antara gamer Android dan iPhone untuk memperebutkan gelar perangkat gaming terbaik. Namun, tidak ada sistem operasi yang secara inheren lebih unggul atau berperingkat lebih tinggi dari yang…
      • 2021 adalah tahun terobosan bagi AI 29 Desember 2021 16:40 Kredit Gambar: Andriy Onufriyenko/Getty Images Mendengar dari CIO, CTO, dan eksekutif tingkat C dan senior lainnya tentang data dan strategi AI di Future of Work Summit…
      • Pachyderm sedang merekrut Pemimpin DevRel untuk… Ingin menjadi bagian dari sekelompok orang yang bersemangat yang menjalankan misi untuk membuat ilmu data dapat dijelaskan, dapat diulang, dan terukur? Bergabunglah dengan “The Pach”! Lihat Posisi Terbuka Mengapa Bekerja…
      • 3 Dampak AI di Industri Terjemahan Mesin Pendapat yang dikemukakan oleh kontributor Entrepreneur adalah milik mereka sendiri. Anda sedang membaca Entrepreneur United States, sebuah waralaba internasional dari Entrepreneur Media. Sepanjang sejarah, komunikasi telah menjadi komponen penting dari…
      • Aplikasi Tunai Jack Dorsey Mengintegrasikan Jaringan… Aplikasi Tunai telah mengintegrasikan Lightning Network.Semua pengguna sekarang dapat langsung mengirim bitcoin ke seluruh dunia. Kit Pengembangan Petir Spiral memberdayakan integrasi Aplikasi Tunai.Pengguna platform pembayaran seluler Block App Cash sekarang…
      • Mengapa penawaran khusus harus menjadi bagian dari… Dalam lanskap periklanan digital yang ramai, kesuksesan bermuara pada hasil yang terbukti. Pemasar semakin berusaha untuk menyebarkan wawasan unik dan berbeda untuk membeli secara lebih efektif, sementara agensi, pemain teknologi…
      • FTC menggugat untuk menghentikan pembelian Nvidia Arm Berdebat bahwa inovasi dan persaingan akan dirugikan, Komisi Perdagangan Federal pada hari Kamis menggugat untuk membatalkan rencana pembelian Arm oleh raksasa grafis Nvidia. Badan federal yang dibebankan dengan penegakan anti-trust…
      • Bagaimana membuat AI lebih ramah lingkungan dan… Wirth Research, sebuah perusahaan teknik yang mengkhususkan diri dalam dinamika fluida komputasi, menjadi semakin peduli dengan kelestarian lingkungan. Awalnya berfokus pada desain mobil balap, memungkinkan klien untuk mengganti angin yang…
      • 3 Kesalahan Terbesar yang Dilakukan Perusahaan Saat… Menurut Hosting Tribunal, 94% perusahaan memiliki kehadiran cloud, tetapi hanya 20% yang telah mengalami transformasi cloud. Sebagian, itu karena transformasi cloud adalah inisiatif yang mahal bagi perusahaan, menghasilkan jutaan dolar…
      • Apple Diam-diam Menyertakan Fitur Luar Biasa di… IPhone 13 Pro memiliki beberapa fitur hebat yang sulit untuk dilewatkan. Sistem kamera, yang secara harfiah lebih besar dari sebelumnya, adalah salah satu contoh nyata. Tidak hanya lensa dan sensor…
      • Pandangan Orang Dalam tentang Program AI Humana Bagaimana Anda membawa kecerdasan buatan ke dalam organisasi yang berfungsi dengan baik tanpanya selama beberapa dekade? Itulah tantangan yang dihadapi oleh Humana Chief Data and Analytics Officer Slawek Kierner saat…
      • Apa yang Terjadi dengan Superkomputer Bisnis? Pernah tampak tak terelakkan -- suatu hal yang pasti -- bahwa superkomputer akan membantu bisnis mengatasi tuntutan yang dipaksakan oleh basis data besar, alat teknik yang kompleks, dan prosesor lainnya…
      • Bagaimana Membangun Ketangkasan Digital Menjadi… Saat kita bergerak ke fase pandemi berikutnya, lebih dari 90% organisasi menengah berencana untuk bermigrasi ke struktur kerja hibrida untuk setidaknya beberapa karyawan mereka. Lingkungan kerja hybrid menekankan pentingnya investasi…
      • Apa itu layanan desktop dan bagaimana cara kerjanya? Desktop sebagai layanan (DaaS) adalah model untuk mengirimkan data melalui Internet. Ini adalah cara untuk menyerahkan pengelolaan dan penyimpanan data kepada pihak ketiga. Dengan DaaS, perusahaan dapat fokus pada kompetensi…
      • Acer memperkenalkan laptop Windows 11 untuk para… 4 Oktober 2021 13:00 Acer Nitro adalah laptop Windows 11 baru untuk para gamer. Kredit Gambar: Acer Bergabunglah dengan pemimpin game online di GamesBeat Summit Next 9 November mendatang -10.…
      • Pengusaha perangkat lunak manajemen bisnis harus… Akan selalu ada beberapa hal yang terjadi, terlepas dari ukuran organisasi Anda. Mengelola terlalu banyak hal secara bersamaan tanpa membuat kesalahan tidak mungkin dilakukan. Jika Anda ingin memperbaiki semuanya, masuk…
      • Rahasia Xiaomi Mi T : Tips & Cara Memmaksimalkan Ponsel Anda ## Tips dan Trik Xiaomi 13T: Memaksimalkan Ponsel Anda dengan Fitur-fitur Canggih Xiaomi 13T hadir dengan berbagai fitur canggih yang dapat memudahkan dan mempercepat berbagai aktivitas Anda. Namun, tidak semua…
      • Mengukur kualitas manajemen proyek konstruksi Kualitas manajemen proyek menentukan seberapa baik proyek dikelola dan seberapa sukses proyek itu nantinya.Tapi bagaimana Anda mengukur kualitas manajemen proyek? Sebenarnya, apa itu manajemen proyek konstruksi? Manajemen proyek konstruksi berarti…
      • Desktop XPS baru Dell adalah pembangkit tenaga… Sesuatu yang dinanti-nantikan: Setelah berbulan-bulan antisipasi, Intel hari ini mengungkapkan CPU Alder Lake generasi ke-12. Ditetapkan untuk diluncurkan minggu depan, OEM telah mulai mengumumkan PC yang akan menggabungkan prosesor, dengan…
      • Acara Apple untuk iPhone SE 5G dan iPad Air bocor… Pembicaraan tentang 5G yang menyebar lebih jauh melalui jangkauan Apple terus berlanjut, dan sekarang kita mungkin memiliki tanggal untuk peluncuran perangkat keras besar pertama perusahaan tahun ini. Menurut Mark Gurman…
      • Bias dalam AI menyebar dan saatnya untuk memperbaiki masalah Apakah Anda melewatkan sesi dari Future of Work Summit? Kunjungi perpustakaan sesuai permintaan Future of Work Summit kami untuk streaming. Artikel ini disumbangkan oleh Loren Goodman, salah satu pendiri dan…
      • 5 Alat Manajemen Proyek untuk Pengembang Perangkat Lunak Ketika sebagian besar tim memikirkan perangkat lunak manajemen proyek, mereka berpikir untuk menggunakannya agar tetap teratur dan sesuai tugas. Namun, untuk pengembang perangkat lunak, alat manajemen proyek lebih dari itu.…
      Designed by SuaraSekitar Terkini
      © Copyright 2024, All Rights Reserved