Mulai Cepat: Membuat kumpulan keterampilan di portal Microsoft Azure

Dalam panduan ini, Anda mempelajari bagaimana kumpulan keterampilan di Pencarian Azure AI menambahkan pengenalan karakter optik (OCR), analisis gambar, deteksi bahasa, penggabungan teks, dan pengenalan entitas untuk menghasilkan konten yang dapat dicari melalui teks dalam indeks.

Anda bisa menjalankan wizard Impor data di portal Azure untuk menerapkan keterampilan yang membuat dan mengubah konten tekstual selama pengindeksan. Inputnya adalah data mentah Anda, biasanya blob di Azure Storage. Output adalah indeks yang dapat dicari yang berisi teks gambar, keterangan, dan entitas yang dihasilkan AI. Anda kemudian dapat mengkueri konten yang dihasilkan di portal Microsoft Azure menggunakan Penjelajah pencarian.

Sebelum menjalankan wizard, Anda membuat beberapa sumber daya dan mengunggah file sampel.

Prasyarat

• Akun Azure dengan langganan aktif. Buat akun secara gratis.

• Layanan Pencarian Azure AI. Buat layanan atau temukan layanan yang sudah ada di langganan Anda saat ini. Anda dapat menggunakan layanan gratis untuk panduan memulai cepat ini.

• Akun Azure Storage. Gunakan Azure Blob Storage pada akun performa standar (tujuan umum v2). Untuk menghindari biaya bandwidth, gunakan wilayah yang sama dengan Pencarian Azure AI.

Menyiapkan data sampel

Di bagian ini, Anda membuat kontainer Azure Storage untuk menyimpan data sampel yang terdiri dari berbagai jenis file, termasuk gambar dan file aplikasi yang tidak dapat dicari teks lengkap dalam format aslinya.

Untuk menyiapkan data sampel untuk pengenalan cepat ini:

1. Buka akun Azure Storage Anda di portal Microsoft Azure.

2. Dari panel kiri, pilih penyimpanan data>Kontainer.

3. Buat kontainer, lalu unggah data sampel ke kontainer.

Jalankan wizard

Untuk menjalankan wizard:

1. Buka layanan pencarian Anda di portal Microsoft Azure.

2. Pada halaman Gambaran Umum , pilih Impor data.

   

3. Pilih Azure Blob Storage untuk sumber data.

   

4. Pilih Pencarian kata kunci.

   

Langkah 1: Membuat sumber data

Pencarian Azure AI memerlukan koneksi ke sumber data untuk penyerapan dan pengindeksan konten. Dalam hal ini, sumber data adalah akun Azure Storage Anda.

Untuk membuat sumber data:

1. Pada halaman Sambungkan ke data Anda , pilih langganan Azure Anda.

2. Pilih akun penyimpanan Anda, lalu pilih kontainer yang Anda buat.

   

3. Pilih Selanjutnya.

Jika Anda mendapatkan Error detecting index schema from data source, pengindeks yang mendukung wizard tidak dapat tersambung ke sumber data Anda. Sumber data kemungkinan besar memiliki perlindungan keamanan. Coba solusi berikut, lalu jalankan ulang wizard.

Langkah 2: Menambahkan keterampilan kognitif

Langkah selanjutnya adalah mengonfigurasi pengayaan AI untuk memanggil OCR, analisis gambar, dan pengenalan entitas.

OCR dan analisis gambar tersedia untuk blob di Azure Blob Storage dan Azure Data Lake Storage (ADLS) Gen2 dan untuk konten gambar di Microsoft OneLake. Gambar dapat berupa file mandiri atau gambar yang disematkan dalam PDF atau file lainnya.

Untuk menambahkan keterampilan:

1. Pilih Ekstrak entitas, lalu pilih ikon roda gigi.

2. Pilih dan simpan kotak centang berikut:

   • Orang

   • Lokasi

   • Organisasi

   

3. Pilih Ekstrak teks dari gambar, lalu pilih ikon roda gigi.

4. Pilih dan simpan kotak centang berikut:

   • Membuat tag

   • Mengategorikan konten

   

5. Biarkan kotak centang Gunakan sumber daya Foundry Tools gratis (pengayaan terbatas) dipilih.

   Data sampel terdiri dari 14 file, sehingga penjatahan gratis 20 transaksi pada Foundry Tools sudah cukup.

6. Pilih Selanjutnya.

Langkah 3: Mengonfigurasi indeks

Indeks berisi konten yang dapat dicari. Wizard biasanya dapat membuat skema dengan mengambil sampel sumber data. Dalam langkah ini, Anda meninjau skema yang dihasilkan dan berpotensi merevisi pengaturan apa pun.

Untuk panduan memulai cepat ini, asisten menetapkan nilai default yang wajar.

• Bidang default didasarkan pada properti metadata blob yang ada dan bidang baru untuk output pengayaan, seperti persons, locations, dan organizations. Jenis data disimpulkan dari metadata dan dengan pengambilan sampel data.

  

• Kunci dokumen default adalah metadata_storage_path, yang dipilih karena bidang berisi nilai unik.

• Atribut bidang default didasarkan pada keterampilan yang Anda pilih. Misalnya, bidang yang dibuat oleh keterampilan Pengenalan Entitas (persons, , locationsdan organizations) dapat diambil, Dapat Difilter, Dapat Difaset, dan Dapat Dicari. Untuk melihat dan mengubah atribut ini, pilih bidang, lalu pilih Konfigurasikan bidang.

  Bidang yang dapat diambil dapat dikembalikan dalam hasil, sementara bidang yang dapat dicari mendukung pencarian teks lengkap. Gunakan Dapat Difilter jika Anda ingin menggunakan bidang dalam ekspresi filter.

  Menandai bidang sebagai Dapat Diambil tidak berarti bahwa bidang harus muncul di hasil pencarian. Anda dapat mengontrol bidang mana yang dikembalikan dengan menggunakan select parameter kueri.

Setelah Anda meninjau skema indeks, pilih Berikutnya.

Langkah 4: Lewati pengaturan tingkat lanjut

Wizard menawarkan pengaturan tingkat lanjut untuk peringkat semantik dan penjadwalan indeks, yang berada di luar cakupan Panduan Memulai Cepat ini. Lewati langkah ini dengan memilih Berikutnya.

Langkah 5: Meninjau dan membuat objek

Langkah terakhir adalah meninjau konfigurasi Anda dan membuat indeks, pengindeks, dan sumber data di layanan pencarian Anda. Indeksator mengotomatiskan proses ekstraksi konten dari sumber data Anda, memuat indeks, dan mengaktifkan eksekusi kumpulan keahlian.

Untuk meninjau dan membuat objek:

1. Terima prefiks nama objek default.

2. Tinjau konfigurasi objek.

   

   Pengayaan AI, peringkat semantik, dan penjadwalan pengindeks dinonaktifkan atau diatur ke nilai defaultnya karena Anda melewati langkah-langkah wizard mereka.

3. Pilih Buat untuk membuat objek secara bersamaan dan menjalankan pengindeks.

Status pemantau

Anda dapat memantau pembuatan pengindeks di portal Microsoft Azure. Pengindeksan berbasis keterampilan membutuhkan waktu lebih lama daripada pengindeksan berbasis teks, terutama OCR dan analisis gambar.

Untuk memantau kemajuan pengindeks:

1. Dari panel kiri, pilih Pengindeks.

2. Pilih pengindeks Anda dari daftar.

3. Pilih Berhasil (atau Gagal) untuk melihat detail eksekusi.

   

Dalam panduan cepat ini, terdapat beberapa peringatan, termasuk Could not execute skill because one or more skill input was invalid.. Peringatan ini memberi tahu Anda bahwa file PNG di dalam sumber data tidak menyediakan input teks untuk Pengenalan Entitas. Ini terjadi karena keterampilan OCR upstream tidak mengenali teks apa pun dalam gambar dan tidak dapat memberikan input teks ke keterampilan Pengenalan Entitas hilir.

Peringatan sering terjadi dalam pelaksanaan keterampilan. Saat Anda terbiasa dengan bagaimana keterampilan melakukan iterasi atas data Anda, Anda mungkin mulai memperhatikan pola dan mempelajari peringatan mana yang aman untuk diabaikan.

Kueri di Penjelajah pencarian

Untuk mengkueri indeks Anda:

1. Dari panel kiri, pilih Indeks.

2. Pilih indeks Anda dari daftar. Jika indeks tidak memiliki dokumen atau penyimpanan, tunggu hingga portal Microsoft Azure di-refresh.

3. Pada tab Penjelajah pencarian , masukkan string pencarian, seperti satya nadella.

Bilah pencarian menerima kata kunci, frasa dalam tanda kutip, dan operator. Misalnya: "Satya Nadella" +"Bill Gates" +"Steve Ballmer"

Hasil dikembalikan sebagai JSON verbose, yang bisa sulit dibaca, terutama dalam dokumen besar. Berikut adalah tips untuk mencari di alat ini:

• Beralih ke tampilan JSON untuk menentukan parameter yang membentuk hasil.
• Tambahkan select untuk membatasi bidang dalam hasil.
• Tambahkan count untuk menampilkan jumlah kecocokan.
• Gunakan Ctrl-F untuk mencari di dalam JSON untuk properti atau istilah tertentu.

Berikut adalah beberapa JSON yang dapat Anda tempelkan ke dalam tampilan:

{
"search": "\"Satya Nadella\" +\"Bill Gates\" +\"Steve Ballmer\"",
"count": true,
"select": "merged_content, persons"
}

Poin-poin penting

Anda telah membuat set keterampilan pertama Anda dan mempelajari langkah-langkah dasar pengindeksan berbasis keterampilan.

Beberapa konsep utama yang kami harap Anda ambil termasuk dependensi. Kumpulan keterampilan terikat ke pengindeks, dan pengindeks adalah Azure dan khusus sumber. Meskipun panduan cepat ini menggunakan Azure Blob Storage, sumber daya Azure lainnya tersedia. Untuk informasi selengkapnya, lihat Pengindeks di Pencarian Azure AI.

Konsep penting lainnya adalah bahwa keterampilan berfungsi pada berbagai jenis konten, dan ketika Anda menggunakan konten heterogen, beberapa masukan dilewatkan. Selain itu, file atau bidang besar mungkin melebihi batas pengindeks tingkat layanan Anda. Melihat peringatan saat peristiwa ini terjadi adalah hal yang normal.

Output diarahkan ke indeks pencarian, dan ada pemetaan antara pasangan nama-nilai yang dibuat selama pengindeksan dan setiap bidang individual dalam indeks Anda. Secara internal, wizard menyiapkan enrichment tree dan mendefinisikan skillset, menetapkan urutan operasi dan alur umum. Langkah-langkah ini disembunyikan dalam wizard, tetapi ketika Anda mulai menulis kode, konsep-konsep ini menjadi penting.

Terakhir, Anda mempelajari bahwa Anda dapat memverifikasi konten dengan mengkueri indeks. Pada akhirnya, Pencarian Azure AI menyediakan indeks yang dapat dicari yang dapat Anda kueri menggunakan sintaks kueri sederhana atau yang sepenuhnya diperluas. Indeks yang berisi bidang yang diperkaya sama seperti indeks lainnya. Anda dapat menggabungkan penganalisis standar atau kustom, profil penilaian, sinonim, navigasi tersaring, pencarian geografis, dan fitur Pencarian Azure AI lainnya.

Membersihkan sumber daya

Saat Anda bekerja di langganan Anda sendiri, ada baiknya untuk menyelesaikan proyek dengan menghapus sumber daya yang tidak lagi Anda butuhkan. Sumber daya yang dibiarkan berjalan dapat dikenakan biaya.

Di portal Microsoft Azure, pilih Semua sumber daya atau Grup sumber daya dari panel kiri untuk menemukan dan mengelola sumber daya. Anda dapat menghapus sumber daya satu per satu atau menghapus grup sumber daya untuk menghapus semua sumber daya sekaligus.

Jika Anda menggunakan layanan pencarian gratis, ingatlah bahwa Anda terbatas pada tiga indeks, pengindeks, dan sumber data. Anda dapat menghapus item individual di portal agar tetap di bawah batas.

Langkah selanjutnya

Anda dapat menggunakan portal Microsoft Azure, REST API, atau Azure SDK untuk membuat set keterampilan. Coba REST API dengan menggunakan klien REST dan lebih banyak data sampel: