


Bagaimana untuk menyelesaikan masalah yang Flink tidak dapat mencari skrip tugas python ketika mengemukakan pekerjaan pyfliink ke permohonan benang?
Apr 19, 2025 pm 05:21 PMPenyelesaian kepada skrip python tidak dijumpai apabila Flink mengemukakan pekerjaan pyfliin ke benang
Apabila mengemukakan pekerjaan PyFliink ke benang menggunakan Flink, jika anda menghadapi ralat di mana skrip Python tidak dapat dijumpai, biasanya disebabkan oleh ralat konfigurasi laluan skrip Python atau masalah penetapan persekitaran Python. Artikel ini menganalisis dan menyelesaikan masalah ini.
Anda mengemukakan pekerjaan PyFliink menggunakan arahan berikut:
./flink Run-Application -t Benang-Application \ -dyarn.application.name = Flinkcdctestpython \ -dyarn.provided.lib.dirs = "hdfs: // nameservice1/pyflink/flink-dist-181" \ -Pyarch hdfs: //nameservice1/pyfliink/pyfliink181.zip \ -pyclientexec pyfliink181.zip/pyfliink181/bin/python \ -pyexec pyfliink181.zip/pyfliink181/bin/python \ -py hdfs: //nameservice1/pyflink/wc2.py
Mesej ralat adalah seperti berikut:
<code>2024-05-24 16:38:02,030 info org.apache.flink.client.python.pythondriver [] - pyflink181.zip/pyflink181/bin/python: can't open file 'hdfs://nameservice1/pyflink/wc2.py': [errno 2] no such file or directory</code>
Kesalahan ini menunjukkan bahawa Flink tidak dapat mencari skrip Python yang ditentukan wc2.py
Walau bagaimanapun, konfigurasi HDFS adalah normal apabila mengemukakan pekerjaan Java, yang bermaksud tidak ada masalah dengan konfigurasi HDFS itu sendiri.
Masalahnya mungkin terletak pada aspek berikut:
-
Laluan Skrip Python: Semak semula sama ada
hdfs://nameservice1/pyflink/wc2.py
adalah betul dan sama ada failwc2.py
wujud di bawah laluan ini. Sahkan menggunakan arahan HDFS:hdfs dfs -ls hdfs: //nameservice1/pyflink/wc2.py
-
Konfigurasi Alam Sekitar Python: Parameter
-pyclientexec
dan-pyexec
Parameter menentukan persekitaran pelaksanaan Python. Pastikan persekitaran Python dipyflink181.zip
dikonfigurasi dengan betul dan mempunyai akses kepada HDFS. Adalah disyorkan untuk menunjukkan parameter terus ke laluan persekitaran Python pada HDFS:-pyclientexec hdfs: //nameservice1/pyflink/pyflink181.zip/pyfliink181/bin/python -pyexec hdfs: //nameservice1/pyflink/pyfliink181.zip/pyfliink181/bin/python
-
Isu Kebenaran: Pastikan kerja Flink mempunyai kebenaran untuk mengakses fail skrip Python pada HDFS. Semak Kebenaran Fail:
hdfs dfs -ls -h hdfs: //nameservice1/pyflink/wc2.py
Keserasian Versi Flink dan PyFliin: Sahkan versi Flink bersesuaian dengan versi PyFliink. Mismatch versi boleh menyebabkan masalah.
Melalui langkah -langkah di atas, anda harus dapat mencari dan menyelesaikan masalah yang Flink tidak dapat mencari skrip Python ketika mengemukakan pekerjaan PyFliink. Jika masalah berterusan, periksa fail log FLINK dan PYFLINK untuk lebih banyak petunjuk.
Atas ialah kandungan terperinci Bagaimana untuk menyelesaikan masalah yang Flink tidak dapat mencari skrip tugas python ketika mengemukakan pekerjaan pyfliink ke permohonan benang?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Alat AI Hot

Undress AI Tool
Gambar buka pakaian secara percuma

Undresser.AI Undress
Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover
Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Clothoff.io
Penyingkiran pakaian AI

Video Face Swap
Tukar muka dalam mana-mana video dengan mudah menggunakan alat tukar muka AI percuma kami!

Artikel Panas

Alat panas

Notepad++7.3.1
Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina
Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1
Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6
Alat pembangunan web visual

SublimeText3 versi Mac
Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Topik panas

Untuk merealisasikan pembetulan ralat teks dan pengoptimuman sintaks dengan AI, anda perlu mengikuti langkah -langkah berikut: 1. Pilih model AI atau API yang sesuai, seperti Baidu, Tencent API atau perpustakaan NLP sumber terbuka; 2. Panggil API melalui curl atau Guzzle PHP dan memproses hasil pulangan; 3. Maklumat pembetulan ralat paparan dalam aplikasi dan membenarkan pengguna memilih sama ada untuk mengadopsinya; 4. Gunakan php-l dan php_codesniffer untuk pengesanan sintaks dan pengoptimuman kod; 5. Secara berterusan mengumpul maklum balas dan mengemas kini model atau peraturan untuk meningkatkan kesannya. Apabila memilih AIAPI, fokus pada menilai ketepatan, kelajuan tindak balas, harga dan sokongan untuk PHP. Pengoptimuman kod harus mengikuti spesifikasi PSR, gunakan cache yang munasabah, elakkan pertanyaan bulat, mengkaji semula kod secara berkala, dan gunakan x

Input suara pengguna ditangkap dan dihantar ke backend PHP melalui API Mediarecorder JavaScript front-end; 2. PHP menjimatkan audio sebagai fail sementara dan memanggil STTAPI (seperti Pengiktirafan Suara Google atau Baidu) untuk mengubahnya menjadi teks; 3. PHP menghantar teks kepada perkhidmatan AI (seperti Openaigpt) untuk mendapatkan jawapan pintar; 4. PHP kemudian memanggil TTSAPI (seperti sintesis Baidu atau Google Voice) untuk menukar balasan ke fail suara; 5. PHP mengalir fail suara kembali ke bahagian depan untuk bermain, menyelesaikan interaksi. Seluruh proses dikuasai oleh PHP untuk memastikan hubungan lancar antara semua pautan.

Peranan utama homebrew dalam pembinaan persekitaran MAC adalah untuk memudahkan pemasangan dan pengurusan perisian. 1. Homebrew secara automatik mengendalikan kebergantungan dan merangkumi kompilasi kompleks dan proses pemasangan ke dalam arahan mudah; 2. Menyediakan ekosistem pakej perisian bersatu untuk memastikan penyeragaman lokasi pemasangan perisian dan konfigurasi; 3. Mengintegrasikan fungsi pengurusan perkhidmatan, dan dengan mudah boleh memulakan dan menghentikan perkhidmatan melalui brewservices; 4. Menaik taraf dan penyelenggaraan perisian yang mudah, dan meningkatkan keselamatan dan fungsi sistem.

Gunakan sendi Seaborn untuk dengan cepat menggambarkan hubungan dan pengedaran antara dua pembolehubah; 2. 3. Tambah garis regresi dan maklumat ketumpatan kepada jenis = "reg", dan gabungkan marginal_kws untuk menetapkan gaya plot tepi; 4. Apabila jumlah data besar, disarankan untuk menggunakan "hex"

Untuk mengintegrasikan teknologi pengkomputeran sentimen AI ke dalam aplikasi PHP, terasnya adalah menggunakan perkhidmatan awan AIAPI (seperti Google, AWS, dan Azure) untuk analisis sentimen, menghantar teks melalui permintaan HTTP dan menghuraikan hasil JSON yang dikembalikan, dan menyimpan data emosi ke dalam pangkalan data, dengan itu menyedari pemprosesan automatik dan pemahaman data maklum balas pengguna. Langkah -langkah khusus termasuk: 1. Pilih API Analisis Sentimen AI yang sesuai, memandangkan ketepatan, kos, sokongan bahasa dan kerumitan integrasi; 2. Gunakan Guzzle atau Curl untuk menghantar permintaan, menyimpan skor sentimen, label, dan maklumat intensiti; 3. Membina papan pemuka visual untuk menyokong penyortiran keutamaan, analisis trend, arah lelaran produk dan segmentasi pengguna; 4. Menanggapi cabaran teknikal, seperti sekatan dan nombor panggilan API

Senarai rentetan boleh digabungkan dengan kaedah Join (), seperti '' .join (kata) untuk mendapatkan "HelloWorldFrompython"; 2. Senarai nombor mesti ditukar kepada rentetan dengan peta (str, nombor) atau [str (x) forxinnumbers] sebelum menyertai; 3. Mana -mana senarai jenis boleh ditukar secara langsung kepada rentetan dengan kurungan dan petikan, sesuai untuk debugging; 4. Format tersuai boleh dilaksanakan oleh ekspresi penjana yang digabungkan dengan gabungan (), seperti '|' .join (f "[{item}]" foriteminitems) output "[a] | [a]

Pythoncanbeoptimizedformemory-boundoperationsbyreducingoverheadthroughgenerators, efisiendataStructures, danManagingObjectlifetimes.first, useGeneratorsInsteadofListStoprocesslargedataSetSoneiteMatime, mengelakkan muat turun muat turun, coose

pandas.melt () digunakan untuk menukar data format yang luas ke dalam format yang panjang. Jawapannya adalah untuk menentukan nama lajur baru dengan menentukan id_vars mengekalkan lajur pengenalan, nilai -nilai pilihan lajur untuk dicairkan, var_name dan value_name, 1.id_vars = 'nama' bermaksud bahawa lajur nama tetap tidak berubah, 2.value_vars = ['math', 'bahasa Inggeris' Nama, 4.value_name = 'Score' menetapkan nama lajur baru nilai asal, dan akhirnya menghasilkan tiga lajur termasuk nama, subjek dan skor.
