intel LOGOA

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-n

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-n

baino gehiagoview

Teknologia amaituview eta VMware ESXi-n SAP HANA plataformarekin Intel Optane memoria iraunkorra erabiltzeko inplementatzeko jarraibideak.

Dokumentu honek lehendik dagoen Intel eta SAP argitalpenaren eguneratzea du helburu.
"Konfigurazio gida: Intel® Optane™ Persistent Memory eta SAP HANA® Platform Configuration", sarean eskuragarri dago intel.com/content/www/us/en/big-data/partners/ helbidean.
sap/sap-hana-and-intel-optane-configuration-guide.html. Eguneratze honek VMware ESXi makina birtual (VM) batean exekutatzen den Intel Optane memoria iraunkorra (PMem) SAP HANA konfiguratzeko behar diren prozedura gehigarriak eztabaidatuko ditu.

Lehendik dagoen gidan, sistema eragilea (OS) —edo SUSE Linux Enterprise Server
(SLES) edo Red Hat Enterprise Linux (RHEL): zuzenean exekutatzen da bare metalean edo ostalari OS gisa birtualizatu gabeko konfigurazio batean. Birtualizatu gabeko zerbitzari honetan SAP HANA Intel Optane PMem-ekin zabaltzeko urratsak (lehendik dagoen gidaren 7. orrialdean hasten direnak) honela azaltzen dira:

Urrats orokorrak

Urrats orokorrak: konfiguratu Intel Optane PMem SAP HANArako

  1. Instalatu kudeaketa utilitateak.
  2. Sortu App Direct eskualdeak (helburua): erabili tartekatzea.
  3. Berrabiarazi zerbitzaria: beharrezkoa da konfigurazio berria gaitzeko.
  4. Sortu App Direct izen-espazioak.
  5. Sortu a file sistema namespace gailuan.
  6. Konfiguratu SAP HANA memoria iraunkorra erabiltzeko file sistema.
  7. Berrabiarazi SAP HANA Intel Optane PMem aktibatzeko eta erabiltzen hasteko.

Ingurune birtualizatu batean hedatzeko, gida honek osagai bakoitzaren konfiguraziorako urratsak honela biltzen ditu:

Ostalaria:

  1. Konfiguratu Intel Optane PMem-erako zerbitzari-ostalaria BIOS erabiliz (saltzaileen espezifikoa).
  2. Sortu App Direct tartekaturiko eskualdeak eta egiaztatu VMware ESXi erabiltzeko konfiguratuta daudela.
    VM:
  3. Sortu 19 hardware bertsioa duen VM bat (VMware vSphere 7.0 U2) NVDIMM-ekin, eta baimendu hutsegitea beste ostalari batera egiten duzun bitartean.
  4. Editatu VMX VM konfigurazioa file eta egin NVDIMM-ak memoria-sarbide ez-uniformeak (NUMA) jakitun.
    OS:
  5. Sortu a file sistema OS sistemako namespace (DAX) gailuetan.
  6. Konfiguratu SAP HANA memoria iraunkorra erabiltzeko file sistema.
  7. Berrabiarazi SAP HANA Intel Optane PMem aktibatzeko eta erabiltzen hasteko.

Kontuan izan sistema eragilearen konfiguraziorako 5-7 urratsak lehendik dagoen gidaren berdinak direla, orain gonbidatutako sistema eragilearen inplementazioari aplikatzen zaizkiola izan ezik. Gida honek, beraz, 1-4 urratsetan eta metal hutseko instalazio baten aldeak izango ditu arreta.

Konfiguratu zerbitzari-ostalaria Intel Optane PMem-erako BIOS erabiliz
Lehendik zegoen gida argitaratu zenean, agindutako kudeaketa utilitateak, ipmctl eta ndctl, nagusiki komando-lerroko interfazea (CLI) oinarritzen ziren. Harrezkero, OEM saltzaile ezberdinek ekoitzitako sistema berriek modu zabalagoan hartu dute menuan gidatutako erabiltzaile-interfaze grafikoa (UI) beren Unified Extensible Firmware Interface (UEFI) edo BIOS zerbitzuetan. OEM bakoitzak askatasunez diseinatu du bere interfazea bere estilo eta erabilgarritasun eta kontrol integratuen esparrura egokitzeko.
Ondorioz, sistema bakoitzerako Intel Optane PMem konfiguratzeko behar diren urrats zehatzak aldatu egingo dira. Zenbait adibampOEM saltzaile ezberdinen Intel Optane PMem konfigurazio-pantailen fitxategiak erakusten dira hemen pantaila hauek nolakoak izan daitezkeen ideia bat emateko eta aurki litezkeen UI estiloen aniztasuna erakusteko.

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-1-n intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-2-n intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-3-n intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-4-n

UI estilo desberdintasunak kontuan hartu gabe, Intel Optane PMem hornitzeko helburua App Direct moduko eskualdeak sortzeko helburua berdina izaten jarraitzen du VMware ESXi bezalako erabilera-kasuetan eta birtualizatuetan. CLI bat erabiliz egin ziren aurreko urratsak menuan gidatutako edo inprimaki estiloko UI prozedura batekin ordezkatzen dira azken emaitza bera lortzeko. Hau da, Intel Optane PMem instalatuta duten socket guztietan App Direct eskualde interleading sortzea.

Prozesu honetan errazago nabigatzen laguntzeko, hurrengo taulak SAP HANA-rako OEM maila gorenetako saltzaile batzuek argitaratutako azken dokumentazio eta gidetarako estekak eskaintzen ditu. Jarraitu gida hauetako urratsak socket bakoitzerako App Direct eskualdeak sortzeko, eta osatu prozesua sistema berrabiaraziz konfigurazio berria gaitzeko. Edozein zalantza izanez gero, kontsultatu OEM talde teknikoari edo Intel-en laguntzari.

OEM saltzailea Intel Optane PMem konfigurazio gida/dokumentua Sareko esteka
 

Cisco

"Cisco UCS: Intel® Optane™ Data Center memoria iraunkorreko moduluak konfiguratzea eta kudeatzea" cisco.com/c/en/us/td/docs/unified_computing/ucs/persistent- memoria/b_Konfiguratzea_DC-Kudeatzea-Memoria-Iraunkorra- Moduluak.pdf
Dell Teknologiak "Dell EMC NVDIMM-N Persistent Memory User Guide" (Intel Optane PMem 100 seriea) https://dl.dell.com/topicspdf/nvdimm_n_user_guide_en-us.pdf
Dell Teknologiak "Dell EMC PMem 200 Series erabiltzailearen gida" https://dl.dell.com/topicspdf/pmem_15g_en-us.pdf
 

Fujitsu

"DCPMM (Datu Zentroko Memoria Iraunkorra) Komando-lerroko Interfazea" https://ssl.syncsearch.jp/click?url=https%3A%2F%2Fsupport. ts.fujitsu.com%2FSearch%2FSWP1235322. asp&query=dcpmm&site=7215VAWV
 

Fujitsu

"Konfiguratu DCPMM (Datu Zentroko memoria iraunkorra) UEFI konfigurazioan" https://ssl.syncsearch.jp/click?url=https%3A%2F%2Fsupport. ts.fujitsu.com%2FSearch%2FSWP1235339. asp&query=dcpmm&site=7215VAWV
 

Fujitsu

"Konfiguratu DCPMM (Data Center Persistent Memory) Linux-en" https://ssl.syncsearch.jp/click?url=https%3A%2F%2Fsupport. ts.fujitsu.com%2FSearch%2FSWP1235054. asp&query=dcpmm&site=7215VAWV
OEM saltzailea Intel Optane PMem konfigurazio gida/dokumentua Sareko esteka
HPE HPE Persistent Memory Erabiltzailearen Gida HPE ProLiant Gen10 zerbitzarietarako eta HPE Synergy" http://itdoc.hitachi.co.jp/manuals/ha8000v/hard/Gen10/ DCPMM/P16877-002_eu.pdf
HPE "Intel Optane memoria iraunkorra 100 seriea HPE Erabiltzaile Gidarako" https://support.hpe.com/hpesc/public/ docDisplay?docId=a00074717eu_us
 

Lenovo

"Nola aldatu Intel® Optane™ DC Persistent Memory Module funtzionamendu moduak UEFI bidez" https://datacentersupport.lenovo.com/us/en/products/ zerbitzariak/thinksystem/sr570/7y02/solutions/ht508257- nola-aldatu-intel-optane-dc-memoria-iraunkorra- modulu-funtzionamendu-moduak-uefi-ren bidez
Lenovo "Intel Optane DC memoria iraunkorra gaitzea Lenovo ThinkSystem zerbitzarietan" https://lenovopress.com/lp1167.pdf
Lenovo "Intel Optane DC Persistent Memory ezartzea VMware vSphere-rekin" https://lenovopress.com/lp1225.pdf
Supermikroa "Intel 1. Gen DCPMM memoria-konfigurazioa Intel Purley plataforma” https://www.supermicro.com/support/resources/memory/ DCPMM_1stGen_memory_config_purley.pdf
 

Supermikroa

"Intel® Optane™ Persistent Memory 200 Series konfigurazioa Supermicro X12SPx/X12Dxx/ X12Qxx plaka nagusietarako" https://www.supermicro.com/support/resources/memory/ Optane_PMem_200_Series_Config_X12QP_DP_UP.pdf

Sortu App Direct tartekaturiko eskualdeak eta egiaztatu haien konfigurazioa VMware ESXi erabiltzeko
OEM UEFI edo BIOS menuek normalean UI pantailak eskaintzen dituzte socket bakoitzeko App Direct eskualdeak sortu direla baieztatzeko. VMware-rekin ere erabil dezakezu web bezeroa edo esxcli komandoa hau egiaztatzeko. Tik web bezeroa, joan Biltegiratze atalera eta, ondoren, hautatu Memoria iraunkorra fitxa.

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-5-n

Ikusiko duzun bezala, izen-espazio lehenetsi bat sortzen da automatikoki eskualde bakoitzeko. (Adibide hauample-a bi socket sistemarako da.) Esxcli-rako, komando hau erabil dezakezu:

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-6-n

Sortu 19 hardware bertsioa duen VM bat (VMware vSphere 7.0 U2) NVDIMM-ekin eta baimendu hutsegitea beste ostalari batera
Inplementatu VM bat onartutako sistema eragile gonbidatu batekin (SLES edo RHEL SAP HANArako) eta SAP HANA 2.0 SPS 04 edo handiagoa instalatuta
vSphere VM-ak hornitzeko eta inplementatzeko hainbat modu daude. Teknika hauek VMware-ren lineako dokumentu-liburutegiak hobekien deskribatzen eta estaltzen ditu "VMware vSphere—Deploying Virtual".
Makinak” (https://docs.vmware.com/en/VMware-vSphere/7.0/com.vmware.vsphere.vm_admin.doc/GUID-39D19B2B-A11C-42AE-AC80-DDA8682AB42C.html).

Zure ingurunerako metodorik onena aukeratzeko, VM bat sortu beharko duzu egokia den sistema eragilearekin eta SAP HANA instalatu bertan zerbitzari fisiko batean egingo zenukeen bezala (metal hutsean).
Sortu App Direct izen-espazioak inplementatutako VM-n Intel Optane PMem (NVDIMM) gailuak gehituta

VM zabaldu ondoren, Intel Optane PMem gailuak gehitu behar dira. NVDIMM-ak VM-ra gehitu aurretik, egiaztatu Intel Optane PMem eskualdeak eta izen-espazioak BIOSan behar bezala sortu diren. Ziurtatu Intel Optane PMem guztiak hautatu dituzula (% 100). Ziurtatu, halaber, Persistent memoria mota App Direct Interleaved gisa ezarrita dagoela. Memoria modua % 0an ezarri behar da.

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-7-n

Itzali VM-a, eta editatu VM ezarpenak Gehitu gailu berria aukera erabiliz eta NVDIMM hautatuta. Praktika estandarra ostalariaren CPU socket bakoitzeko NVDIMM gailu bat sortzea da. Jo ezazu zure OEMaren jardunbide egokien gida bat eskuragarri badago.
Urrats honek automatikoki sortuko ditu izen-espazioak.

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-8-n

Editatu NVDIMMen tamaina behar den moduan, eta, ondoren, hautatu Baimendu hutsegitea beste ostalari batean NVDIMM gailu guztietan.

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-9-n

NVDIMM gailurik zerrendatuta ez badago, saiatu VM bateragarritasuna eguneratzen. Hautatu VM, hautatu Ekintzak > Bateragarritasuna > Eguneratu VM bateragarritasuna eta ziurtatu VM bateragarria dela ESXI 7.0 U2 eta berriagoa.

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-10-n

NVDIMM gailuak behar bezala gehitu ondoren, zure VM konfigurazio-ezarpenek honela izan beharko lukete:

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-11-n

Konfigurazioak behar bezala egin badira, VMware ESXi Intel Optane PMem biltegia views honako zifra hauen itxura izan beharko luke.

VMware ESXi Intel Optane PMem biltegia view- moduluak

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-12-n

VMware ESXi Intel Optane PMem biltegia view— tartekatu multzoak

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-13-n

VMware ESXi PMem biltegiratzea view- izen-espazioak

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-14-n

Oharra: Erakutsitako tartekatu-multzoen zenbakiak hardware-konfigurazioaren araberakoak dira eta baliteke zure sistemarako desberdinak izan.
Ondoren, NVDIMM eta NVDIMM kontrolagailuak gehi ditzakezu SAP HANA VM-ra. Zure sisteman erabilgarri dagoen memoria guztia erabiltzeko, hautatu NVDIMM bakoitzeko gehienezko tamaina.

NVDIMM sortzea VMware vCenter erabiltzailearen interfaze grafikoaren bidez

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-15-n

Editatu VMX VM konfigurazioa file eta egin NVDIMMak NUMA-k jakitun
Lehenespenez, Intel Optane PMem esleipenak VMkernel-en VM NVDIMMetarako ez du NUMA kontuan hartzen. Honen ondorioz, VM-a eta esleitutako Intel Optane PMem NUMA nodo desberdinetan exekutatzen dira, eta horrek NVDIMM-en VM-ra urruneko sarbidea eragingo du, eta ondorioz, errendimendu eskasa izango da. Hori ekiditeko, ezarpen hauek gehitu behar dituzu VM konfigurazio bati VMware vCenter erabiliz
(Urrats honi buruzko xehetasun gehiago VMware KB 78094 atalean aurki daitezke).
Editatu ezarpenak leihoan, hautatu VM Aukerak fitxa eta, ondoren, egin klik Aurreratua.
Konfigurazio-parametroak atalean, egin klik Editatu konfigurazioa, hautatu Gehitu konfigurazio-parametroak aukera eta sartu balio hauek:

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-16-n intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-17-n

Intel Optane PMem eskualdeko esleipena NUMA nodoetan banatuta dagoela egiaztatzeko, erabili VMware ESXi komando hau:
memstats -r pmem-region-numa-stats

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-18-n

Sortu a file sistema OS sistemako namespace (DAX) gailuetan
Konfigurazio-prozesua osatzeko, jarraitu metalezko konfigurazio gidaren 5-7 urratsetara, 13. orrialdean hasita. Urrats hauek OS konfigurazioa nola osatu deskribatzen dute.
Bare-metal zerbitzariaren konfigurazio baten kasuan bezala, azken urratsaren ondoren VM berrabiarazteak, Ezarri SAP HANA Oinarrizko Bidea, Intel Optane PMem aktibatuko du SAP HANA erabiltzeko.
NVDIMM gailuak ondo muntatuta dauden ala ez egiazta dezakezu ndctl komando hau erabiliz:

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-19-n

Ezarri izen-espazioak "fsdax" moduan
Momentu honetan ohartuko zinen sortutako izen-eremuak "gordina" moduan zeudela. SAP HANAk behar bezala erabili ahal izateko, "fsdax" modura bihurtu behar dira. Erabili komando hau hau egiteko:
ndctl create-namespace -f -e –modua=fsdax
App Direct izen-espazioak berriro muntatzea eta file sistemak VM berrabiarazi ondoren
VMware-k erabilgarritasun handiko (HA) funtzionaltasuna gaitu zuen vSphere 7.0 U2-n Intel Optane PMem gaitutako SAP HANA VMetarako.1 Hala ere, datu-transferentzia osoa bermatzeko, urrats gehigarriak behar dira Intel Optane PMem SAP HANA erabiltzeko prestatzeko, automatikoki izan dadin. birkargatu datuak partekatutako biltegiratzetik (ohiko) hutsegitearen ondoren.

Urrats berdinak aplika daitezke App Direct izen-eremuak berriro muntatzeko eta file sistemak VM bat berrabiarazi edo migratzen den bakoitzean. Ikus "Eskuragarritasun handia ezartzea VMware vSphere 7.0 U2-n SAP HANArako Intel® Optane™ memoria iraunkorrarekin" (intel.in/content/www/in/en/architecture-and-technology/vmware-vsphere-ha-sap-hana-optane-pmem.html) xehetasun gehiagorako.

irtenbideak

Zergatik zabaldu SAP HANA VMware soluzioetan?
VMware-k SAP HANA ekoizpen-laguntza izan du 2014az geroztik eta 2012az geroztik ez-ekoizpen-laguntza.

Eskalagarritasun handia SAP HANArako x86 lokaleko hipervisoreentzat

  • Ostalari laguntza 768 CPU logiko eta 16 TB RAM
  • SAP HANA eskalatzeko gaitasunek 448 vCPU eta 12 TB RAM dituzten socket zabaleko zortzi VM onartzen dituzte.
  • SAP HANA eskalatze-gaitasunek 32 TB-raino onartzen dute
  • SAP HANA birtuala eta SAP NetWeaver® VM bakar baten errendimendu desbideratzea SAP estandarrak gainditzeko ziurtagiria duten bare-metal sistemetara
  • SAP HANA lan-kargan oinarritutako tamaina-laguntza osoa
  • Bide-orrian: 18 TB Intel Optane PMem SAP HANA sistemak

Intel x86 hardware eta hornitzaileen laguntza zabalena SAP HANArako

  • Intel CPU nagusi guztien laguntza:
    • Intel Xeon prozesadore v3 familia (Haswell)
    • Intel Xeon prozesadore v4 familia (Broadwell)
    • 1. belaunaldiko Intel Xeon prozesadore eskalagarriak (Skylake)
    • 2. belaunaldiko Intel Xeon prozesadore eskalagarriak (Cascade Lake)
    • 3. belaunaldiko Intel Xeon prozesadore eskalagarriak (Cooper Lake)
    • 3. belaunaldiko Intel Xeon prozesadore eskalagarriak (Ice Lake, abian)
    • 4. belaunaldiko Intel Xeon prozesadore eskalagarriak (Sapphire Rapids, abian)
  • 2, 4 eta 8 socket zerbitzari-sistemetarako laguntza
  • Intel Optane PMem laguntza osoa
  • SAP hardware-kide nagusi guztien vSphere-rako laguntza, bai lokaleko inplementazioetarako, bai hodeian

eranskina

Aukerako urratsa: gaitu ipmctl UEFI shell-en
Intel Optane PMem konfiguratzeko BIOS menu-sistemarik ez badago, UEFI CLI oraindik ere erabil daiteke VMware ESXi-n exekutatzen den SAP HANA erabiltzeko sistema bat konfiguratzeko. Goiko 1. urratsaren baliokidea exekutatzeko, UEFI shell bat gaitu daiteke abioan ipmctl kudeaketa-erabilgarritasuna CLItik exekutatzeko:

  1. Sortu abiarazteko UEFI shell USB flash unitate bat FAT32-rekin file sistema.
    Oharra: Sistemaren hornitzaile batzuek abiarazteko aukera eskaintzen dute UEFI shell-a abiarazteko menutik sartzeko, eta, kasu horretan, aukera duzu USB flash-unitatea abiarazi behar ez izateko edo beste biltegiratze-gailu bat UEFI shell-etik erabilgarri erabiltzeko. Xehetasunetarako, kontsultatu zure dokumentazio espezifikoa edo laguntza-baliabidea.
  2. Kopiatu UEFI exekutagarria file ipmctl.efi Intel Optane PMem firmware paketetik flash unitatera (edo aukeratutako beste biltegiratze-gailura). Berriro ere, zure sistemaren saltzaileak Intel Optane PMem firmware paketea emango du zure sistemarako.
  3. Abiarazi zure sistema UEFI shell-ean sartzeko.
    Abiarazitako USB flash drive baterako, pauso tipikoak hauek izango lirateke:
    • Konektatu USB flash drive ostalariaren USB ataka ireki batean eta piztu.
    • Sartu Boot menuan abiaraz daitezkeen iturri guztiak bistaratzeko.
    • Hautatu abiarazteko UEFI shell USB flash drive.
  4. Hautatu file zure diskoaren sistema eta nabigatu impctl.efi-ren bidera file kopiatu zen.
    Abiarazitako USB flash unitateetarako, askotan file sistema FS0 da, baina alda daiteke, beraz, saiatu FS0, FS1, FS2 eta abar.intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-20-n
  5. Exekutatu ipmctl.efi laguntza erabilgarri dauden komando guztiak zerrendatzeko. Informazio gehiago lortzeko, ikusi "IPMCTL Erabiltzailearen Gida". Sortu App Direct eskualdeak
    Erabili Sortu Helburua komandoa Aplikazio Zuzeneko Modurako konfiguratutako eskualde tartekatu bat sortzeko:
    ipmctl.efi create -goal PersistentMemoryType=AppDirectintel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-21-n
    Osatu memoria hornitzeko (sortu helburua) prozesua zerbitzaria berrabiaraziz ezarpen berriak gaitzeko.
    Berrabiarazi ondoren, sortu berri diren DIMM-interleave-multzoak Aplikazio Zuzeneko Moduaren gaitasunaren memoria iraunkorreko "eskualde" gisa irudikatzen dira. To view eskualdearen konfigurazioan, erabili Zerrenda Eskualdeak komandoa:
    ipmctl show -region

Komando honek irteeraren antzekoa itzultzen du:

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-22-n

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-23-n intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-24-n

Dokumentuak / Baliabideak

intel Optane Persistent Memory eta SAP HANA Plataformaren konfigurazioa VMware ESXi-n [pdfErabiltzailearen gida
Optane Persistent Memory eta SAP HANA plataformaren konfigurazioa VMware ESXi-n, SAP HANA plataforma-konfigurazioa VMware ESXi-n, plataforma-konfigurazioa VMware ESXi-n, VMware ESXi-n konfigurazioa, VMware ESXi

Erreferentziak

urtean argitaratuaIntel

Utzi iruzkin bat

Zure helbide elektronikoa ez da argitaratuko. Beharrezko eremuak markatuta daude *