Szia,

én (a tényleges könyvtár) indexek egy fájlt, sok termelő GB táblázatok (tömbök ellensúlyozására és hossza az adatokat indexált) későbbi újrafelhasználásra. A táblázatokat készített elég nagy is, olyan nagy, hogy elfogyott a memória az én folyamat (3GB korlát), amikor több mint indexelésének 8GB fájl, és így tovább. Bár tudtam villáját egy másik folyamat, hogy körülbelül a memória méretének korlátozására, ez nem javítja a hibát, így szeretnék dömpingelték az asztal egy fájlba, hogy a szabad memória, és elkerüljék, hogy újra index ugyanaz a fájl több nem is egyszer.

Figyelembe, hogy jelenleg a táblázatokat készített tartják memóriát egy kapcsolt listán osztani egy másik téma, hogy használja fel, hogy készítsen egy jegyzéket a szűrt adatok. Úgyhogy inkább nem változtat ezen a sémát. A másik téma hozzáférés csak a listán, ha a teljes dokumentációt indexálták.

Nos, a kérdéseket én magam is azt kérdezi:

- Mikor és hogyan a legjobb időt a dump táblákra a képet?

Dömping a táblázat nem lesz teljes egészében nem hangzik túl hatékony rám. Szeretne tartom semmi memória? A kapcsolt lista mindig üres? Ha úgy döntök, hogy az N táblázatok a memória, és a lerakó minden N, hogyan lehet elkerülni, hogy egy csekket, hogy hány tábla van
A memóriában minden ciklusban?

- Ki kell dump a metaadatok mutatni képet? Különböző szál? Ugyanaz a téma, hogy az index az adatokat? Szintén nem szeretnék, hogy a metaadatok kép, amikor a feldolgozott fájl kevesebb akkor Giga (kis kép esetén), de ugyanakkor én nem akarok összetett a kód a Indexer, hogy most is nagyon egyszerű: parse, keresse meg az adatokat, hozzon létre egy táblázat, akkor azt. Ha a tábla megtelik, hozzon létre egy másikat, és adjuk hozzá a kapcsolódó listán.

- Mondjuk gondoltam arra, (hála neked) a legjobb megoldás (az én esetemben), hogy a dump metadata. Milyen politikát kell használnom betölteni az adatokat annak érdekében, hogy a másik téma
szűrés az index adatok radikálisan változó módon működik most (pl. a kapcsolt listát)?

Az egyik megoldás az, hogy jön az agyamon, hogy elkerülhető lenne a drastical változást én séma van, hogy hozzanak létre egy listát menedzser ", ami egy interfész hozzáadása és letöltése elemet a listáról. Ez a személy (vagy egy szál vagy eljárás), akkor vigyázni vezetése néhány adat a memóriában (kapcsolt lista), és néhány más, a fájl.

Kérjük, ossza meg velem a szakképzettség és a tapasztalat! :-)

Köszönöm előre.

Üdvözlettel,
S.