[Devel] obm

[Bán Miklós]

Kedves Zoltán,

nagyon nagy örömmel olvastam a leveledet!

Ez igazán fantasztikus, hogy ilyen alaposan átnéztél mindent. 
Valóban van sok munka és még több terv!! :)

Az OpenBioMaps projekt kb. 7 éve megy, azóta fejlesztem folyamatosan és
egyre nagyobb intenzitással. A projekt célja egy olyan szabadon
elérhető és felhasználható adatbázis keretrendszer építése és
üzemeltetése, ami lehetővé teszi természetvédelmi és biológiai kutatási
adatok kezelését, megjelenítését és megosztását. Ebben a formában a
világon egyedülálló projekt és erősen hiánypótló. A projekt végső
célja, hogy kapcsolatokat teremtsen a közösen használt technikai
eszközöknek köszönhetően természetvédelem, kutatás és oktatás között.

Írtad, hogy a gekkóval voltak gondjaid és a mobil-appal is.
A mobil app iránti érdeklődés nagyon nagy és ott állunk a legrosszabbul
fejlesztőkkel. A jelenlegi java app verzió egy béta kiadás, ami még csak
az egyik szerverrel működik és különösen nem a gekko (vbox) kiadással a
szerver oldali beállítások miatt.
A debian repo kifejezetten a gekko frissítésekhez készült. 
Sajnos sem gekkó kiadás, sem a debian repo hozzá nem up-to-date. Ehhez
vannak sablonjaim, meg szkriptek amikkel csinálom őket.

A teljes web kódnak van egy zárt git repója. Ha küldesz egy ssh
public kulcsot, akkor felveszlek rá és onnan le tudod szedni az
up-to-date kódot. Ez egyelőre nem a githubon van, de az a terv, hogy
rövidesen ott is kinn lesz. 

Egyelőre ebből a zárt gitből közvetlenül frissítem a szerverek
többségét. Egy szerveren (milvus) viszont van egy köztes teszt szerver.
Ha kimegy publikus gitre a kód, akkor a többi szerver elé is be kell
rakni egy teszt szervert, hogy ne töltsünk fel hibás kódokat a
szerverekre. Talán emiatt egyszerűbb egy kontrollált commitelés
használata, ha lesz publikus GIT.

Magamról én is pár szót: biológus vagyok, fő elfoglaltságom szerint
ökoinformatikus, azaz olyan informatikus biológus, aki biológiai
problémák informatikai megoldásait fejleszti. Kizárólag nyílt kódú
dolgokkal foglalkozom és Linux környezetben. Ezen belül is, a legtöbbet
az OpenBioMaps alkalmazás fejlesztésével töltöm az időmet. R, perl,
php, bash a fő nyelvek.

A lelkesedésed, hogy részt vegyél a projektben nagyon jól hangzik, de
azért írok pár gondolatot a finanszírozási dolgokról.
Nincs állandó finanszírozás a fejlesztés mögött. Akkor van pénz amikor
valamelyik nagyobb felhasználó, vagy partner fizet. Mások hiányában
leginkább engem szoktak felkérni, hogy egy-egy évre vállaljak
támogatást egy-egy adatbázishoz. Ez az eddigi nem túl sok adatbázissal
is szinte folyamatosan adott munkát/fizetést. Ezzel azt akarom mondani,
hogy nagyon örülök minden önkéntes hozzájárulónak, de azért arra is
lehet számítani, hogy ezért még fizetést is lehet kapni előbb-utóbb.

A közeli fejlesztési terveim a következők (a folyamatos javítások és
apróbb fejlesztések mellett):
- dokumentációs lap készítése a sphinx rendszerrel, valahogy git
  háttérrel.
  http://www.sphinx-doc.org/en/master/
- openlayers 2.14 lecserélése OL 4.x-re (http://openlayers.org/).
- Gépi tanulásos algoritmusok alkalmazása hibás adatok keresésére:
  Ez a az egyes feltöltéseket elemezné a már feltöltött adatok alapján
  minden egyes attributum oszlopra és a felhazsnálóktól kérne
  megerősítéseket, hogy az egyes adatok jók, vagy sem. Az a tervem
  vele, hogy a triviális hibákat hamar megtanulja a rendszer és
  releváns kérdéseket tesz fel, amivel jelentősen lehet javítani az
  adatbázisok minőségét. (valójában ezzel szeretnék a legtöbbet
  foglalkozni és erre próbálok saját forrást is keríteni egyetemi
  oldalról)
- PostgreSQL 9.6-ra áttérés. 
- Adatfeltöltéskor dinamikus sql temporary táblák használata memóriába
  pakolt táblák helyett.


üdv, Bán Miki


On Sat, 03 Mar 2018 19:37:34 +0100
Zoltan Gyarmati <zgyarmati at zgyarmati.de> wrote:

> On Thursday, March 1, 2018 8:42:49 AM CET Molnár Dániel wrote:
> > Sziasztok,
> > tegnap mindkettőtökkel beszéltünk róla, hogy összekötlek titeket az
> > Openbiomaps fejlesztése kapcsán. Sikeres együttműködést kívánok!
> > Üdv, D
> > 
> > Molnár Dániel
> > ökológiai referens
> > Duna-Dráva nemzeti Park Igazgatóság
> > 72/517-219
> > 30/2897401  
> 
> 
> Udv,
> 
> @Daniel, kosz a szervezest!
> 
> @Miklos,
> 
> nem tudom Daniel mit hiresztelt rolam, annyi a hatter hogy egy
> tavalyi mecseki tura alkalmaval segitettem neki bazsarozsa
> lelohelyeket rogziteni (ami vegulis abbol allt hogy a turan
> keszitett, GPS-tagelt fotok EXIF infoit egy improvizalt Python script
> segitsegevel kigyujtottem egy .kml file-ba es atadtam neki), aztan ha
> mar felmerult, beszelgettunk arrol hogy milyen infrastrukturajuk van
> egyaltalan az ilyen adatok rogzitesere es feldolgozasara. Mint
> kiderult, nem sok, igy adta magat az otlet hogy akar epiteni is
> lehetne, aztan itt meg is allt a dolog  :) Igy aztan mikor
> elkezdtetek egyuttmukodni, Danielnek eszebe jutott hogy esetleg
> kozremukodnek-e, itt vagyunk most. 
> 
>  Magamrol diohejban: szabaduszo szoftverfejleszto vagyok, ennek
> megfeleloen csinalok mindent ami epp az aktualis projekthez
> szukseges, de a fo teruletem a beagyazott Linuxos rendszerek epitese
> es/vagy nativ GUI-k fejlesztese C ++-ban, Linux
> rendszeradminisztracio, CI rendszerek, stb. Ahogy kitalalhato
> legtobbszor nyilt forraskodu technologiakat hasznalok, es persze
> kozre is mukodok egy par nyilt forraskodu projektben. 
> 
> Kicsit beleneztem ma az OpenBiomaps rendszerbe egyreszt  a Githubon
> levo repokat, masreszt meg a "gekko" VM image-t alapul veve. Sikerult
> nem szenvedes aran felraknom localhostra a webappot (egy, a VM-bol
> dumpolt adatbazissal) , sikerult uj megfigyelest feltoltenem a webes
> GUI-n, de azt mar nem sikerult osszehoznom elso nekifutasra hogy az
> Android approl is tudjak feltolteni eszlelest a sajat projektembe.
> (eleve be se tudtam loginolni, elszallt az app, nem alltam neki
> debugolni,  majd alkalomadtan).
> 
> Ahogy nezem van a projektben munka boven, szoval gondolom elkelne par
> segito kez :)
>  Sajnos a webfejlesztes nem erossegem, kulonosen nem PHP-ban, de azt
> hiszem kozre tudnek mukodni par deploymentet erinto dologban, mint pl
> a webalkalmazas .deb (latom van de eleg hianyos) es .rpm csomagolasa,
> Docker kontener osszeallitasa, azekhez CI infrastruktura epitese,
> automatikus tesztek implementalasa, install processz dokumentalasa,
> stb...
> 
>  A webalkalmazas git repojat  nem talalom se Githubon se mashol,
> elerheto az is valahol publikusan?
> 
>  Feliratkoztam kozben a 'devel' levlistre, szoval akar ott is
> folytathatjuk.
> 
> Legjobbakat,
> 



-- 
Miklós Bán, PhD
MTA-DE "Lendület" Behavioural Ecology Research Group
Department of Evolutionary Zoology, University of Debrecen
H-4010 Debrecen, Egyetem tér 1.
Phone:  +36 52 512-900 ext. 62357
http://zoology.unideb.hu/@Miklos_Ban
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~