#lost · 2016-09-30
714 Nachrichten · Seite 2 von 4 · Original-CSV herunterladen
- MasterQ32gute frage, ich glaube eher C11
- Sofaes gibt was neueres als C99?
- Sofaich meine noch die GNU extensions, aber allein schon wegen clang benutzt man die ja tendenziell eher nicht
- MasterQ32ne, C11 :D
- MasterQ32C11 ist neuer, kam mit C++11
- MasterQ32https://github.com/MasterQ32/SuperVM/tree/master/code/common/
- MasterQ32in dem ordner brauchst du eigentlich nur vm.c und vm.h
- Sofamacht die VM auch 64bit pointer?
- Sofaund was ist mit threading
- MasterQ32ne, die kann nur 32 Bit
- Sofahm ok dann ist leider eher uninteressant fuer mich
- MasterQ32threading musst du selbst implementieren, das ist nur ein core
- Sofavllt muss ich doch einfach selber was bauen
- MasterQ32wofür brauchst du 64 bit in einer VM? :D
- Sofafuer normale programme. wer will denn noch programme mit 32bit-pointern schreiben?
- MasterQ32ich würde mir sorgen machen, wenn user auf meinem server >= 2 GB ram mampfen will
- Sofadann geht ja nix ueber 4GB speicher
- MasterQ32:P
- Sofaachso verstehe
- Sofaja fuer sandbox mag das seltsam erscheinen
- Sofaaber ich will das gesamte programm darin ausfuehren
- MasterQ32ansonsten: du kannst die CPUarch sicher für 64 bit locker erweitern
- MasterQ32guck dir mal den code an
- Sofaalso auch das, was als server aussenrum laeuft
- Sofahm
- Sofavm_write_byte erscheint mir fuer threading schonmal ein fundamentales problem zu sein
- Sofaweil das ist dann wahrscheinlich nicht atomar
- Sofatheoretisch kann man ja bis zu 64bit meines wissens auf x64 atomar schreiben/austauschen/.. und das will man eigtl. schon haben
- Sofasonst muss man bei simplen zahlen auch schon mega das locking betreiben, und dann kriegt man kein schnelles threading hin
- darklinkDas kann man hinzufügen
- Sofadas ist wahr
- MasterQ32joar du kannst das aber auch alles erweitern, die ganze VM ist imho supertrivial
- MasterQ32sind ja auch nicht allzu viele instructions
- MasterQ32ich hab halt ne CPU, die atomar nur auf Bytes zugreifen kann
- kevinWenn er die ganzen existierenden VMs ausschließt, weil sie zu langsam sind, dann ist deine aber vermutlich nicht die Lösung dafür
- kevinDas war ja ein reiner Interpreter, wenn ich das noch richtig weiß
- MasterQ32jau
- darklinkEs gibt JITpython
- darklinkzwar nur für python2
- Sofaparrot oder moarvm hat hier wahrscheinlich noch niemand benutzt, nehme ich an?
- MasterQ32nope
- JonathanSofa: Wenn du ein ganzes Programm in einem "Container" ausführen kannst, aus dem dieses nicht ausbrechen kann, wäre eine Lösung dann nicht einfach ein... Prozess?
- Sofane nicht wirklich, zu viel overhead
- JonathanWarte mal. *g*
- MasterQ32hö?
- MasterQ32fork!
- Sofasonst koennte ich ja einfach docker nehmen
- JonathanIch meine:
- JonathanEinen ganz normalen OS-Prozess.
- Sofaja ic hauch
- JonathanDen lässt du als eingeschränkter User laufen, und wo ist dann das Problem?
- JonathanÖh
- JonathanAlso, du willst ein Programm in einer VM in einem Prozess starten, und das hat dann weniger Overhead, als ein Programm in einem Prozess?
- JonathanErklär!
- Sofawenn du sehr oft dinge abwuergen moechtest mit limits, ist das dann deutlich billiger ja
- JonathanWas für Limits...?
- SofaV8/js von google hat dasselbe problem, da musst du immer den ganzen interpreter lahmlegen und nen neuen prozess aufmachen, wenn du was anhaelst
- Sofaich moechte gerne laufzeit- und speicherlimits haben
- Sofaauch was, was man sowohl bei coding games, website, ... haben will
- Sofaaber gerade bei coding games ist es dann sehr unpraktisch, wenn das abwuergen teuer ist
- Sofa(weil man im zweifelsfall sehr viele einheiten im spiel hat die alle code ausfuehren, sodass das pro frame ziemlich heftig werden kann, wenn man da staendig mehrere prozesse recyclet)
- Sofawahrscheinlich muss ich doch einfach ne VM selbst bauen :p
- Sofaoder die von MasterQ32 anpassen
- JonathanAlso möchtest du nun doch kein ganzes Programm laufen lassen?
- Sofawobei ich glaube mit etwa JVM waere alles umsetzbar
- Jonathan(Also kein eigenständiges)
- SofaJonathan: ja also die idee ist, dass das programm selber in dieser bytecode-vm laeuft, aber "unterprogramme" von z.b. nutzern mit weniger rechten und haerteren limits ausfuehren kann
- Sofaund das will ich moeglichst ohne weitere kindprozesse machen, wegen overhead und so
- Sofadamit das moeglichst billig zu nutzen ist
- kevinFang das mal andersrum an: Welches Problem löst die VM?
- kevinMir sieht das im Moment danach aus als hättest du eine Lösung und suchst das Problem dazu
- JonathanMagst du uns vielleicht einfach mal den konkreten Use-Case nennen, für den du eine Lösung brauchst?
- Sofaein coding game
- Sofamit ner grossen menge an einheiten, wo ich den code auf jeder abwuergen kann ohne zu viel overhead
- JonathanAlso hast du ein Spiel, in dem verschiedene Nutzer ihren Code eingeben und ausführen kann?
- Sofagenau
- Sofaich moechte aber fuer den server selbst diesselbe sprache nutzen, deswegen will ich nichts zu langsames haben (etwa nen billigen interpreter)
- JonathanÖh, das klingt für mich nach ner sehr schlechten Idee.
- kevinWieso sollen die dasselbe nutzen?
- Sofaauch weil dann die spieler komplexeren code machen koennen und so. ist einfach praktischer, wenn es schneller ist
- MasterQ32https://puu.sh/rsS2Z/e225019da8.png
- MasterQ32ich kann argumente zählen! :D
- JonathanSo, jetzt mal von vorn:
- Sofanaja das ist im grunde wie wenn man in nodejs ein javascript-coding-game bauen wuerde. das ist ja jetzt auch nicht grundlegend absurd
- JonathanDu hast einen Server, auf dem Leute Code eingeben können, der dann irgendwie restricted ausgeführt werden soll.
- Sofadie VM ist ja da auch dann ein C-teil, aber der server selbst sowie spielercode teilen sich die sprache
- Sofagenau
- JonathanGibt es.
- Sofajo ist mir schon klar, dass das irgendwer irgendwo schon gemacht hat :)
- JonathanMir ist klar, dass du das weißt, aber ich meine: Die haben sicherlich auch schon ihre Tools und Methoden.
- Sofadie meisten implementationen sehen aber nicht so super-sicher aus (sind etwa z.b. mit lua gehackt)
- Sofaoder sind eben interpretierte sachen, die eher langsam sind
- Sofadeswegen mein ansporn hier, mal was neues zu bauen :-)
- JonathanNaja...
- JonathanInterpreter = Große Kontrolle über den ausgeführten Code. Compiler/JIT = Da kann auch schnell mal was schief gehen.
- MasterQ32ich versteh auch nicht ganz, was du gegen lua hast?
- SofaMasterQ32: es gibt keinen sicherheitsgepatchten LATEST davon, stattdessen eine bugs-seite die halb versteckt ist mit .patch-zeug direkt im seitentext zum kopieren und manuell patchen
- Sofawenn was kaputtgeht, landet das nur da und man kriegt keinen neuen tarball
- Sofaals folge ist lua in 99% der faelle nicht aktuell sicher gepatcht auf distributionen, weil die maintainer das auch nicht zeitnah machen
- Sofazusaetzlich zu dem sagen die entwickler noch, dass lua sowieso nicht fuer sandboxing benutzt werden soll und sie nicht speziell darauf achten, dass das sicher moeglich ist
- Sofamit dem allem zusammen will man das eigentlich nicht dafuer nutzen, wenn der server dann irgendwie oeffentlich laeuft
- Sofadann doch lieber was interpretiertes langsames
- Sofaoder eben was komplett dafuer gebautes
- JonathanSofa: Dann bau doch einen "sicheren" Lua-Bytecode-Interpreter?
- Sofajo das koennte man schon auch machen
- Jonathan(Und nein, schreib deinen Server dann nicht in Lua.)
- Sofawarum nicht? lua ist ziemlich flott
- JonathanÖh, nicht wirklich.
- Sofaaber meine idee war urspruenglich auf javascript zu gehen, und den code mit limit-checks zu instrumentieren
- Sofalua ist schneller als python oder ruby
- Sofadas sollte fuer ein coding game schon ausreichen
- JonathanAlso gut, für ne Skriptsprache ist es flott, aber nen Server willst du trotzdem lieber in C++ oder Java oder so schreiben.
- Sofa(standardlua bereits, nicht luajit)
- JonathanAußerdem:
- Sofaan java kommt es nicht ganz ran, aber es ist auch nicht gewaltig langsamer
- Sofazumindest luajit sollte da in aehnlicher groessenordnung sein
- JonathanHalbwegs komplizierte Server in Lua schreiben ist Krätze, hab ich selbst schon festgestellt
- Sofageht. hauptproblem ist halt das fehlende OOP
- JonathanUnd die fehlende Typsicherheit
- Sofaaber da kommen wir schon dazu, warum ich sowieso lieber was baue, was ich geeigneter finde :) lua ist einfach nicht sonderlich huebsch, javascript auch nicht
- JonathanLua ist ne hübsche Skriptsprache. *Skript*-Sprache. :P
- SofakA ist halt dank managed etwas langsamer, aber fuer nen spieleserver IMHO mehr als schnell genug. OpenRA ist ja etwa komplett in C# und laeuft superflott
- Sofahaengt also letztendlich daran, ob einen dynamische typisierung im server stoert
- Sofaaber das will ich hier ungern diskutieren, das geht dann immer ein paar stunden und ist etwas off-topic :D
- JonathanAnsonsten gibt es auch noch viele Java-Implementierungen von JavaScript, aber die sind auch sau lahm ;)
- Jonathan(Mit Rhino hab ich mal Vorlieb nehmen wollen, es dann aber wieder sein lassen)
- Sofaja und ein bekannter von mir hatte da was mit harten zeitlimits in rhino geschaut
- Sofaund er meinte, ohne das umzupatchen waere das nicht so leicht moeglich (anders als in lua)
- Sofaund das ist dann auch wieder unschoen, wenn man das schon fast so halb forken muss
- JonathanThread.interrupt()?
- Sofaalso das problem ist meistens, wie man den kontext sauber zukriegt und so dinge, ohne den ganzen prozess wegzuwerfen
- Sofaund ohne dass der fehler abgefangen werden kann
- Sofaaber er hat das angeschaut, ich hab da selbst nicht so genau draufgeguckt
- Sofa(auch weil ich JS keine sehr schoene sprache finde, auch zum einstieg nicht. "5" == 5 und so sachen)
- Jonathan*g*
- Sofapython macht ja etwa auch dynamische typisierung, aber dann ohne solch komisches duck typing
- JonathanIch hätte hier auch einen selbst gebastelten Scheme-Interpreter (bzw. so ein Hybrid-Ding zwischen Interpreter und Compiler), das ich relativ weit auf Performance bekommen habe
- JonathanIn Java geschrieben
- Sofahm ja sowas werde ich halt wahrscheinlich doch machen muessen
- Sofaich werde da mal noch etwas drueber nachdenken
- JonathanHm ;)
- Sofamuss mir nochmal all meine optionen etwas genauer anschauen
- Sofaaber wahrscheinlich ist so ne bytecode VM in C doch am geeignetsten
- JonathanMein Interpreter parst den Input in einen schönen Parsetree und kann den dann interpretieren
- JonathanDas geht ganz flott
- JonathanEr hat auch ein Interface, um auf Java-Methoden und -Typen zuzugreifen
- Sofajo aber mit C kriegt man das schoener gepackaged fuer den nutzer, und ausserdem wahrscheins auch nochmal n kleines eckchen flotter
- JonathanMit Scheme können die meisten wohl auch eh nichts anfangen *g*
- Sofaich wuerde gerne die bytecode-VM und direkt daran den bytecode in eine datei werfen koennen im optimalfall, damit man das schoen als ein ganzes ausfuehrbares ding ueberall hinwerfen kann
- Sofaeinfach nur als einen moeglichen vertriebsweg, wenn es an endnutzer geht und es einfach irgendwie laufen soll
- Sofadas brauch ich natuerlich fuer meinen haupt-use case ueberhaupt nicht, aber wenn ich es haben kann faende ich es schon ganz praktisch :-)
- JonathanDu könntest deinen Server in Java schreiben und Java-Code ausführen ;)
- Sofajo klar, den kann man wahrscheinlich sogar gut sandboxen, oder nicht?
- Sofaaber java ist dann schon wieder etwas zu starr
- JonathanJa, das hat Java theoretisch schon eingebaut
- JonathanZu starr...? *g*
- Sofajavascript ist viel zu labellig, aber java ist dann zu krass in die andre richtung
- Sofaja halt mit der statischen typisierung und private/public/... und interfaces und alles
- Sofaist halt recht formal im vergleich zu etwa python
- JonathanIch mag das, das hält mich davon ab, mir selbst in den Fuß zu schießen ;)
- Sofaich mag python, weil es sonst recht rigide ist (wenig duck typing) und gute fruehe fehler wirft
- Sofaund dann eben bei der dynamischen typisierung doch etwas weniger krampf und formalitaet beim coden erlaubt
- Sofaaber ich denke, das haengt auch n bissl davon ab, wie man selbst am besten coden kann
- Sofaalso wo man halt persoenlich am produktivsten mit ist, ohne krampf zu produzieren, wenn es groesser ist
- Sofaich neige bei java halt zum verkuensteln an interfaces und zur verkomplizierung
- JonathanHe, wolltest du nicht eine Sprache haben, die man gut sandboxen kann? Und jetzt meckerst du über Stil? ;)
- SofaJonathan: naja, ich bin schon viel frueher zu dem schluss gekommen, dass ich nun was baue
- Sofaund dann ist es schonn sinnvoll, sich ueber den stil gedanken zu machen :-)
- JonathanUnd das wird sicherer, als Java? :P
- Sofadie ueberlegung war jetzt nur, ob ich ne existierende VM benutze
- Sofakeine ahnung
- Sofajava hatte ja auch viele nette loecher
- Sofaaber das ist halt prinzipbedingt schwierig ohne docker oder gar KVM
- JonathanDenkst du, die wird dein eigener Code nicht haben?
- Sofaein kleines fehlerchen und man kann oft alles machen
- Sofanein
- Sofaaber wie gesagt, das ist n bissl prinzipbedingt
- Sofaund solange man das nicht wie lua faehrt und dann nichtmal zeitnah patcht, bin ich eigentlich ganz zufrieden damit
- JonathanEs gibt übrigens diverse Sprachen, die in Java-Bytecode compilieren
- Sofaman muss sich halt im klaren sein, dass es nicht fuer raketentechnologie gemacht ist
- Sofajo ist mir bekannt
- JonathanSuch dir eine aus!
- Sofaperl6 hat da ja auch ein backend fuer
- Sofanaja
- Sofadie idee ist halt auch, etwas zu bauen, womit das alles moeglichst einfach geht fuer andere
- Sofalua ist da schon recht nah dran
- Sofane fremde bytecode-VM waere prinzipiell halt trotzdem moeglich weil ich den code instrumentieren wollte fuer limits
- Sofadeswegen die nachfrage dazu :-)
- Sofad.h. ich wills nicht nur irgendwie zum laufen kriegen, sondern ich fand alle existierenden loesungen etwas unschoen oder ueberkompliziert, und hab deswegen das projekt angefangen
- MasterQ32warum compilierst du eigentlich nicht nach C und baust da einfach deine instrumentierung passend ein?
- Sofaso der typische "hmm ich denke da sollte mal jemand was bauen, womit das irgendwie cooler geht" open-source-reflex
- Sofaweil man dazu einen C-compiler braeuchte, der sicher ist
- MasterQ32inwiefern?
- Sofagcc patcht meines wissens manche fehler nicht, die durch gueltiges aber unsinniges C ausgeloest werden koennen, wenn man diese nur mit "absicht" hinkriegt
- MasterQ32ja, aber der C-Code kommt von dir
- Sofaausserdem weiss ich nich so genau, ob sich kein unguenstiges speicherverhalten beim kompilieren erreichen laesst
- MasterQ32nicht vom user
- Sofaja schon, aber indirekt halt schon
- Sofaich kann in meinem compiler nicht garantieren, dass der C-code immer super sinnvoll und fuer gcc unproblematisch ist
- Sofaich kann ja nur garantieren, dass es gueltiges C ist und gewisse, recht weite sachen erfuellt