Adding table generation from simple textfile

Original idea stems from dependencies.py in a site which organized a table
from a formated textfile. At the time just from the body of the table.
This version can have a labeled header row in the begining and entries
that are links, with or without title. Title is denoted httplink|title.
For extra text more work is needed. Can only do one word titles for now.

Failed lookup does not fail, just do not generate Coords.

A failed lookup used to fail with an error message. That in turn,
disturbs treecutter. Now if Coordinates are not found a Coord element
is not generated. The None values in the Address are converted to ''
or filled by a successful geocode.
Functions c and s needs refining. Empty elements are kept or
destroyed with the clean_db function.

clean_db function can clean code to become invalid xml so
use carefully. clean_db and the s/c functions will have
to be put in a docbook/lxml module at some point.

Enable geolocation of address, adding sorting.

Enabled addition of Organization with Address from the Location field.
This information is geocoded and if found displayed.

Sorting was added to sort event objects, change from the earlier
list of event dictionaries.
Pretty printing turne off not to preformat docbook addresses.

Creating objects, switching to lxml, made main callable

Rewrote to use objects for Events and Event.
db_xml generation with lxml.
commandline callable using the __main__ setup

Contact as Person and Organization object, callable using lxml

The contact processing was rewrited to objects, using lxml for
xml generation. It is also callable from the commandline.
One difficulty is with assigning vCard data to the correct object.
Ex, a telephone number to an address or person.
Currently works well enough to be used in non trivial sites.

Objectified Coord and Address methods, made it main callable

Rewrote the classes to use internal data for their methods, fixed sizing
of the png images (made the size really settable).
Geocoding does try several times with different strings before failing.
Address is also now directly callable for simple addresses, without
contact.

Renaming calendar to events due to naming collision in vobject.

Switching to ElementMaker from Element/SubElement

Adding the lxml docbook namespaces.

Refactoring const to constants, to provide for lxml docbook namespaces.

Adding an initial calendar implementation.

This calendar was developed in another git to begin with.
It worked for displaying a calendar from apple calendar server.
This will be a base for a rewrite.

Adding distance calculation to the Coord class

Starting to refactoring the part for plotting muliple coords.

Adding docbook namespaces again

Refactoring later to move docbook xml generation to a helper class.

Adding classes Address and Coord, moving functions into the classes.

Creating two classes to deal with Coorinates and Addresses.
An address has a coordinate but a coordinate can also be used
by it self. Some helper functions were also moved from contact
as a contact also has addresses and coordinates.

Removing StaticOpenStreetMap building real addresses

Instead of concentrating on OpenStreetMap we rebuild the class
to do addresses with coordinates and the occational picture if needed.

Renaming addr to a more proper name, will be used to do all address tasks.

Adding fonts directory to resources.

This is to include fonts to a site, puting the fonts in a separate
directory than the css.

Display xpointer details to simplify debugging.

If there are several xincludes in a document and several
translations it is hard to find the xinclude call that failed.
Priting the xpointer helps localize the problem.

Initial code to build static images from addresses.

This code was developed over time, for the contact.py images.
Parts of it might be replaced by pythonstructures and it migth move
to a separate package if useful.

Fixing UTF-8 encoding for the foreign texts and characters.

Fixing whitespaces for the docbook address.

This is just to properly format the information in the html display.
Could probably be solved elsewhere.

Switching to address based map generation. Divided to subroutines.

The generation was geo: tag based but as there is only one tag per
vcard I switched to address lookup instead.
There are problems with CZ village addresses, and some missing
address tags that has to be added to openstreetmap, but it is a
better longterm solution.

Changed time to be imported and made xinclude execute in the correct directory.

Adding a opening hours parser, creates a table from a simple string, with translations

Adding initial xinclude for converting selected VCARD to docbook.

Currently reading a VCARDs file, selecting a VCARD based on the
commandline query, and converts it to docbook.
Initial tests with a few VCARDs work. If an address has 2 telephone
numbers, currently only the first is displayed.
If there is only a telephone number and no address, it will not
be displayed in this version.

Removing debug printout.

Adding initial plugin support for xincludes in documents

Using the pkg_resources to package xinclude scripts that can be
generaly usable. Initial tests works and once more scripts are
adapted they will be added.

Fixing the def main function, properly calling it from treecutter.

There are several ways to do this in python and it can be that
it has to be redone. seems to work for now.

Adding initial bin/treecutter, and setup.py and package files.

Refactoring, using const, removing global variables, passing some new arguments.

This phase was to clean up the use of output and style in several places.
Now passed as arguments to the sections where it is needed.
Tempfile creation also localized.

Refactoring, cleaining up imports, setting filemode

Refactoring out every class into separate files. main,tools and const are not classes.

Preparing refactoring the single source into a python structure

Initial support for providing command line arguments to scripts via xpointer.

Accept-Language is also used to provide the script with the wanted language.
For calendar server in first line. For example the language of the country tag.
Roads and telephone numbers are pretty language independant, but country names not.
There might be other tags as well that has different value per language.
The xpointer is "abused" to provide a pointer into the run script.

Adding omit_xml_declaration=True to amara call, but does not yet work, considering to move to lxml or similar.

Added missing ) to ssh_cmd call

Adding target directory and readability with ssh_cmd

Making sure that the target directory exists and that it is
readable after rsync. ssh_cmd added to simplify the call, but is
currently limited to commands with two arguments plus directory.
Can be generalized. subroutine call used to not need to add extra
dependencies at this point.

Adding initial support for html forms.

Chaning & to xml representation.

Adding docbook.xsl for tree-cutter processing

Converting the template to work with tree-cutter, adjusting paths, adding template variables.

Moving css files to a subdirectory, renaming index.html to template file.

Change execute permission on index.html and style.html

Reindent css and convert from DOS format to unix format.

Reindent html and convert from DOS format to unix format.

Added template from freehtml5templates.com/awesomesauce-html5-and-css3-template/

Removed the initial version of tree-cutter.py after refactoring to use objects.

Added total timings.
The removed part has not been in use for quite some time and this was the final cleanup.

Using translated cheetah templates, allowing - in filenames.

Adding shutil for the copying.

Fixing sitemap generation, language menus and resource copying.

Adding a css mark for the top menu.

Fixing script execution path for current directory, fixing missing page printout.

Adding initial language menu support. Adding method lang_menu. Changing templates.

Link needs to be properly intergrated to the html href, translation
started earlier in sitemap and saved per language.
'en' special case as it is the original language of iso_639_3.xml

Updating templates with a Language menu item instead of a Level name
Levelname can be maintained in the template, translations are dynamic
as more pages in other languages gets created.

Problems will arrise when a language page is missing. This is first tests.. :)

Fixing missed namechange of variable.

Added total timing to compare old for loop to Sitemap process method.

Adding method process and publish to mimic the old scripts stages to publish.

Timing added to make sure that the Sitemap class is not slower.

Adding method to write a sitemap.txt and writing it when something changed.

missing & removed sets controll if we need a new sitemap.txt

Adding gen_menu method also in Sitemap.

Implementing generation of a menu, currently only the full menu with and without Page marker.

Fixing the inorder iterator. Did not recurse deep enough before.

Adding several stage methods in Link that propagates to the Page below.

Adding some getters and setters to Class Page.

Moving the creation of tmp directory to before the new Class structure.

To be imbedded later.

Adjusted references to doc to self._doc.

Commenting out printing of the digraph for sitemap.

Will need a cleanup once decided on how graphviz will be used.

Adding a simple iterator to the Trie class, now the set operations
on the links in the tree works again.

Added gen_menu stub in sitemap that will generate menues from a prepared sitemap.

Initial layout of what work the Page object has to do, based on non object version.

prepare method to collect all information from the bindery, and to splice in
results from scripts on the page.

render method to do the xsl stylesheet conversion of the docbook xml to html

template method to create html menues and merge the text into the template.

from order, the template for one page can not run before all pages have
run prepare. (sitemap does not have all titles before that)
Solution for language menu and how to deal with a missing page for
a language has to be implemented.

Adding mapping Sitemap -> Link -> Page to deal with Content-Language
and other representation of a page at the same link.

Tree does not have an iterator, hence the link set will not currently work.
The Page object will do conversion, and templating, preparing menues
as all that work is language dependant. Link matches sitemap.txt entries
and matches the Directory object.

Initial refactoring to use objects. Simple trie implementation to better
support the sitemap structure. Initial tests of the objects but
still keeping the initial working code.

Properly indenting the code, using /usr/share/doc/python2.6/examples/Tools/scripts/reindent.py

Adding initial sitemap, differentiate class directive in tree building.

Fixing regexp to treat /xx special.

rsync also removes target files that should not be there.

Adding functionality to publish linked documents. link xlink:href and imagedata fileref.

Changes due to that rsync does not create target with mkdir -p

Added a staged publish function in /tmp to be able to provide
a simple rsync target functionality. This to enable output exported
over ssh at a later stage.

Improving status report, changing to rsync by adding function publish for output.

Changing css references to /css, and js to /js as relative linking does not work with deeper levels.

Changing the references to images to /images as relative linking does not work
with deeper levels.

Whitespace and indetation changes.

Adding argparse to arguments --style and --output.

Remove $site, in favour for site. site should not be a template variable.

Initial docbook.xsl a copy of style/freggies/docbook.xsl

Add docbook extension stylsheet to controll the apearance of the docbook
document.

Currently it just takes and forward the root, dropping the <html>
declarations leaving only the original article.

Renamed index.html to index.en.html.tmpl and adding templatestrings.

Removing the x bit from license.txt

Moving css to a separate directory.

Moving stylesheets to a separate directory.

Removing example article text and example navigation.

Corrected indent and whitespace. Validates now with nxml html5.rnc rules.

Fixed invalid range check of index.

Fixed the problem of index overflow when no lesser level exist at the end.

Whitespace fixes (emacs mode detected and fixed them)

Adapting tree-cutter.py to deal with language codes in the filenames.

Added template from freehtml5templates.com/bluenightsky-html5-and-css3-template/

Adding template from freehtml5templates.com/adropabove-html5-css3-and-jquery-template/

Adding template from freehtml5templates.com/turquoiseswirls-html5-and-css3-template/

Added template from freehtml5templates.com/freggies-html5-and-css3-template/

Temporarilly fixed the directory problem. runs in doc, with style and htdocs ..

Should be made configurable and a standard path should be decided..

Added xsltproc test, 10x faster. Need to check output.